천애명월도

최고의 게임 플레이어로서의 AI

 

인공지능 분야에서 바둑과 스타크래프트2에서 최초로 인간 톱 플레이어를 물리친 알파고가 은퇴는 선언했습니다. 

오늘날에도 AI 고수는 여전히 등장하고 있으며 MOBA게임을 공략한 AI는 MMORPG로 범주를 확장했습니다.

오늘 이야기의 주인공은 텐센트 AI LAB과 천애명월도 팀이 공동으로 연구하는 절대지혜라는 AI입니다.

 

기술이 발전해감에 따라 “게임을 하는 AI는 확실히 사람보다는 못하다” 라는 인식은 계속 깨지고 있습니다.

천애명월도의 절대지혜 AI가 그 중 하나입니다.

조준선수가 절대지혜 AI 쉬움과의 논검에서 패배했을 때 모두 무슨 일이 일어났는지 몰랐습니다.

과연 인간은 AI를 이길 수 없을까? 해당기자는 천애명월도 모바일 게임의 R&D팀과 텐센트 AI LAB에 연락하여 인터뷰를 진행했습니다. 

aI의 실전은 훈련장 구축에서 시작된다.

어쨌든 인간이 AI에게 지는 것은 역사에서 처음이 아니다. 그저 상대 게임이 바뀌었을 뿐이다.

많은 사람들이 이런 생각을 가지고 있습니다. 하지만 AI를 다른게임으로 바꾸는 것이 쉬울까

공동 팀 연구원들은 AI 육성과정을 공유했습니다.

천애명월도에서 절대지혜(AI)를 무적의 영웅으로 만들기 위한 첫 번째 단계는 그 훈련장을 구축하는 것이었습니다.

모바일 앱이나 컴퓨터 소프트웨어를 사용하여 게임을 하는 우리 인간 플레이어와 달리 

AI는 프로그램 형태로 서버에 살아 있습니다. 

AI와 게임, 모바일 앱, 컴퓨터 소프트웨어 사이의 언어 장벽 문제를 해결하기 위해 

연구진은 마이크로소프트의 ,Net Core를 사용하여 AI가 최적의 통신으로 여러 플랫폼을 넘나들 수 있게 만들었습니다. 

좀 더 원활하게 플레이어와 대면합니다.

절대지혜가 플레이어 선수들을 실제로 보고 배울 수 있게 많은 고민을 했습니다.

먼저 기존 프로그램에서 불필요한 요소를 제거 캐릭터 속성, 스킬 데미지 등 

게임 내 다양한 파라미터에 대한 데이터베이스를 구축하여 

절대지혜가 최소한의 부담으로 정상적으로 실행될 수 있게 만듭니다.

둘째로 천애명월도 논검은 실제 서로 다른 두 서버의 플레이어가 교차서버에 들어가 싸우게 합니다. 

이 프로세스는 6~7개의 서버에 걸쳐 있고 주기적인 데이터 전송이 필요하여 

전체 프로세스는 많은 서버가 필요하고 동시에 많은 리소스를 소비합니다.

훈련 효율성을 위해 연구팀은 AI를 서버간 서버에만 살아있게 동작하여 

필요 리소스를 절반으로 줄여 전투를 원활하게 진행하게 하였습니다. 

그럼에도 불구하고 연구팀은 수십만 AI 지속적 교육과 강화를 동시에 보장하기 위해 여전히 수백 대의 서버를 사용합니다.

마지막으로 전장도 당연히 중요하지만 관전과 다시 보기도 똑같이 필수 불가결한 요소입니다.

연구팀은 일련의 도구를 사용하여 실시간으로 AI전투 수를 모니터링하고 조정하고 있습니다.

이로서 절대지혜 AI가 서버 간 전투 및 모바일 게임 데이터도 볼 수 있는 상태가 되어 천애명월도 무술 입문 준비가 끝났습니다.

그러면 AI는 어떻게 천애명월도 정점에 서 있는 영웅이 되었는가 다음 이야기입니다.

절대지혜 AI의 신입부터 절대고수까지의 여정

 

마치 마술을 본 후에 그 숨겨진 비밀을 알고 싶은 것처럼 AI가 조준을 물리치는 것을 보고 

플레이어도 AI가 왜 그렇게 강한지 어떻게 인간을 이겼는지 궁금할 것입니다.

아래는 절대지혜가 구사한 무공 중 일부입니다

연계와 조합으로 데미지 극대화

상대의 특정 무공 시전 순간 빈틈을 찾아 빠르게 반격

 

여러 각 게임 AI는 동일한 백전백승 컨셉이지만 게임 유형에 따라 훈련 방법이 완전히 다릅니다.

절대지혜 AI는 천애명월도에서 자연스럽게 타 게임 AI는 완전히 다른 성장경험을 가집니다.

이를 설명하려면 천애명월도를 알아야 합니다.

플레이어가 천애명월도 게임에 입문하여 역할을 설정하고 문파를 선택합니다.

플레이어가 성장함에 따라 유저들의 다양한 선택적 성장, 조작 수준, 선호하는 역할, 게임 이해도까지 천차만별입니다.

논검의 경우 한 걸음, 움직임의 매 순간마다 플레이어는 지속적이고 중단없는 의사 결정을 내려야 합니다. 

다른 문파간 결투라면 다른 문파에 대해 충분히 알아야 편안합니다.

 

이것들을 절대지혜 AI가 학습하려면 이야기는 복잡해집니다.

AI 연구소 프로젝트 리더는 AI의 움직임에 보상 포인트를 다르게 주어 고득점을 목표로 학습시켰습니다.

 

이 좋은 보상 디자인은 비용이 많이 들고 AI 성능도 제한됩니다.

 

천애명월도라는 게임 특성에 따라 AI 연구팀은 캐릭터의 체력 상태에 대해 HP가 0에 보상을 설정하고 

AI의 체력손실이 상대보다 적음을 강조, 

전투에 영향을 끼치는 제압과 공중부유상태에 보상을 설정하여

AI는 제압과 상대를 띄워올리는 콤보를 오래 사용하여 전투 효율성을 향상하도록 배우도록 했습니다. 

단순한 승리가 아닌 효율적으로 아름답게.

 

플레이어의 경우 백전백승 즉 무적고수가 그의 궁극적 목표이지만 AI의 경우 이것은 첫 번째 단계에 불과합니다!

절대지혜 AI의 임무는 일방적인 무감정적인 승리가 아닌 서로 다른 플레이어의 요구를 만족시키는데 있습니다. 

플레이어에게 실패는 성공의 어머니라는 것을 가르치려는 것입니다.

천애명월도의 게임세계에서 경맥 장비 심법 등 성장요인이 플레이어의 능력에 영향을 미칩니다.

지속적 성장과정, 각 플레이어의 진행상황도 다릅니다. 

설령 캐릭터가 비슷하더라도 플레이어의 조작레벨도 고점과 저점 다양합니다.

 

실제로 플레이어의 논검순위를 구성하는 것은 캐릭터의 성장과 플레이어의 조작레벨의 차이입니다.

 

그렇다면 절대지혜 AI는 어떻게 모든 플레이어를 커버할까요

이것은 모든 공력수준을 다루는 방법, 모든 조작수준을 다루는 방법에 대한 질문입니다.

이를 고려하여 절대지혜 AI는 24개 랭크에 따라 서로 다른 난이도를 가집니다.

길게 말로 풀었지만 AI의 성장경로는 예상보다 복잡했습니다.

천애명월도 전투기획자는 AI의 초기버전은 플레이어를 공격할 수도 없고 움직임도 이상했다고 말합니다.

수백만 시간의 훈련과 수만번의 논검대결로 보상 디자인 로직 최적화가 진행되자 

어느순간 제자리에서 무공만 남발하던 AI는 싸우고 막고 콤보를 시도하게 되었습니다.

 

오늘날의 절대지혜 AI는 새로운 모델이 그것을 더 발전 시켰을지 사람이 판단할 수 없을 정도입니다. 

AI가 얼마나 강력한지 단언할 수 없는 상태입니다.

절대지혜 AI를 모바일 게임에 투입했을 때 플레이어는 AI의 움직임을 보고 이렇게도 할 수 있구나를 배우게 되었습니다.

 

장시간 훈련 후 AI는 대부분의 플레이어를 이길 수 있고 심지어 가르치는 역할도 동반합니다

 

절대지혜 aI는 무적고수일 수 있고 전투에 동반할 수도 여러가지 가능성을 선사할 것입니다.

 

절대지혜 AI는 얼마나 강한가? 당시 사람들의 기대를 넘었습니다.

궁극적으로 이 AI의 목적은 플레이어가 더 나은 게임경험을 얻게 돕는 것입니다.

 

한편 천애명월도이든 모바일 천애명월도이든 우리들은 AI에게 바라는 것은 세가지 입니다.

우수한 논검고수가 ai에게 패하는 모습

Ai의 논검실력은 절대자의 위치에 걸맞는 모습일 것이라 상상

결론적으로 이러한 과정을 거치면 최강의 무술종파는 어떤것일까

 

하지만 역시 가장 중요한 것은 

우리 플레이어는 언제든 상대할 수 있는 사람을 원합니다.

 

절대지혜 AI를 만든 천애명월도 개발팀의 기대는 플레이어와 대결에서 승률 40%를 기록하는 것입니다. 

그러나 당일 기획력을 넘어 AI는 수많은 승리를 하고 있습니다.

“쇼의 효과는 좋은데 우리의 목표는 아니었다”라고 기획자는 조금 미안해 했지만 자부심도 느낄수 있었습니다.

 

인터뷰 끝에 천애명월도팀은 현재 AI에 대해 10점 만점에 8점을 주었습니다

절대지혜 AI는 충분히 강하지만 강하기만 한 것은 천애명월도 팀이 추구하는 것은 아닙니다.

더 많은 게임 시나리오에 적용하여 플레이어가 AI기술을 사용하여 

새로운 게임 플레이를 깨닫고 발전하는 것이 AI를 개발한 목표입니다.

현 시점 AI는 다 안정적인 트레이닝 프레임워크에서 동작중이며 

모든 수준의 플레이어는 자기제 맞는 AI를 찾아 싸우며 성장할 수 있습니다.

AI의 성장은 아직 끝나지 않았습니다!

 

당시 조준과 AI대결 시 모두를 놀라게 한 조작은 물론 뛰어난 운영으로 웃음을 자아내었습니다

이를 사람들은 의도된 동작이라 생각했지만 AI 연구원은 이건 단지 버그였다고 선을 그었습니다.

 

조준선수에 대한 AI의 도발?에 시청자들은 평생의 적이 등장했다고 놀렸습니다.

이론상으로 ai의 응답속도 스킬쿨타임계산 판단범위는 인간이 따라할 수 없는 것이 사실이지만

일반 플레이어보다 빠른 프로선수들의 결과를 보면 현재 AI는 무적이 아닌 인간전략의 승리로 보입니다.

 

게임전략의 진화도 AI가 앞으로 확장하고자 하는 방향 중 하나입니다.

 

절대지혜 AI의 미래는 어떨까요?

강력한 AI가 실제 인간을 이긴다. 이것은 플레이어가 보고 싶어하지만 AI가 강할 뿐만 아니라 

더 인간적이고  따뜻함도 보고 싶을 것입니다.

앞으로의 계획을 물었을 때 개발자들은 말했습니다.

과학과 무림은 연결될 수 없는 개념인 것 같지만 천애명월도에서는 의외로 조화롭다

강호의 눈으로 본 공작령이라는 주제

천하적인 시각으로 본 대비부라는 주제

곧 개봉할 우주적인 눈으로 볼 혈앵무라는 존재 

여기에 절대지혜 AI가 새로운 시대의 열쇠가 됩니다.

아마도 미래에는 게임 속 npc가 ai로 더 생생하게 변할 것입니다.

한편 우주라고하면 광활한 별 하늘을 떠올리지만 

고대어로 우주는 세상의 모든 광대한 신을 지칭하며 절대지혜라는 이름은 이 세계관에서 따온 것입니다. 

손과 눈으로 풍경을 묘사하고 과학기술의 탐구와 발명에 집착하는 게임 내 조직 절지현. 

이 설정은 절대지혜 AI가 천애명월도 우주에 들어가는 것을 자연스럽게 만듭니다.

 

천애명월도 AI 세계관 기획자는 AI를 게임자체 설정에 통합할 것이라고 밝혔으며 

이는 다가올 혈앵무 주제에 자연스럽게 녹아들 것입니다.

 

R&D팀은 천애명월도에서 많은 ai에게 충성도 높은 팬들을 보유하고 있음을 발견했습니다.

향후 기획에서 절대지혜 AI는 그 성격에 맞는 캐릭터 성격을 확장하고

운성지전(모바일) 북막현갑부전장(피시) 함명절지현(추후 스토리) ai 보스가 되어 

pve 플레이에 더많은 가능성을 가져 올 것입니다.

 

동시에 AI는 전투뿐 아니라 게임 세계와 새로운 가상 생태계 구축에도 있습니다

.

함께 전투를 벌일 뿐 아니라 설정 및 성격면에서 동반자로 활약할 절지계열목우도 계획중입니다. 

강호는 더 이상 혼자가 아닙니다.

 

절대지혜는 상대가 될 수도 주인이 될 수도, 프로선수에겐 가장 강력한 스파링 파트너, 

논검 경기장의 스타가 될 수도 있습니다. 

우리는 미래에 천애명월도 팀과 AI LAB간 실질협력, 기술발전을 통해 

더 강력하고 더 인간적이고 더 똑똑한 AI가 우리 앞에 다시 나타날 것이라 믿습니다. 

자신의 경험을 바꾸십시오.

 

기사원문 : https://www.ifanr.com/app/1442391