Gems of War에서의 AI 부정행위
다양한 테스트를 거친 결과, Gems of War에서 AI는 부정행위를 하지 않는다는 것을 확인할 수 있습니다.
AI 플레이어에게 유리하게 작용하는 인위적인 편향은 전혀 없음을 확인할 수 있습니다. AI는 부정행위를 하지 않습니다.
실제로 일반 난이도에서는 AI가 행운의 보석 낙하를 피함으로써 여러분에게 유리하게 부정행위를 하는 "콤보 차단기"가 켜져 있습니다!
아래 글은 게임의 크리에이티브 디렉터인 Sirrian(원작 Puzzle Quest 게임의 제작자 Steve Fawkner로도 알려짐)이 저희 포럼에 남긴 답변을 재수록한 것입니다.
이전 게임들에서도 비슷한 질문을 받았기에, Puzzle Quest 2 & Galactrix의 모든 AI/보석 매칭 코드를 공개적으로 이용할 수 있게 했고, 이를 살펴본 사람이라면 누구나 부정행위가 없었다는 것을 확인할 수 있었습니다.
Gems of War에서도 대부분 같은 유형의 코드를 사용합니다.
우리 뇌는 부정적인 경험을 더 생생하게 기억하도록 타고난 "회상 편향"이라는 현상이 있습니다.
다음 섹션은 게임 디자인과 이러한 회상 편향에 관심 있는 분들을 위한 내용입니다.
아니라면 TL;DR… 저희는 몇 가지 테스트를 진행했고, 회상 편향은 놀라울 정도로 강했습니다.
원작 Puzzle Quest를 출시 전에 개발하던 당시, 테스트 참가자들로부터 AI가 부정행위를 한다거나 추천 매치가 최악의 매치가 되도록 설계되었다는 이야기를 계속 들었습니다. 우리도 때때로 그렇게 느꼈지만, AI를 2시간 만에 작성했던 저는 실제로 아무런 수상한 일이 일어나지 않고 있다는 것을 알고 있었습니다.
그래서 플레이어가 운을 어떻게 인식하는지 더 알아보기 위한 사용성 테스트를 하기로 했습니다. 게임에서 "행운의 낙하"가 발생했을 때 이를 기록하고, 그것이 인간 플레이어와 AI 플레이어 중 누구에게 유리했는지 등록하게 했습니다. 또한 극단적인 결과도 테스트할 수 있도록 인간에게 유리하게 부정행위를 하는 버전도 만들었습니다. 행운의 낙하는 다음 3가지 중 하나로 정의했습니다. 적어도 하나의 보석이 떨어져 들어와 예측할 수 없었던 연쇄 반응, 또는 매치에 완벽한 위치로 떨어져 들어온 해골, 또는 플레이어를 위해 같은 종류 4/5개 매치를 만들도록 떨어져 들어온 모든 보석입니다.
정확한 수치는 지금 가지고 있지 않지만, 첫 번째 테스트에서 얻은 몇 가지 결과는 다음과 같습니다:
플레이어들에게 AI 플레이어가 얼마나 운이 좋았는지 1~9점 척도로 평가해 달라고 했습니다. 1 = 플레이어가 AI보다 훨씬 운이 좋음, 5 = 운이 같음, 9 = AI가 플레이어보다 훨씬 운이 좋음
AI의 행운의 낙하가 20% 이상 더 많았을 경우: 9: AI가 엄청나게 운이 좋음
플레이어 & AI의 행운의 낙하가 대략 같았을 경우(서로 10~20% 이내): 7 = AI가 매우 운이 좋음
인간의 행운의 낙하가 AI보다 약 두 배 많았을 경우: 5 = 운이 같음
인간의 낙하가 두 배보다 더 많았을 경우에는 결과가 달랐지만, 마침내 5 미만의 수치가 나타났습니다.
즉, 인간 플레이어가 AI보다 두 배 더 운이 좋지 않으면 AI가 부정행위를 한다고 인식합니다. 저는 그 점이 놀라웠습니다. 하지만 이제부터가 흥미로운 부분입니다. wasted 님을 비난하려는 것이 아니라, 우리 뇌가 우리에게 하는 회상 편향이라는 기묘한 속임수와 그 효과가 얼마나 놀라울 수 있는지를 보여준 테스트 데이터를 공유하는 것뿐입니다.
그래서 첫 번째 테스트 후, 테스트 참가자들에게 두 번째로 진행하면서 자신이 AI에 비해 운이 좋았다고 생각한 횟수를 세어 달라고 요청했습니다. AI가 부정행위를 하지 않는다는 점을 이해할 수 있는 결론에 도달할 수 있는지 보기 위해 결과를 기록하게 했습니다.
다시 말하지만 수치는 없고 기억에 의존한 것이므로, 이는 대략적인 요약입니다:
플레이어 10명의 결과.
테스터 1명은 행운의 낙하를 정확히 기록했습니다(기록된 수치와 약 10% 이내).
플레이어 4명은 AI의 행운의 낙하는 정확히 기록했지만(10% 이내), 인간의 행운의 낙하는 약 10%~80% 적게 세었습니다.
플레이어 5명은 AI의 행운의 낙하를 10%~50% 더 많이 세었지만, 인간의 행운의 낙하는 약 10%~100% 적게 세었습니다.
표본 규모는 10명으로 작습니다. 하지만 결과는 꽤 흥미롭다고 생각합니다.