실제세계에서 데이터 수집의 비용과 한계를 고려할 때, 시뮬레이션 생성 환경은 데이터 생성 과 다양한 시도에 있어 효율적인 대안이다. 이 연구에서는 Unity ML Agent를 로그라이크 장 르에 적합한 강화학습 모델로 구현하였다. 간단한 게임에Agent를 이식하고, 이 Agent가 적을 인식하고 대응하는 과정을 코드로 작성하였다. 초기 모델은 조준사격의 한계를 보였으나 RayPerceptionSensor-Component2D를 통해 Agent의 센서 정보를 직접 제공함으로써, Agent가 적을 감지하고 조준 사격을 하는 능력을 관찰할 수 있었다. 결과적으로, 개선된 모델 은 평균3.81배 향상된 성능을 보여주었으며, 이는 Unity ML Agent가 로그라이크 장르에서 강화학습을 통한 데이터 수집이 가능함을 입증한다.
게임 개발에서 에이전트의 행동은 중요한 연구 분야이다. 기존의 에이전트의 설계에서의 문제점은 행동의 재사용, 환경과 상호작용이 가능한 에이전트 구조, 행동 중심의 설계에 대한 연구는 미흡하였다. 제안하는 복합행동 중심의 에이전트의 행동 설계방법은 시나리오 분석 및 상황 표현 단계에서 게임 참여자들간의 의사소통의 도구를 제공하고, 설계 및 구현 단계에서 추상적인 행동을 표현할 수 있고, 향후 게임의 확장 및 유사 에이전트의 설계시 시간 및 비용 절감 효과를 가져 온다. 특히, 본 논문은 게임 개발에서 게임시나리오에 대한 분석 및 이해를 가능하게 하는 행동 중심의 설계 기법을 제안하였다.
Recently, the role of artificial intelligence techniques in games is becoming important. Game artificial intelligence technology in the past, the graphics and sound technology were more important. However, Artificial intelligent technology in current games is necessary technology to provide variety pleasure to users, and role of user's partner or helper. Learning ability of artificial intelligence technologies is attention getting technology. In this paper, we apply the learning system to the game agent to implement it, and a nalysis its performance.
최근 개발자와 사용자 사이에서 게임의 인공지능에 대한 관심이 늘어나고 있다. 그래픽과 사운드 요소의 한계로 인 해 화려하고 웅장한 게임보다 다양한 재미를 줄 수 있는 게임을 원하기 때문이다. 기존의 게임 인공지능 기법은 단순 하여 쉽게 질리고, 사용자에게 다양한 재미를 지속적으로 제공하기 어렵다. 그러나 학습 능력을 갖춘 게임은 다양하고 예측하기 어려운 특성으로 인해 사용자에게 끝없는 재미를 제공할 수 있다. 본 논문에서는 이러한 학습 능력을 게임 내의 에이전트에게 부여하기 위해 심리학 이론 중 하나인 관찰학습 이론을 적용한 알고리즘을 제시하고자 한다.
Attempt of various form are made for game. An on-line game is application processes event, which reacts according to condition. Animation of character is expressed according to event. An emotion is decided by message queue's iteration achievement. This treatise does not plan event of game to simple processing system and propose autonomous emotion expression system of FuSM's game character. Interaction increase of game with the actuality the world resembling that to do express, and it can augment sociality. Game space is action space by simple iteration, which convert to space that can express users. This treatise may offer various elements to game take part in users.