Main Images




Motivations and Contributions:


This research enables machine learning on military tactics via virtual-constructive simulation. Before this work, there was no application case of inverse reinforcement learning with complex military simulations, which will impose great impact. The virtual-constructive simulation and its inverse reinforcement learning is the first case of the demonstration that machines can learn the human judgement and tactical behavior by observing their behavior in the military simulation. The inverse reinforcement learning used in this demonstration was the same version that Andrew Ng used for his inverted hovering helicopter research. 


본 연구는 전장모의훈련 시뮬레이션을 통해 군사전략에서 기계 학습이 가능하도록 한다. 본 연구 이전에는 전장에 큰 영향을 미칠 것인, 복잡한 군사 시뮬레이션에 관한 역강화학습의 적용 사례가 없었다. 전장모의훈련 시뮬레이션과 이것의 역강화학습은 기계가 군사 시뮬레이션에서 자신의 행위를 통해 사람의 판단과 전술적 행위를 배울 수 있다는 논증의 첫 번째 사례이다. 이 논증에 사용된 역강화학습은 앤드류 응이 그의 역공중 정지 헬리콥터 연구에 사용한 것과 같은 버전이다.


Potential Impacts:


This demonstration potentially has a big impact given that the machine-learnt tactics can be used in developing a "terminator" which can combat just like human. This demonstration is a simple case of learning the tank driver and tank gunner behavior, but the same principle can be used any weaponry operated by human-being. Giventhat the current status of art is using Nintendo Game for inverse reinforcement learning, we are pursuing to develop futher realistic and significant simulations to learn human behavior through further efficient and sophisticated inverse reinforcement learning techniques.


본 논증은 기계가 배운 전술이 사람처럼 싸우는 “터미네이터” 개발에 사용될 수 있는 것을 고려하면 잠재적으로 큰 영향을 가지고 있다. 본 논증은 탱크 운전수와 탱크 포수 행위의 단순한 사례지만, 이 동일한 원리는 사람에 의해 작동되는 어떠한 무기에 대해서도 사용될 수 있다. 예술의 현재 상태가 닌텐도 게임을 역강화학습에 사용하고 있음을 감안할 때, 우리는 더 효율적이고 정교한 역강화학습 기술을 통해 사람의 행위를 배우기 위해서, 보다 더 현실적이고 유의미한 시뮬레이션의 개발을 추구하고 있다.


Related Publications


Do-Yun Kim, Inverse Modeling of Combat Behavior with Virtual-Constructive Simulation Training, Master Thesis, Department of Industrial and Systems Engineering, KAIST, 2016

Doyun Kim, Do-hyeong Kim, and Il-Chul Moon. Inverse Modeling of Combat Behavior with Virtual-Constructive Simulation Training, 2016 International Simulation Muti-Conference, AsiaSim / SCS AutumnSim, Beijing, China.