»ó´Ü¿©¹é
HOME ´º½º¡¤Á¤Ã¥
ÀΰøÁö´É ¡®´É¼÷ÇÑ °ÔÀÓ vs ¸øÇÏ´Â °ÔÀÓ¡¯




±¸±ÛÀÌ °³¹ß ÁßÀÎ °ÔÀÓ Àü¿ë ÀΰøÁö´ÉÀÎ DQN(deep Q-network)Àº ÀΰøÁö´ÉÀÌ ½º½º·Î °ÔÀÓÀ» Ç÷¹ÀÌÇϸ鼭 ¹è¿ì°í Àΰ£ ÀÌ»óÀ¸·Î ½Ç·ÂÀ» Çâ»ó½Ãų ¼ö ÀÖ´Ù. ÀÌ·± DQNÀÌ ´Ù¾çÇÑ °ÔÀÓÀ» Á÷Á¢ Çغ» °á°ú Àΰ£ ÀÌ»óÀ¸·Î Àß ÇÒ ¼ö ÀÖ´Â °ÔÀÓ°ú ±×·¸Áö ¾ÊÀº °ÔÀÓÀÌ Á¸ÀçÇÏ´Â °ÍÀ¸·Î ¹àÇôÁ³´Ù.

Àΰ£Àº °£´ÜÇÑ ÀÛ¾÷¿¡¼­ ³ôÀº ¼öÁØÀÇ ÀÎÁö ÀÛ¾÷¿¡ À̸£±â±îÁö ´Ù¾çÇÑ ¼öÁØÀ» ¼ÒÈ­ÇÒ ¼ö ÀÖ´Ù. ±¸±Û »êÇÏ ÀΰøÁö´É °³¹ß»çÀÎ µö¸¶Àεå´Â Àΰ£°ú °°Àº ¼öÁØÀÇ ¼º´É°ú º¸Æí¼ºÀ» °®Ãá ÀΰøÁö´É °³¹ßÀ» ¸ñÇ¥·Î ÇÏ°í ÀÖ´Ù.





µö¸¶ÀεåÀÇ DQNÀº °ÔÀÓ Ç÷¹ÀÌ µµÁß ¸î ¹ø¾¿ ½ÃÇàÂø¿À¸¦ ¹Ýº¹Çϸ鼭 ÇнÀÀ» ÇÑ´Ù. ÀÌ·± ÇнÀ ÇüÅ´ °­È­ ÇнÀ(reinforcement learning)À̶ó°í ºÎ¸¥´Ù. DQNÀº ÀÌ·± ÀÚ°¡ ÇнÀ °úÁ¤À» ÅëÇØ Áö½ÄÀ» ÃàÀûÇÑ´Ù.

https://www.youtube.com/watch?v=TmPfTpjtdgg

µö¸¶Àεå´Â DQN¿¡ »çÀü Áö½ÄÀÌ ÀüÇô ¾ø´Â »óÅ¿¡¼­ ¾ÆŸ¸® 2600 °ÔÀÓ 50Á¾À» Ç÷¹ÀÌÇϵµ·Ï ÇÑ °á°ú Àý¹ÝÀÌ Á¶±Ý ³Ñ´Â 29Á¾¿¡¼­ Àΰ£À» ´É°¡ÇÏ´Â Ç÷¹À̸¦ Çß´Ù°í ÇÑ´Ù. °¡Àå Á¡¼ö°¡ ³ô¾Ò´ø °ÔÀÓÀÎ ºñµð¿À Çɺ¼Àº Àΰ£º¸´Ù ¹«·Á 2,539%¿¡ ´ÞÇÏ´Â ³ôÀº Á¡¼ö¸¦ ³Â´Ù. ÇÏÁö¸¸ ¹Ý¸é ¸óÅ×¼ö¸¶ÀÇ º¹¼ö(Montezuma's Revenge)¶ó´Â °ÔÀÓ¿¡¼± °íÀüÀ» ¸éÄ¡ ¸øÇØ DQNÀÇ Ç÷¹ÀÌ °á°ú´Â 0%´Ù.

https://www.youtube.com/watch?v=W2CAghUiofY

DQNÀÇ ¼Ò½ºÄÚµå¿Í ¾ÆŸ¸® 2600 ¿¡¹Ä·¹ÀÌÅÍ´Â ¹«·á·Î °ø°³µÇ¾î Àֱ⠶§¹®¿¡ ´©±¸³ª µö¸¶ÀεåÀÇ ½ÇÇèÀ» ÀçÇöÇغ¼ ¼ö ÀÖ´Ù. µö¸¶Àεå´Â DQNÀÇ ¾Ë°í¸®ÁòÀ» °³¼±ÇÏ°í ÇнÀ ¿ªÇÒÀ» ¾ÈÁ¤È­Çϰųª ÀÌÀü °ÔÀÓ Ç÷¹ÀÌ °æÇèÀ» ¿ì¼±ÀûÀ¸·Î ´Ù·ç´Â µî Ç¥ÁØÈ­¿Í ¼öÁý, ÀçÃøÁ¤ µîÀ» ½Ç½ÃÇÏ°í ÀÖ´Ù. À̸¦ ÅëÇØ ¾ÆŸ¸® 2600 °ÔÀÓ Á¡¼ö´Â 3¹è ÀÌ»ó Çâ»óµÆ´Ù°í ÇÑ´Ù.

https://www.youtube.com/watch?v=nMR5mjCFZCw

µö¸¶Àεå´Â ¶Ç ¾ÆŸ¸® 2600 °ÔÀÓÀº 2D °ø°£¿¡ ÇÑÁ¤µÇ¾î ÀÖ´Â Å¿¿¡ 3D·Î ¸¸µç ¹Ì·Î¿¡¼­ Ç÷¹À̸¦ ÇÏ´Â ·¡¹ö¸°½º(Labyrinth)¸¦ µ¶ÀÚ °³¹ß, DQN ÇнÀ¿¡ µµÀÔÇÏ°í ÀÖ´Ù.

https://www.youtube.com/watch?v=XTAx-DwAHp4

ÀÌ·± °úÁ¤À» ÅëÇØ µö¸¶Àεå´Â DQNÀ» ºñ·ÔÇÑ ÀΰøÁö´ÉÀÌ ´Ù¾çÇÑ ÀÛ¾÷À» ¼öÇàÇÒ ¼ö ÀÖµµ·Ï °³¹ßÀ» ÁøÇàÇÏ°í ÀÖ´Ù. ¾ÕÀ¸·Îµµ °³¹ßÀ» ÁøÇàÇØ ÀΰøÁö´ÉÀÇ ´É·ÂÀ» ³ô¿© °Ç°­°ü¸® ¾Û µî »çȸ¿¡ À¯ÀÍÇÑ È°¿ë ¹æ¹ýÀ» ¸ð»öÇÏ°í ÀÖ´Ù°í ÇÑ´Ù. °ü·Ã ³»¿ëÀº ÀÌ°÷¿¡¼­ È®ÀÎÇÒ ¼ö ÀÖ´Ù.

ÇÑÁ¾Áø ITÄ®·³´Ï½ºÆ®  hancook@hanmail.net

<ÀúÀÛ±ÇÀÚ © Å×ũȦ¸¯, ¹«´Ü ÀüÀç ¹× Àç¹èÆ÷ ±ÝÁö>

ÇÑÁ¾Áø ITÄ®·³´Ï½ºÆ®ÀÇ ´Ù¸¥±â»ç º¸±â
Àαâ±â»ç
Ãßõ±â»ç
±â»ç ´ñ±Û 0°³
Àüüº¸±â
ù¹ø° ´ñ±ÛÀ» ³²°ÜÁÖ¼¼¿ä.
¿©¹é
¿©¹é
Àç¹ÌÀÖ´Â Å×Å©¿ùµå ¼¼»ó
¿©¹é
¿©¹é
¿©¹é
¿©¹é
¿©¹é
¿©¹é
¿©¹é
Back to Top