»õ¼Ò½Ä
Á¦¸ñ | 2019. 6. 10. ƯÇã¹ý¿ø°ú Ä«À̽ºÆ®°¡ ÇÔ²²ÇÏ´Â °úÇÐÄܼƮ 5ȸÂ÷ | ||||
---|---|---|---|---|---|
ÀÛ¼ºÀÚ | ƯÇã¹ý¿ø [´ëÀü] | ÀÛ¼ºÀÏ | 2019.06.17 | Á¶È¸ | 2979 |
÷ºÎÆÄÀÏ | |||||
2019 °úÇбâ¼ú ±³¾ç°Á ´Ù¼¸¹ø° ƯÇã¹ý¿ø(¹ý¿øÀå Á¶°æ¶õ)Àº 2019. 6. 10.(¿ù) 16:30 û»ç 5Ãþ ´ëȸÀǽǿ¡¼ ƯÇã¹ý¿ø °úÇбâ¼ú±³¾ç°Á¡ºÆ¯Çã¹ý¿ø°ú Ä«À̽ºÆ®°¡ ÇÔ²²ÇÏ´Â °úÇÐÄܼƮ:AI Series¡»Á¦ 5ȸÂ÷ °ÀÇ “ÇൿÇÏ´Â ÀΰøÁö´É: °ÈÇнÀ – ±è±âÀÀ KAIST ±³¼ö”¸¦ ¿¾ú½À´Ï´Ù.
KAIST Àü»êÇкΠ±è±âÀÀ ±³¼ö
°ÈÇнÀÀ̶õ ÀÀ±Þ½ÇÀ» ÁöÅ°°í Àִµ¥ °©ÀÚ±â ȯÀÚ 20¸íÀÌ ¹Ð·Áµé¾î ¿Â´Ù. ¶È°°Àº Áõ»óÀ» º¸ÀÌ´Â °ÍÀ¸·Î º¸¾Æ ´Ùµé °°Àº º´¿¡ °É¸° °Í °°Àºµ¥, ÀÌ º´ÀÇ Ä¡·á¸¦ À§ÇØ Ã³¹æÇÒ ¼ö ÀÖ´Â ¾à¹°Àº 0, 1, 2, 3¹øÀÌ ÀÖ´Ù. ÀÌ Áß ¾î¶² ¾àÀ» ó¹æÇØ¾ß È¯ÀÚ¸¦ ÃÖ´ëÇÑ ¸¹ÀÌ »ì¸± ¼ö Àְڴ°¡? ¿ù¿äÀÏ 4½Ã ¹Ý, °¿¬Àå¿¡ µé¾î¼¸é¼ ¹ßÇ¥ÀڷḦ ¹Þ¾Æµé°í »ìÆ캸´Ï ¾Ë ¼ö ¾ø´Â ¼ö½Ä°ú º¹ÀâÇØ º¸ÀÌ´Â ±×¸²ÀÌ ³¹«Çß´Ù. ³Ê¹«³ª ¿À·£¸¸¿¡ º¸´Â ∑¶óµç°¡, ∈¶óµç°¡, ½ÉÁö¾î ¾Æ¿¹ º» Àûµµ ¾ø´Â ±âÈ£¿¡ ½É¶õÇØÁö´ø Â÷¿¡ ±³¼ö´Ô²²¼´Â °£´ÜÇÑ Àΰ£ ´ë AIÀÇ ´ë°áÀ» ÅëÇØ °ÈÇнÀÀÇ ¿ø¸®¸¦ ¼³¸íÇØÁֽðڴٰí Çϼ̰í, ±è±¤³² ÆÇ»ç´Ô²² Àΰ£À» ´ëÇ¥ÇÏ´Â ÁßÃ¥ÀÌ ¸Ã°ÜÁ³´Ù. “0¹ø ¾àÀ» ó¹æÇÏ°Ú½À´Ï´Ù.” “1¹ø ȯÀÚ°¡ »ç¸ÁÇÏ¿´½À´Ï´Ù.” “1¹ø ¾àÀ» ó¹æÇÏ°Ú½À´Ï´Ù.” “2¹ø ȯÀÚ´Â »ì¾Ò½À´Ï´Ù.” “´Ù½Ã 1¹ø ¾àÀ» ó¹æÇÏ°Ú½À´Ï´Ù.” “3¹ø ȯÀÚµµ »ì¾Ò½À´Ï´Ù.” »çÀü Á¤º¸°¡ ¾ø´Â »óȲ¿¡¼´Â 0~3¹ø Áß ¾Æ¹« ¾àÀ̳ª °í¸¦ ¼ö¹Û¿¡ ¾ø´Ù. ±×¸®°í ±× °á°ú¿¡ µû¶ó ¼º°øÀûÀÎ ¾àÀ» °è¼Ó ó¹æÇÏ¸é¼ ±× ÃßÀ̸¦ »ìÇÉ´Ù. 0¹ø ¾àÀ» Åõ¿©ÇÏ¿© ȯÀÚ°¡ »ç¸ÁÇÏ¿´´Ù¸é 1¹øÀ¸·Î ³Ñ¾î°¡°í, 1¹ø ¾àÀ¸·Î Ä¡·á¿¡ ¼º°øÇÏ¿´´Ù¸é °è¼ÓÇؼ 1¹øÀ» Åõ¿©ÇÑ´Ù. ±×·±µ¥ ȯÀÚ¸¶´Ù °°Àº ¾à¿¡ ´Ù¸¥ ¹ÝÀÀÀ» º¸ÀÏ ¼öµµ ÀÖÀ¸´Ï, 1¹øÀÌ ÃÖÀûÀÇ ´äÀÎÁö È®ÀÎÇϱâ À§ÇØ 2¹ø, 3¹ø ¾àµµ ½ÃµµÇغ¸¸é¼ ±×Áß¿¡¼ °¡Àå ÀûÇÕÇÑ ¾àÀ» ã´Â´Ù. ÀÌó·³ ¹Ýº¹µÇ´Â ÇൿÀ¸·Î ½ÃÇàÂø¿À¸¦ °ÅÃÄ ÃÖÀûÀÇ Ã³¹æÀ» ã¾Æ³»´Â °ÍÀÌ °ÈÇнÀÀÇ ¿ø¸®´Ù. 20¸íÀÇ È¯ÀÚ¿¡°Ô ÀüºÎ ¾àÀ» ó¹æÇÏ°í ³ª¼ °á°ú¸¦ »ìÆ캸´Ï Àΰ£ ´ë AIÀÇ ÀÀ±Þ½Ç ½Ã¹Ä·¹ÀÌ¼Ç ´ë°áÀº ¾Ë°í¸®Áò Çϳª¸¦ Á¦¿ÜÇÏ°í´Â ÆÇ»ç´ÔÀÌ °¡Àå ³ôÀº Á¡¼ö¸¦ ¹Þ¾Æ ¼º°øÀûÀ¸·Î ³¡³µ´Ù. °ßÇÐ ¿Â ÇлýµéÀÇ °¨Åº°ú ÃÊ·ÕÃÊ·ÕÇØÁø ´«ºûÀº ´ý.
°¨µ¶ÇнÀ vs °ÈÇнÀ State, action, reward. °ÈÇнÀÀÇ Å°¿öµå´Â ÀÌ·¸°Ô ¼¼ °¡Áö·Î ¿ä¾àÇÒ ¼ö ÀÖÀ» °Í °°´Ù. °ÈÇнÀÀº ¾Ë°í¸®ÁòÀÌ È¯°æ¿¡ ´ëÇÏ¿© ¾î¶² ÇൿÀ» ÃëÇÏ¿´À» ¶§, ±× Çൿ¿¡ µû¸¥ º¸»óÀ» Á¦°øÇÏ°í ȯ°æÀÇ »óÅ¿¡ ´ëÇÑ Á¤º¸¸¦ ÀÔ·ÂÇÏ¿© À̸¦ ¹ÙÅÁÀ¸·Î ¾Ë°í¸®ÁòÀÌ ´Ù½Ã ±× ¸ñÇ¥¿¡ ´õ ÀûÇÕÇÑ ÇൿÀ» ÃëÇϵµ·Ï ÇÏ¿© ÀÌ·ç¾îÁø´Ù. °ÈÇнÀÀÌ ±âÁ¸ÀÇ ÇнÀ¹æ½ÄÀÎ °¨µ¶ÇнÀ°ú ´Ù¸¥ Á¡Àº Á¤ÇØÁø ´äÀÌ ÀÖ´Â Á¤ÇØÁø ¹®Á¦¸¦ Ç®°Ô ÇÏ´Â °ÍÀÌ ¾Æ´Ï¶ó ÃÖÁ¾ ¸ñÇ¥¸¸À» Á¦½ÃÇØÁÖ°í ½º½º·Î ¹®Á¦¸¦ ÇØ°áÇÏ´Â ¹æ¹ýÀ» ã¾Æ°¡µµ·Ï ÇÑ´Ù´Â °ÍÀÌ´Ù. °¨µ¶ÇнÀÀ» ¼±»ý´ÔÀÇ Áöµµ¿¡ ºñÀ¯ÇÒ ¼ö ÀÖ´Ù¸é °ÈÇнÀÀº ºñÆò°¡ÀÇ ºñÆòÀ» ÅëÇÑ ÇнÀÀÌ´Ù. ÀΰøÁö´ÉÀÇ °ÈÇнÀÀº ¸¹Àº °æ¿ì °ÔÀÓÀ» ÅëÇؼ ½ÇÇèµÇ°í Àִµ¥, °¡·É º®µ¹±ú±â³ª ¾Þ±×¸®¹öµå °°Àº °ÔÀÓÀ» ½ÇÇàÇÏ¿´À» ¶§ óÀ½¿¡´Â »ç¶÷À̶ó¸é ¼Õ½±°Ô ÇÒ ¼ö ÀÖ´Â Çൿµµ ÇÏÁö ¸øÇÏ´ø ¾Ë°í¸®ÁòÀÌ ½ÃÇàÂø¿À¸¦ ÅëÇØ ³ª¸§ÀÇ °íµæÁ¡ Àü·«±îÁö ¼¼¿ì´Â ¸ð½ÀÀ» º¼ ¼ö ÀÖ¾ú´Ù. ¾Þ±×¸®¹öµå °ÔÀÓ¿¡¼ ÀΰøÁö´ÉÀÌ µµ¹Ì³ë È¿°ú¸¦ ÀÏÀ¸Å°´Â Àü·«À» ½ÇÇàÇÏÀÚ ÇлýµéÀÌ ¾É¾ÆÀÖ´ø ÀÚ¸® ¿©±âÀú±â¿¡¼ “¿À~”, “¿ì¿Í!”Çϴ ź¼ºÀÌ ÅÍÁ® ³ª¿Ô´Ù. ¹°·Ð ÀÌ·± Àç¹ÌÀÖ´Â °ÔÀÓ µÚ¿¡´Â º¹ÀâÇÑ ¾Ë°í¸®ÁòÀÌ ¼û¾îÀÖ´Ù. °ÈÇнÀÀÇ ¼öÇÐÀû ¸ðµ¨Àº ±âº»ÀûÀ¸·Î ¸¶ÄÚÇÁ ÀÇ»ç°áÁ¤ °úÁ¤(Markov Decision Process)¿¡ ±â¹ÝÀ» µÎ´Âµ¥, °¡´ÉÇÑ »óÅÂ¿Í ÇൿÀÇ ÁýÇÕ, ÀüÀÌÇÔ¼ö¿Í º¸»óÇÔ¼ö¸¦ ÀÌ¿ëÇÏ¿© ƯÁ¤ »óÅ¿¡¼ ƯÁ¤ ÇൿÀ» ÇßÀ» ¶§ ¾î¶² °á°ú¹°¿¡ µµ´ÞÇÒ È®·üÀ» °è»êÇÏ´Â °ÍÀÌ´Ù. ¶ÇÇÑ ¸Õ ¹Ì·¡ÀÇ º¸»ó±îÁö ÇÒÀÎÀ²(discount rate)À» ÅëÇØ °è»ê¿¡ ¹Ý¿µÇÑ´Ù. À̸¦ ÅëÇØ ÇöÀçÀÇ Á¤Ã¥ÀÌ ¾ó¸¶³ª ÁÁÀºÁö °¡Ä¡¸¦ ÃßÁ¤ÇÏ°í, ¾î¶»°Ô ÃÖÀûÀÇ Á¤Ã¥À» ã¾Æ³¾Áö ±¸ÇÒ ¼ö ÀÖ´Ù. ´Ù¸¸ °ÈÇнÀÀº Çൿ¿¡ ´ëÇÑ Æò°¡°¡ Áö¿¬µÇ¾î ³ªÅ¸³´Ù´Â ¾î·Á¿òÀÌ ÀÖ°í, µû¶ó¼ Çǵå¹éÀÌ µå¹°°Ô ÀÌ·ç¾îÁö¹Ç·Î ±× Çǵå¹éÀ» ÃÖ´ëÇÑ È¿À²ÀûÀ¸·Î È°¿ëÇÏ´Â °ÍÀÌ Áß¿äÇÏ´Ù.
°ÈÇнÀÀÇ ÀÀ¿ë»ç·Ê ±¸±Û µö¸¶ÀεåÀÇ Deep Q-NetworkºÎÅÍ ÆÄ»ýµÇ¾î ´Ù¾çÇÑ °ÈÇнÀ ¾Ë°í¸®ÁòÀÌ °³¹ßµÇ°í ±× ÀÀ¿ëºÐ¾ßµµ Á¡Á¡ ´Ù¾çÇØÁ³´Âµ¥, ±× ¿¹·Î ½ÅÈ£µî ÃÖÀûÈ ¾Ë°í¸®Áò, ÈÇаøÁ¤ ÃÖÀûÈ ¾Ë°í¸®Áò µîÀÌ ÀÖ´Ù. °¡Àå ÃÖÀûÈµÈ ½ÅÈ£µî ü°è¸¦ ã¾Æ³»´Â ¾Ë°í¸®ÁòÀº ¸¹Àº º¯¼ö°¡ »óÁ¸ÇÏ´Â µµ½Ãȯ°æ¿¡¼, ÃÖÀûÀÇ Ã˸ÅÀÇ Á¾·ù, ÅõÀԽñâ, ¿ÂµµÈ¯°æ µîÀ» °áÁ¤ÇÏ´Â ¾Ë°í¸®ÁòÀº ¹Ýº¹ÀûÀÎ ½ÇÇèÀÌ ºÒ°¡ÇÇÇÑ ÈÇаøÁ¤¿¡¼ ¸Å¿ì À¯¿ëÇÒ °ÍÀ¸·Î º¸ÀδÙ. ¿©±â¿¡ ±×Ä¡Áö ¾Ê°í ·Îº¿ÀÌ ¼Õ±Û¾¾¸¦ ¿¬½ÀÇÏ´Â ¿µ»óµµ º¼ ¼ö ÀÖ¾ú´Ù. »ó´çÈ÷ ±ò²ûÇÑ ±Û¾¾Ã¼·Î ‘Hello’ºÎÅÍ ‘¾È³ç’±îÁö °¢Á¾ ¾ð¾îÀÇ Àλ縦 ¼¾¼·Î ÀνÄÇÏ¿© µû¶ó ¾²°í ÀÖ´Â ·Îº¿ÀÇ ¸ð½ÀÀº ±Í¿±±â±îÁö Çß´Ù. ±×¸®°í ·Îº¿¿¡°Ô °È´Â ¹ýÀ» °¡¸£Ä¡´Â ½Ã¹Ä·¹À̼ǵµ º¼ ¼ö ÀÖ¾ú´Âµ¥, ´Ü¼øÈ÷ ‘AÁöÁ¡¿¡¼ BÁöÁ¡À¸·Î À̵¿Ç϶ó’´Â °úÁ¦¸¸ ÁÖ°í ³ª¸ÓÁö´Â ¾Ë°í¸®ÁòÀÌ ¾Ë¾Æ¼ ÇнÀÇϵµ·Ï ÇÏ´Â °ÍÀ̾ú´Ù. °ÈÇнÀÀ» ÅëÇØ Ã³À½¿¡´Â ¿¿¸Å´Ù°¡ Á¡Á¡ Àå¾Ö¹°À» °Ç³Ê¶Ù°í, Á¡ÇÁÇÏ´Â ¹æ¹ýÀ» ÀÍÇô°¡´Â ¸ð½ÀÀ» º¸¸é¼ °ú¿¬ Àΰ£ÀÇ ÇнÀ¹æ½Ä°ú ´à¾ÆÀÖ´Ù´Â »ý°¢À» ÇÏ°Ô µÇ¾ú´Ù. °ú¿¬ ±âÁ¸ÀÇ °¨µ¶ÇнÀ ¹æ½ÄÀ¸·Î´Â ÀÌ·ç¾î³¾ ¼ö ¾ø´Â ¼º°ú¶ó´Â »ý°¢, ±×¸®°í °ÈÇнÀ ¿¬±¸°¡ °ÅµìµÉ¼ö·Ï ±× È°¿ëó´Â ¹«ÇÑÇÒ °ÍÀ̶ó´Â »ý°¢ÀÌ µé¾ú´Ù.
ÇâÈÄ °úÁ¦ ÇÏÁö¸¸ ¾ÆÁ÷µµ ³²¾Æ ÀÖ´Â °úÁ¦°¡ ¸¹´Ù. ¾ÆÁ÷ Àΰ£Áö´ÉÀ» µû¶óÀâÀ» ¼ö ¾ø´Â ºÎºÐ, Áï ŸÀÎÀÇ °¨Á¤À» °¨ÁöÇÏ´Â °ø°¨´É·ÂÀ̳ª ¹°¸®Àû ¼¼°è¿¡ ´ëÇÑ Á÷°üÀû ÀÌÇØ·Â µîÀÌ ÀÖ´Ù´Â °ÍÀÌ´Ù. °ÔÀÓÀÇ °æ¿ì¿¡µµ ÀΰøÁö´ÉÀÌ °ÈÇнÀÀ» ÅëÇØ ³î¶ó¿î °æÁö¿¡ À̸£±âµµ ÇÏÁö¸¸, ÃʹÝÀÇ ÇнÀ¼Óµµ´Â Àΰ£º¸´Ù ÇöÀúÈ÷ ¶³¾îÁø´Ù. À̸¦ ±Øº¹Çϱâ À§ÇØ Àΰ£ÀÇ Á÷°üÀº ¹«¾ù¿¡ ±â¹ÝÀ» µÎ´ÂÁö¸¦ ¾Ë¾Æ³»°íÀÚ °ÔÀÓȯ°æÀ» ¹Ù²Ù¾î ±× º¯È°¡ Àΰ£ÀÇ ÇнÀ¼Óµµ¿¡ ¹ÌÄ¡´Â ¿µÇâÀ» »ìÆ캸´Â ¿¬±¸ µîµµ Èï¹Ì·Î¿ü´Ù. ÇÑÆí ‘AI Safety’¶ó´Â ÁÖÁ¦µµ Áß¿äÇÑ °úÁ¦·Î ³²¾ÆÀִµ¥, ÀÏ·Ê·Î ‘¹æ ¾ÈÀ» û¼ÒÇ϶ó’´Â °úÁ¦´Â Àΰ£¿¡°Ô´Â Á÷°üÀûÀ¸·Î ´Ù°¡¿À´Â °ÍÀÌÁö¸¸ ·Îº¿¿¡°Ô´Â û¼Ò¸¦ À§ÇØ °¡±¸¸¦ ÆļÕÇصµ µÇ´ÂÁö, ¾²·¹±â°¡ ´«¿¡ º¸ÀÌÁö¸¸ ¾ÊÀ¸¸é û¼Ò¸¦ Çß´Ù°í ÇÒ ¼ö ÀÖ´ÂÁö, û¼Ò¸¦ À§ÇØ ¾ÈÀüÀº Èñ»ýÇصµ µÇ´ÂÁö µîÀÌ ¸ðµÎ ÇнÀÀÇ ´ë»óÀÌ´Ù. ³ª¾Æ°¡ ÀΰøÁö´É À±¸®µµ Áß¿äÇÑ ¹®Á¦ÀÌ´Ù. ÀÌ´Â ±â¼ú°³¹ß°ú ÇÔ²² ¸¹Àº ¿¬±¸°¡ ÇÊ¿äÇÑ ºÐ¾ßÀÏ °ÍÀÌ´Ù. °ÈÇнÀÀ¸·Î ¾ÆÁ÷ µû¶óÀâÁö ¸øÇÑ Àΰ£ÀÇ ¿µ¿ªÀº °ú¿¬ ¾ÕÀ¸·Îµµ Àΰ£ °íÀ¯ÀÇ ¿µ¿ªÀ¸·Î ³²¾ÆÀÖÀ» ¼ö ÀÖÀ»±î, Àΰ£À» Àΰ£À¸·Î ¸¸µå´Â °ÍÀº ¹«¾ùÀΰ¡, Àΰ£Àº ½º½º·Î¸¦ ¾î¶»°Ô Á¤ÀÇÇØ¾ß ÇÒ °ÍÀΰ¡ µî °ÀÇ°¡ ³¡³ ´ÙÀ½¿¡µµ ¿©·¯ °¡Áö »ý°¢ÀÌ À̾îÁö´Â ÁÖÁ¦¿´´Ù.
- ƯÇã¹ý¿ø ¹Ú¿îÁ¤ ¿¬±¸¿ø
ƯÇã¹ý¿ø°ú Ä«À̽ºÆ®°¡ ÇÔ²²ÇÏ´Â °úÇÐÄܼƮ:AI ½Ã¸®Áî Á¦5ȸÂ÷¿¡µµ ½Ã¹ÎµéÀÇ ¸¹Àº °ü½É°ú Âü¿© ¼Ó¿¡ À¯ÀÍÇÑ °ÀÇ°¡ µÇ¾ú½À´Ï´Ù. ¿ì¸® ƯÇã¹ý¿øÀº ¾ÕÀ¸·ÎÀÇ °ÀÇ°¡ ½Ã¹Î ¹× ¹ý¿øÁ÷¿øµé¿¡°Ô ´õ¿í À¯ÀÍÇÏ°í °ü½É¹Þ´Â °ÀÇ°¡ µÇµµ·Ï ³ë·ÂÇÏ°Ú½À´Ï´Ù.
2019. 6. 17.
ƯÇã¹ý¿ø Ãѹ«°úÀå |
|||||
´ÙÀ½±Û | 2019. 6. 17. ƯÇã¹ý¿ø°ú Ä«À̽ºÆ®°¡ ÇÔ²²ÇÏ´Â °úÇÐÄܼƮ 6ȸÂ÷... | ||||
ÀÌÀü±Û | 2019. 6. 3. ƯÇã¹ý¿ø°ú Ä«À̽ºÆ®°¡ ÇÔ²²ÇÏ´Â °úÇÐÄܼƮ 4ȸÂ÷... |