»ç¶÷Àº ºÒÈ®½ÇÇÑ »óȲ¿¡¼µµ ´Ù¸¥ »ç¶÷ÀÇ Çൿ ÆÐÅÏ°ú »óȲÀ» Ãß·ÐÇÏ°í ÀÚ½ÅÀÇ ÇൿÀ» Á¤ÀÇÇÒ ¼ö ÀÖ´Â ´É·ÂÀ» °®Ãß°í ÀÖ´Ù. °¡·É Àç³Áö¿ª¿¡¼ Åë½ÅÀÌ µÎÀýµÆ´Ù°í ÇÏ´õ¶óµµ ±¸Á¶´ë¿øµéÀº º¸ÀÌÁö ¾Ê´Â °÷¿¡ ÀÖ´Â ´Ù¸¥ ´ë¿øµéÀÌ ÇöÀç ¾î¶² ÇൿÀ» ÇÏ°í ÀÖ´ÂÁö ¿¹ÃøÇÏ°í ÀÚ½ÅÀÇ Çൿ °èȹÀ» ¼ö¸³ÇÑ´Ù. ¼Õ´ÔÀ¸·Î ºÕºñ´Â ½Ä´ç¿¡¼µµ ¸¶Âù°¡Áö´Ù. ´Ù¼öÀÇ Á¾¾÷¿øµéÀº °í°´µé·ÎºÎÅÍ ÁÖ¹®À» ¹Þ°í À½½ÄÀ» ¼Õ´Ôµé¿¡°Ô Á¦°øÇÒ ¶§±îÁö ³ôÀº ¼öÁØÀÇ Çù·ÂÀ» ÇÑ´Ù. ºñ·Ï ´Ù¸¥ Á¾¾÷¿øÀÌ º¸ÀÌÁö ¾Ê´Â °÷¿¡ ÀÖ´õ¶óµµ ÇöÀç ¾î¶² ÇൿÀ» ÇÏ°í ÀÖ´ÂÁö Ãß·ÐÇÏ°í ÀÚ½ÅÀÌ Áö±Ý ¾î¶² ÀÏÀ» ÇØ¾ß ÇÏ´ÂÁö ã¾Æ³½´Ù. ÀÌó·³ »ç¶÷Àº Á¤º¸°¡ ¿Ïº®ÇÏÁö ¾ÊÀº ºÒÈ®½ÇÇÑ »óȲ¿¡¼µµ ¼·Î Çù·ÂÇÒ ¼ö ÀÖ´Â ´É·ÂÀ» °®Ãß°í ÀÖ´Ù.
ÇÏÁö¸¸ ·Îº¿Àº ±×·¸Áö ¸øÇÏ´Ù. ¸ðµç ÁÖº¯ Á¤º¸µéÀ» ȹµæÇÑ ÈÄ ÇÁ·Î±×·¡¹ÖÀÌ µÇ¾î Àִ´ë·Î ÇൿÀ» ÇÑ´Ù. ¸¸ÀÏ ¼¾¼, ¼º°ú, Ä¿¹Â´ÏÄÉÀÌ¼Ç µî Ãø¸é¿¡¼ ¿À·ù°¡ ¹ß»ýÇÏ¸é ·Îº¿¿¡°Ô´Â Ä¡¸íÀûÀÌ´Ù. ·Îº¿Àº 'È®½Ç¼º'À̶ó´Â Á¶°Ç ÇÏ¿¡¼ ¿òÁ÷ÀÌ´Â °Ô ÀϹÝÀûÀÌ´Ù. ¹°·Ð ÃÖ±Ù ¿¸° 'DRC(´Ù¸£ÆÄ ·Îº¸Æ½½º °æÁø´ëȸ)'¿¡¼± Åë½ÅÀÌ µÎÀýµÈ »óȲ¿¡¼µµ ·Îº¿ÀÌ Àç³±¸Á¶ È°µ¿À» ÇÒ ¼ö ÀÖµµ·Ï °úÁ¦°¡ ÁÖ¾îÁ³´Ù. ¾ÕÀ¸·Î ·Îº¿ÀÌ È°µ¿ÇØ¾ß ÇÒ »óȲÀº 'ºÒÈ®½Ç¼º'ÀÌ »ó¼ö Á¶°ÇÀÌ µÉ °¡´É¼ºÀÌ Å©´Ù.
MIT ‘ÄÄÇ»ÅÍ°úÇÐ ¹× ÀΰøÁö´É¿¬±¸¼Ò(CSAIL)’´Â ºÒÈ®½ÇÇÑ È¯°æ¿¡¼µµ ·Îº¿°£¿¡ Çù¾÷ÇÒ ¼ö ÀÖ´Â ±â¼úÀ» °³¹ß ÁßÀÌ´Ù. CSAILÀº ÃÖ±Ù ¿¸° '·Îº¸Æ½½º »çÀ̾𽺠¹× ½Ã½ºÅÛ½º(RSS)' ÄÁÆÛ·±½º¿¡¼ ÀÌ °°Àº ³»¿ëÀ» ÁÖÁ¦·Î ¿¬±¸ °á°ú¸¦ ¹ßÇ¥Çß´Ù. ¿¬±¸ÀÚµéÀº ÀڽŵéÀÇ ¿¬±¸ °á°ú¸¦ Áõ¸íÇϱâ À§ÇØ 3°³ÀÇ ·Îº¿ÀÌ ºÒÈ®½ÇÇÑ »óȲ¿¡¼µµ Çù¾÷À» ÇÒ ¼ö Àִ ȯ°æÀ» ±¸ÃàÇß´Ù. ¸î °³ÀÇ ¹æÀ¸·Î ±¸¼ºµÈ »ç¹«½ÇÀ» ÀÏÁ¾ÀÇ ¹Ì´Ï¾îÃß¾î ¹Ù(bar)·Î ±¸¼ºÇÑ °ÍÀÌ´Ù.
3°³ÀÇ ·Îº¿ °¡¿îµ¥ 1°³ÀÇ ·Îº¿Àº ¹ÙÅÙ´õ ¿ªÇÒÀ» ÇÑ´Ù. À̸§Àº 'PR2'´Ù. ´Ù¸¥ 2°³ÀÇ ·Îº¿Àº 4°³ÀÇ ¹ÙÄû·Î ¿òÁ÷ÀÌ´Â ·Îº¿À¸·Î 'ÅÍƲº¿(turtlebot)'À¸·Î ºÒ¸°´Ù. À̹ø ½ÇÇè¿¡¼ PR2´Â ÅÍƲº¿¿¡°Ô ¸ÆÁÖ¸¦ Àü´ÞÇØÁÖ¸ç, ÅÍƲº¿Àº »ç¹«½Ç³» Á÷¿øµé·ÎºÎÅÍ ÁÖ¹®À» ¹Þ°í ¸ÆÁÖ¸¦ ÁÖ¹®ÇÑ »ç¶÷¿¡°Ô ÀüÇØÁÖ´Â ¿ªÇÒÀ» ÇÑ´Ù. ¸ÆÁÖ¸¦ ÁÖ¹®ÇÏ´Â »ç¶÷µéÀº ¼·Î ´Ù¸¥ ¹æ¿¡ À§Ä¡ÇØ ÀÖ´Ù. À̹ø ½ÇÇèÀÇ ¸ñÇ¥´Â ºÒÈ®½ÇÇÑ »óȲ¿¡¼ °¡Àå È¿À²ÀûÀ¸·Î Á÷¿øµé¿¡°Ô ¸ÆÁÖ¸¦ ¹è´ÞÇÏ´Â ÀÏÀÌ´Ù. ¹æ¾È¿¡ ÀÖ´Â ÅÍƲº¿Àº ´Ù¸¥ ÅÍƲº¿À̳ª PR2°¡ ÇöÀç ¹«½¼ ÀÏÀ» ÇÏ°í ÀÖ´ÂÁö ¸ð¸¥´Ù. ±×µéÀÇ ¼¾¼°¡ ¿Ïº®ÇÏ°Ô ÀÛµ¿ÇÏÁö ¾Ê±â ¶§¹®ÀÌ´Ù.
·Îº¿¿¡ Àû¿ëµÈ ¾Ë°í¸®ÁòÀº 'ºÒÈ®½Ç¼º'¿¡ ±â¹ÝÇÏ°í ÀÖ´Ù. ºÒÈ®½Ç¼ºÀº ¼¾¼, ¼º°ú, Ä¿¹Â´ÏÄÉÀÌ¼Ç µî 3°¡Áö Ãø¸é¿¡¼ ¹ß»ýÇÒ¼ö ÀÖ´Ù. °¢ ·Îº¿¿¡ ¼³Ä¡µÈ ¼¾¼´Â ´Ù¸¥ ·Îº¿ÀÇ »óÅÂ¿Í À§Ä¡¿¡ °üÇØ ºÒÈ®½ÇÇÑ Á¤º¸¸¦ °®°í ÀÖ´Ù. ÀÏÇÏ´Â ¼º°úµµ ¸Å¿ì ºÒÈ®½ÇÇÏ´Ù. ¹ÙÅÙ´õ ·Îº¿À¸·ÎºÎÅÍ ¸ÆÁÖ¸¦ ¹Þ´Â °úÁ¤¿¡¼ ¸ÆÁÖ ÄµÀ» ¶³¾îÆ®¸± ¼öµµ ÀÖ°í ¹è´ÞÇÒ »ç¹µ½ÇÀÇ 뱡ÇâÀ» ãÁö¸øÇØ ¸ÆÁÖ¸¦ ¹è´ÞÇϴµ¥ ½Ã°£ÀÌ ¿À·¡ °É¸± ¼öµµ ÀÖ´Ù. Ä¿¹Â´ÏÄÉÀ̼ǵµ ¿Ïº®ÇÏÁö ¾Ê´Ù. Ä¿¹Â´ÏÄÉÀ̼ÇÀ» ¹æÇØÇÏ´Â ³ëÀÌÁî°¡ ¹ß»ýÇϰųª Ä¿¹Â´ÏÄÉÀÌ¼Ç ¹üÀ§¸¦ ¹þ¾î³ª ·Îº¿ÀÌ À§Ä¡ÇÒ ¼öµµ ÀÖ´Ù. ÀÌ·± 'ºÒÈ®½Ç¼º' ¶§¹®¿¡ ·Îº¿Àº ´Ù¸¥ ·Îº¿ÀÌ ÇöÀç ¾î¶² ÀÏÀ» ÇÏ°í ÀÖ´ÂÁö Àß ¸ð¸¥´Ù. °ü°ÇÀº »ç¶÷°ú ¸¶Âù°¡Áö·Î ºÒÈ®½ÇÇÑ »óȲ¿¡¼µµ ´Ù¸¥ ·Îº¿ÀÌ ÇöÀç ¾î¶² ÀÏÀ» ÇÏ°í ÀÖÀ» °ÍÀ̶ó°í Ãß·ÐÇÏ´Â ´É·ÂÀÌ´Ù.
¿¬±¸ÆÀÀº ÀÌ·± ºÒÈ®½ÇÇÑ »óȲ¿¡¼ Á¤±³ÇÑ Ç÷¡´× ¾Ë°í¸®ÁòÀ» ·Îº¿¿¡ ±¸ÇöÇß´Ù. 3°¡Áö ºÒÇнÇÇÑ »óȲ¿¡¼ ÃÖÀûÀÇ ¼Ö·ç¼ÇÀ» ãµµ·Ï Çß´Ù. ÀÌ¿Í ÇÔ²² '¸ÅÅ©·Î ¾×¼Ç(macro-action)'À̶ó´Â ¾Ë°í¸®Áòµµ Àû¿ëÇß´Ù. ÀÌ´Â ¸¶Ä¡ »ç¶÷ÀÌ ÇൿÇÏ´Â ¾ç½Ä°ú ºñ½ÁÇÑ ¹æ¹ýÀ̶ó°í ÇÑ´Ù. °¡·É »ç¶÷Àº ƯÁ¤ ÀÛ¾÷À» ¼öÇàÇϱâ À§ÇØ ÀÚ½ÅÀÇ ¸ðµç ¹ß°ÉÀ½À» ±¸Ã¼ÀûÀ¸·Î »ý°¢ÇÏÁö ¾Ê´Â´Ù´Â °Í. °æÇèÀ» ÅëÇØ °¢°¢ÀÇ ¹ß°ÉÀ½Àº Á¦2ÀÇ º»´Éó·³ ÀÚ¿¬½º·´°Ô ÇÒ ¼ö ÀÖ´Â Çൿ ÆÐÅÏÀÌ´Ù.
¸¶Âù°¡Áö·Î ·Îº¿Àº '¸ÅÅ©·Î ¾×¼Ç'À̶ó´Â ¾Ë°í¸®ÁòÀ» ÅëÇØ º¹ÀâÇÑ ¹ß°ÉÀ½À» Æ÷°ýÇÒ ¼ö ÀÖ´Â ´É·ÂÀ» °®Ãâ ¼ö ÀÖ´Ù´Â °Í. °¡·É ¹æ¿¡ ÀÖ´Â ¿þÀÌÅÍ ·Îº¿Àº ¹Ù(bar)·Î ¿òÁ÷ÀÌ´Â °úÁ¤¿¡¼ ¹ÙÅÙ´õ ·Îº¿ÀÌ ´Ù¸¥ ·Îº¿¿¡°Ô Áö±Ý ¼ºùÀ» ÇÏ°í ÀÖ´ÂÁö, ¾Æ´Ï¸é ¼ºùÇÒ Áغñ°¡ ÀüÇô ¾ÈµÇ¾î ÀÖ´ÂÁö, ¶Ç´Â ´Ù¸¥ ·Îº¿À» °üÂûÇÒ ¼ö ¾ø´Â ȯ°æÀÎÁö µî¿¡ °üÇØ ´ëºñÇÒ ¼ö ÀÖµµ·Ï ÇÁ·Î±×·¡¹ÖÀ» Çß´Ù. ¿¬±¸ÆÀÀº ÀÌ°°Àº '¸ÅÅ©·Î ¾×¼Ç'ÀÇ °úÁ¤À» 'MacDec-POMDPs'¶ó°í ±ÔÁ¤Çß´Ù. 'decentralized partially observable Markov decision process'ÀÇ ¾àĪÀÌ´Ù. ºñÁß¾ÓÁýÁßÀûÀ̸ç, ºÎºÐÀûÀ¸·Î °üÂû °¡´ÉÇÑ È¯°æ¿¡¼ÀÇ ÀÇ»ç°áÁ¤ ½Ã½ºÅÛÀ̶ó´Â Àǹ̷ΠÇؼ®ÇÒ ¼ö ÀÖ´Ù.
¾ÕÀ¸·Î ÀÌ°°Àº ¿¬±¸´Â °è¼Ó ÁøÇàµÉ °ÍÀÌ´Ù. ºÒÈ®½ÇÇÑ »óȲ¿¡¼ ·Îº¿µéÀÌ ¾î¶»°Ô Çù¾÷À» ÇÒ ¼ö ÀÖ´ÂÁö¿¡ °üÇØ º¸´Ù ³ôÀº ¼öÁØÀÇ ¿¬±¸ °á°ú¹°ÀÌ ³ª¿Â´Ù¸é ·Îº¿ÀÇ ¾²ÀÓ»õ´Â ´õ¿í È®´ëµÉ °ÍÀ¸·Î º¸ÀδÙ. Àç³ÇöÀåÀÇ ±¸Á¶ È°µ¿, ·¹½ºÅä¶û¿¡¼ÀÇ °í°´ Á¢´ë, º´¿ø¿¡¼ÀÇ È¯ÀÚ ±¸® µî ´Ù¾çÇÑ ºÐ¾ß¿¡ Àû¿ë °¡´ÉÇÒ Àü¸ÁÀÌ´Ù. |