°úÇбâ¼úÁ¤º¸Åë½ÅºÎ¿Í Á¤º¸Åë½Å±âȹÆò°¡¿ø(IITP)ÀÇ Çõ½Å¼ºÀ嵿·Â ÇÁ·ÎÁ§Æ®·Î ÃßÁø ÁßÀÎ ¿¢¼Òºê·¹ÀÎ »ç¾÷¿¡¼ ÃÖ÷´Ü Çѱ¹¾î ¾ð¾î¸ðµ¨À» °ø°³Çß´Ù. À̷νá ÀΰøÁö´É(AI) ºñ¼, AI ÁúÀÇÀÀ´ä, Áö´ÉÇü °Ë»ö µî Çѱ¹¾î¸¦ È°¿ëÇÑ ÀΰøÁö´É ¼ºñ½º °³¹ßÀÌ ÇÑÃþ °íµµÈµÉ °ÍÀ¸·Î Àü¸ÁµÈ´Ù.
Çѱ¹ÀüÀÚÅë½Å¿¬±¸¿ø(ETRI)Àº ÃÖ±Ù ÃÖ÷´Ü Çѱ¹¾î ¾ð¾î¸ðµ¨ ‘ÄÚ¹öÆ®(KorBERT)’¸¦ ȨÆäÀÌÁö¸¦ ÅëÇØ °ø°³Çß´Ù.
¿¬±¸ÁøÀÌ °ø°³ÇÑ ¸ðµ¨Àº µÎ Á¾·ù´Ù. ±¸±ÛÀÇ ¾ð¾îÇ¥Çö ¹æ¹ýÀ» ±â¹ÝÀ¸·Î ´õ ¸¹Àº Çѱ¹¾î µ¥ÀÌÅ͸¦ ³Ö¾î ¸¸µç ¾ð¾î¸ðµ¨°ú Çѱ¹¾îÀÇ ‘±³Âø¾î’ Ư¼º±îÁö ¹Ý¿µÇØ ¸¸µç ¾ð¾î¸ðµ¨ÀÌ´Ù. ÀÌ ±â¼úÀº ¿ÃÇØ 3¿ù, ÇÑÄÄ¿ÀÇǽº Áö½Ä°Ë»ö º£Å¸¹öÀü¿¡ žÀçµÇ¾ú´Ù.
ÇϹݱ⿡´Â ETRIÀÇ ¾ð¾î¸ðµ¨À» È°¿ëÇÑ‘¹ý·ÉºÐ¾ß ÁúÀÇÀÀ´ä API’¸¦ Ãß°¡ °ø°³ÇÏ°í ‘À¯»ç ƯÇã Áö´ÉÇü ºÐ¼® ±â¼ú’µµ Ãâ½Ã¸¦ ¸ñÇ¥ÇÏ°í ÀÖ´Ù.
¾ð¾î󸮸¦ À§ÇÑ µö·¯´× ±â¼úÀ» °³¹ßÇϱâ À§Çؼ´Â ÅؽºÆ®¿¡ ±â¼úµÈ ¾îÀýÀ» ¼ýÀڷΠǥÇöÇØ¾ß ÇÑ´Ù. À̸¦ À§ÇØ ±×µ¿¾È ¾ð¾î¸¦ È°¿ëÇÑ ¼ºñ½º¸¦ °³¹ßÇÏ´Â ±â°ü¿¡¼´Â ÁÖ·Î ±¸±ÛÀÇ ´Ù±¹¾î ¾ð¾î¸ðµ¨ ‘¹öÆ®’(BERT)¸¦ »ç¿ëÇß´Ù. ¹öÆ®´Â ¹®Àå ³» ¾îÀýÀ» ÇÑ ±ÛÀÚ¾¿ ³ª´« µÚ, ¾ÕµÚ·Î ÀÚÁÖ ¸¸³ª´Â ±ÛÀÚ³¢¸® ´Ü¾î·Î ÀνÄÇÑ´Ù.
ÀÌ ¹æ½ÄÀº Áö³ÇØ 11¿ù óÀ½ °ø°³µÇ¾úÀ» ¶§ ¾ð¾îó¸® 11°³ ºÐ¾ß¿¡¼ ¸¹Àº ¼º´É Çâ»óÀ» ÀÌ·ï ÁÖ¸ñÀ» ¹Þ¾Ò´Ù. ±¸±ÛÀº 40¿© ¸¸ °ÇÀÇ À§Å°¹é°ú ¹®¼ µ¥ÀÌÅ͸¦ »ç¿ëÇØ Çѱ¹¾î ¾ð¾î¸ðµ¨À» °³¹ßÇß´Ù.
ÇÏÁö¸¸ ETRI ¿¬±¸ÁøÀº ¿©±â¿¡ 23±â°¡(GB)¿¡ ´ÞÇÏ´Â Áö³ 10³â°£ÀÇ ½Å¹®±â»ç¿Í ¹é°ú»çÀü Á¤º¸¸¦ ´õÇØ 45¾ï°³ÀÇ ÇüżҸ¦ ÇнÀ½ÃÄÑ ±¸±Ûº¸´Ù ¸¹Àº Çѱ¹¾î µ¥ÀÌÅ͸¦ ±â¹ÝÀ¸·Î ¾ð¾î¸ðµ¨À» °³¹ßÇß´Ù.
ÇÏÁö¸¸ ´Ü¼øÈ÷ ÀÔ·ÂÇÑ µ¥ÀÌÅÍ ¾ç¸¸À» ´Ã¸®´Â °ÍÀº ¾ð¾î¸ðµ¨ °íµµÈ¿¡ ÇÑ°è°¡ ÀÖ´Ù.
¾Æ¿ï·¯, ÇѱÛÀº ´Ù¸¥ ¾ð¾î¿Í ´Þ¸® ¾î±Ù¿¡ Á¶»ç°¡ ºÙ´Â ±³Âø¾î´Ù. ÀÌ¿¡ ¿¬±¸ÁøÀº Çѱ¹¾îÀÇ ÀÇ¹Ì ÃÖ¼Ò ´ÜÀ§ÀÎ ÇüżұîÁö °í·ÁÇØ Çѱ¹¾î Ư¼ºÀ» ÃÖ´ëÇÑ ¹Ý¿µÇÑ ¾ð¾î¸ðµ¨À» ¸¸µå´Âµ¥ ½ÉÇ÷À» ±â¿ï¿´´Ù.
¿¬±¸ÁøÀº À̹ø Çѱ¹¾î¿¡ ÃÖÀûÈµÈ ¾ð¾î¸ðµ¨ÀÌ ¡ãÀüó¸® °úÁ¤¿¡¼ ÇüżҸ¦ ºÐ¼®ÇÑ ¾ð¾î¸ðµ¨ ¡ãÇѱ¹¾î¿¡ ÃÖÀûÈµÈ ÇнÀ ÆĶó¹ÌÅÍ ¡ã¹æ´ëÇÑ µ¥ÀÌÅÍ ±â¹Ý µîÀÌ ±¸±Û°ú Â÷º°¼º Àִ Ư¡À̶ó°í ¼³¸íÇß´Ù.
°³¹ßµÈ ¾ð¾î¸ðµ¨Àº ¼º´ÉÀ» È®ÀÎÇÏ´Â 5°¡Áö ±âÁØ¿¡¼ ±¸±ÛÀÌ ¹èÆ÷ÇÑ Çѱ¹¾î ¸ðµ¨º¸´Ù ¼º´ÉÀÌ Æò±Õ 4.5% °¡·® ¿ì¼öÇß´Ù. ƯÈ÷ ´Ü¶ô ¼øÀ§È(Passage Ranking) ±âÁØ¿¡¼´Â 7.4%³ª ³ôÀº ¼öÄ¡¸¦ ±â·ÏÇß´Ù.
¿¬±¸ÁøÀÇ ¾ð¾î¸ðµ¨À» È°¿ëÇÏ¸é ¼ºñ½º ¼º´É ¹× °æÀï·ÂÀ» ³ôÀÏ ¼ö ÀÖ¾î µö·¯´× ¿¬±¸, ±³À° µîÀÇ ¸ñÀûÀ¸·Î ´ëÇÐ, ±â¾÷, ±â°üÀÇ °³¹ßÀÚµéÀÇ ¸¹Àº È°¿ëÀÌ ÀÌ·ïÁú °ÍÀ¸·Î ¿¹ÃøµÈ´Ù.
°³¹ßµÈ ¾ð¾î¸ðµ¨Àº ´ëÇ¥ÀûÀÎ µö·¯´× ÇÁ·¹ÀÓ¿öÅ©ÀÎ ÆÄÀÌÅäÄ¡(PyTorch)¿Í ÅÙ¼Ç÷οì(Tensorflow) ȯ°æ ¸ðµÎ¿¡¼ »ç¿ë °¡´ÉÇÏ¸ç °ø°øÀΰøÁö´É ¿ÀÇ API‧µ¥ÀÌÅÍ ¼ºñ½º Æ÷Åп¡¼ ½±°Ô ã¾Æº¼ ¼ö ÀÖ´Ù.
¿¢¼Òºê·¹ÀÎ »ç¾÷ÀÇ ÃÑ°ýÃ¥ÀÓÀÚÀÎ ETRI ±èÇö±â ¹Ú»ç´Â “Çѱ¹¾î¿¡ ÃÖÀûÈµÈ ¾ð¾î¸ðµ¨À» ÅëÇØ Çѱ¹¾î ºÐ¼®, Áö½ÄÃß·Ð, ÁúÀÇÀÀ´ä µîÀÇ ´Ù¾çÇÑ Çѱ¹¾î µö·¯´× ±â¼úÀÇ °íµµÈ°¡ °¡´ÉÇÒ °ÍÀ¸·Î ±â´ëµÈ´Ù”°í ¸»Çß´Ù.
°úÇбâ¼úÁ¤º¸Åë½ÅºÎ ÀΰøÁö´ÉÁ¤Ã¥ÆÀ ±èÁö¿ø ÆÀÀåµµ “AI Çãºê¸¦ ÅëÇØ Á¤ºÎ R&D¸¦ ÅëÇØ °³¹ßµÇ´Â ¾çÁúÀÇ ÀΰøÁö´É SW API ¹× µ¥ÀÌÅ͸¦ °ø°³ÇÔÀ¸·Î½á °³¹æÇü Çõ½ÅÀ» ÃËÁøÇÒ ¼ö ÀÖµµ·Ï ³ë·ÂÇÏ°Ú´Ù.”°í ¹àÇû´Ù.
ÇöÀç ±¸±Û°ú ¿¬±¸ÁøÀÌ ¾ð¾î¸ðµ¨ °³¹ß¿¡ È°¿ëÇÑ BERT ¹æ½ÄÀº ¾à 512°³ ÀÌ»óÀÇ ´Ü¾î°¡ µé¾î°£ ¹®¼¸¦ ÇÑ ¹ø¿¡ ó¸®ÇÏÁö ¸øÇÑ´Ù. ÇâÈÄ ¿¬±¸ÁøÀº ÇÑ ¹ø¿¡ ´õ¿í ¸¹Àº ¾ð¾î µ¥ÀÌÅ͸¦ ó¸®ÇÏ°í °ËÁõ ¹æ¹ýÀ» °íµµÈÇÑ ¸ðµ¨À» °³¹ßÇÒ °èȹÀÌ´Ù. |