¾ÆÀÌÁ¨»çÀ̾𽺰¡ °í·Á´ëÇб³, ÀÓÆ丮¾ó Ä®¸®Áö ·±´ø(I.C.L.)°úÀÇ °øµ¿ ¿¬±¸¸¦ ÅëÇØ ÀÇ·á ºÐ¾ß ¾ð¾î¸ðµ¨ ÀΰøÁö´É(AI)ÀÇ »õ ÁöÆòÀ» ¿¾ú´Ù. ¾ÆÀÌÁ¨»çÀ̾𽺴 3°³ ±â°üÀÌ ¿¬ÇÕÇØ °³¹ßÇÑ sLLM (small LLM, ¼ÒÇü¾ð¾î¸ðµ¨)ÀÎ ¡®Meerkat-7B¡¯°¡ ¹Ì±¹ ÀÇ»ç¸éÇã½ÃÇè(USMLE)À» Åë°úÇÏ´Â µ¥ óÀ½À¸·Î ¼º°øÇß´Ù°í ¹àÇû´Ù.
OpenAI, ±¸±Û µî ºòÅ×Å©µéÀÌ ÁÖµµÇÏ´Â LLM (°Å´ë¾ð¾î¸ðµ¨)µéÀÌ ¼º°ú¸¦ º¸ÀÌ°í ÀÖÁö¸¸, ÀÌ´Â ¿ÜºÎ Ŭ¶ó¿ìµå¸¦ »ç¿ëÇϱ⠶§¹®¿¡ º´¿øÀ̳ª ±â¾÷ µî¿¡¼ »ç¿ëÇϱ⿡´Â ¹Î°¨ÇÑ µ¥ÀÌÅÍ°¡ À¯ÃâµÉ À§ÇèÀÌ ÀÖ´Ù. ÀÌ¿¡ ±â°ü ³»ºÎ¿¡ ¼³Ä¡ÇØ º¸¾È¼ºÀ» ³ôÀÏ ¼ö ÀÖ´Â ¡®¿ÂÇÁ·¹¹Ì½º(On-premise)¡¯ ¹æ½ÄÀÌ °¡´ÉÇÑ sLLM¿¡ ´ëÇÑ ¼ö¿ä°¡ Áõ°¡ÇÏ°í ÀÖ´Ù.
sLLMÀº ¸ðµ¨ÀÇ ¸Å°³º¯¼ö(parameter)¸¦ ÁÙ¿© ºñ¿ëÀ» ÁÙÀÌ°í, ¹Ì¼¼Á¶Á¤(fine-tuning)À¸·Î Á¤È®µµ¸¦ ³ôÀÎ ¸ðµ¨À» ÀǹÌÇÑ´Ù. ¸Å°³º¯¼öÀÇ °æ¿ì OpenAIÀÇ GPT-3.5(ChatGPT)´Â 1750¾ï°³, ±¸±ÛÀÇ PaLMÀº 5400¾ï°³¿¡ ´ÞÇÏÁö¸¸, Meerkat-7B´Â 70¾ï°³¿¡ ºÒ°úÇÏ´Ù. ÀÌ´Â PC ÇÑ ´ë¿¡¼µµ ¼³Ä¡ ¹× È°¿ëÇÒ ¼ö ÀÖ´Â Å©±âÀÇ ¸ðµ¨À̶ó´Â Á¡¿¡¼ ÀÇÀÇ°¡ ÀÖ´Ù.
Meerkat-7B´Â º¹ÀâÇÑ ÀÇ·á ¹®Á¦¸¦ ÇØ°áÇÏ´Â µ¥ ÇÊ¿äÇÑ ´Ù´Ü°è Ãß·Ð ´É·ÂÀ» °®Ãá ÀÇ»ý¸íºÐ¾ß¿¡ Æ¯ÈµÈ sLLM ¸ðµ¨ÀÌ´Ù. 60Á¡ÀÌ Æò±Õ Çհݼ±ÀÎ ¹Ì±¹ ÀÇ»ç¸éÇã½ÃÇè¿¡¼ ±âÁ¸ÀÇ ÃÖ°í sLLMÀÎ MediTron-7B´Â 52Á¡À¸·Î Åë°ú¿¡ ½ÇÆÐÇÑ ¹Ý¸é Meerkat-7B´Â 74Á¡À̶ó´Â ³ôÀº Á¡¼ö·Î Åë°úÇØ ±× ¼º´ÉÀ» ÀÔÁõÇß´Ù. ¶ÇÇÑ 7°³ÀÇ ÀÇ·á º¥Ä¡¸¶Å© ¼º´ÉÆò°¡¿¡¼ GPT-3.5(175B) ¸ðµ¨º¸´Ù Æò±Õ 13% ³ôÀº ¼º´ÉÀ» º¸ÀÓÀ¸·Î½á ÀÇ·á ºÐ¾ß¿¡¼ÀÇ ¿ÀǼҽº ¸ðµ¨ °³¹ßÀÌ Áß¿äÇÑ ÁøÀüÀ» ÀÌ·ðÀ½À» º¸¿©Áá´Ù.
Meerkat-7B¿Í °°Àº ÀÇ»ý¸í Æ¯È ¾ð¾î¸ðµ¨Àº º´¿ø ³»¿¡¼´Â ÀÓ»ó ÀÇ»ç °áÁ¤ Áö¿ø, ºñÇ¥ÁØÈµÈ ÀÇ·á Â÷Æ®ÀÇ Á¤¸®¿Í °°Àº ÀǷᡤ¿ø¹« ÇàÁ¤ÀÇ È¿À²¼ºÀ» Á¦°íÇÏ°í, Á¦¾à ȸ»ç¿¡¼´Â ƯÇ㠺м®, ÀÓ»ó ¼³°è, ¹®¼ ÀÛ¼º µîÀÇ ³ëµ¿ Áý¾àÀûÀÌ°í Àü¹®¼ºÀ» ¿äÇÏ´Â ¾÷¹«¸¦ Áö¿øÇØ °¢ ºÐ¾ß Àü¹®°¡ÀÇ ¾÷¹« ºÎ´ãÀ» °æ°¨ÇÏ´Â µ¥ ±â¿©ÇÒ ¼ö ÀÖ´Ù.
¾ÆÀÌÁ¨»çÀ̾ð½ºÀÇ ÁÖ·Â »ç¾÷ ºÐ¾ß´Â »ý¼ºÇü AI¸¦ ÀÌ¿ëÇÑ ½Å¾à °³¹ßÀÌ´Ù. ¾ÆÀÌÁ¨»çÀ̾𽺠°Àç¿ì ´ëÇ¥´Â ¡°ÀÇ»ý¸í ºÐ¾ß¿¡¼´Â ¸ÅÀÏ 3000Æí ÀÌ»óÀÇ ¿¬±¸ ³í¹®ÀÌ ¹ßÇ¥µÇ´Âµ¥, ÀÌ·¸°Ô ¹æ´ëÇÑ Á¤º¸ ¼Ó¿¡¼ ½Å¾à °³¹ß¿¡ ÇÊ¿äÇÑ »õ·Î¿î Áúº´ Ç¥Àû ´Ü¹éÁúÀ» ½Äº°ÇÏ°í °ËÁõÇÏ´Â ÀÛ¾÷Àº ¸Å¿ì ½Ã°£ÀÌ ¼Ò¸ðµÇ´Â ÀÏ¡±À̶ó¸ç ¡°Meerkat-7B¸¦ ÅëÇØ »õ·Î¿î ¾à¹° Ÿ±êÀ» ¹ß±¼ÇÏ´Â °úÁ¤ÀÇ È¿À²¼ºÀ» ´ëÆø Çâ»ó½Ãų ¼ö ÀÖÀ» °ÍÀ¸·Î ±â´ëÇÏ°í, À̹ø ¼º°ú¸¦ ¹ÙÅÁÀ¸·Î ÀÇ·á Æ¯È LLMÀ» È°¿ëÇÑ ½Å±Ô »ç¾÷¸ðµ¨ ¶ÇÇÑ Áغñ Áß¡±À̶ó°í ¹àÇû´Ù.
ÀÌ ±â»ç¿¡ ´ëÇؼ ¾î¶»°Ô »ý°¢ÇϽóª¿ä?
-
-
-
-
-
-