ÀÚ¿¬¾î ó¸® ¸ðµ¨ÀÇ ¼º´ÉÀ» ³ôÀÌ´Â ÇÙ½É ºñ°á, ¡ºÇѱ¹¾î ÀÓº£µù¡»ÀÓº£µù(embedding)Àº ÀÚ¿¬¾î¸¦ ¼ýÀÚÀÇ ³ª¿ÀÎ º¤ÅÍ·Î ¹Ù²Û °á°ú ȤÀº ±× ÀÏ·ÃÀÇ °úÁ¤ Àüü¸¦ °¡¸®Å°´Â ¿ë¾î´Ù. ´Ü¾î³ª ¹®Àå °¢°¢À» º¤ÅÍ·Î º¯È¯ÇØ º¤ÅÍ °ø°£¿¡ '³¢¿ö ³Ö´Â´Ù(embed)'´Â ÃëÁö¿¡¼ ÀÓº£µùÀ̶ó´Â À̸§ÀÌ ºÙ¾ú´Ù. ÄÄÇ»ÅÍ°¡ ÀÚ¿¬¾î¸¦ ó¸®ÇÒ ¼ö ÀÖ°Ô ÇÏ·Á¸é ÀÚ¿¬¾î¸¦ °è»ê °¡´ÉÇÑ Çü½ÄÀÎ ÀÓº£µùÀ¸·Î ¹Ù²ãÁà¾ß ÇÑ´Ù. ÀÓº£µùÀº ÄÄÇ»ÅÍ°¡ ÀÚ¿¬¾î¸¦ ÀÌÇØÇϵµ·Ï Çϴ ù °ü¹®À¸·Î ¸Å¿ì Áß¿äÇÑ ±â´ÉÀ» ÇÑ´Ù. ÀÚ¿¬¾î ó¸® ¸ðµ¨ÀÇ ¼º´ÉÀº ÀÓº£µùÀÌ Á¿ìÇÑ´Ù°í Çصµ °ú¾ðÀÌ ¾Æ´Ï´Ù. ÀÌ Ã¥¿¡¼´Â ´Ù¾çÇÑ ÀÓº£µù ±â¹ýÀ» ÀϺ°ÇÏ°í Çѱ¹¾î µ¥ÀÌÅÍ Àüó¸®, ÀÓº£µù ±¸Ãà¿¡ À̸£´Â Àü °úÁ¤À» Æ©Å丮¾ó ¹æ½ÄÀ¸·Î ¼Ò°³ÇÑ´Ù. Word2Vec µî ´Ü¾î ¼öÁØ ±â¹ýºÎÅÍ ELMo, BERT µî ¹®Àå ¼öÁØ ÀÓº£µù±îÁö ´Ù·é´Ù.