¹«¼± Åë½Å¿¡¼ ½ÉÃþ ½Å°æ¸Á(DNN)°ú ½ÉÃþ °È ÇнÀ(DRL)ÀÇ Àû¿ëÀ» Ž»öÇÏ°í ¹«¼± Åë½Å °³¹ßÀ» °¡¼ÓÈÇÑ´Ù. º» ¿¬±¸´Â ÇÑ ¸íÀÇ ±âº» »ç¿ëÀÚ·Î ±¸¼ºµÈ °£´ÜÇÑ ÀÎÁö ¹«¼± ½Ã³ª¸®¿À¸¦ Á¦¾ÈÇÑ´Ù. º¸Á¶ »ç¿ëÀÚ ÇÑ ¸í°ú ÇÔ²². º¸Á¶ »ç¿ëÀÚ´Â ÁÖÆļö ÀÚ¿øÀ» °øÀ¯ÇÏ·Á°í ½ÃµµÇÕ´Ï´Ù. ±âº» »ç¿ëÀÚ DNN ¹× DRLÀ» ±â¹ÝÀ¸·Î ÇÏ´Â Áö´ÉÇü Àü·Â ¾Ë°í¸®Áò ¸ðµ¨ÀÌ ±¸ÃàµÈ´Ù. MATLAB Ç÷§ÆûÀ» »ç¿ëÇÏ¿© ¸ðµ¨À» ½Ã¹Ä·¹À̼ÇÇÕ´Ï´Ù. ¼·Î ´Ù¸¥ Àü·«¿¡ µû¸¥ ¾Ë°í¸®Áò ¸ðµ¨ÀÇ ¼º´É ºÐ¼®¿¡¼ µÎ ¹ø° Àü·Â Á¦¾î Àü·«ÀÌ Ã¹ ¹ø° Àü·Â Á¦¾î Àü·«º¸´Ù ´õ º¸¼öÀûÀÎ °ÍÀ¸·Î ³ªÅ¸³µ´Ù. µÎ ¹ø° Àü·Â Á¦¾î Àü·«Àº ù ¹ø° Àü·Â Á¦¾î Àü·«º¸´Ù ´õ ¸¹Àº ¹Ýº¹À» °æÇèÇß´Ù. ¼º°ø·ü Ãø¸é¿¡¼ µÎ ¹ø° Àü·Â Á¦¾î Àü·«Àº ù ¹ø° Àü·Â Á¦¾î Àü·«º¸´Ù ¹Ýº¹ Ƚ¼ö°¡ ´õ ¸¹½À´Ï´Ù. Æò±Õ Àü¼Û Ƚ¼ö´Â °°Àº º¯È Ãß¼¼¸¦ º¸ÀÌÁö¸¸ ¼º°ø·üÀº 1¿¡ À̸¦ ¼ö ÀÖ´Ù. ±âÁ¸ÀÇ ºÐ»ê Ŭ·¯½ºÅ͸µ ¹× Àü·Â Á¦¾î(DCPC) ¾Ë°í¸®µë°ú ºñ±³ÇßÀ» ¶§, ÀÌ ¿¬±¸¿¡¼ ¾Ë°í¸®µëÀÇ ¼ö·Å·üÀÌ ´õ ³ôÀº °ÍÀº ºÐ¸íÇÏ´Ù. DRL¿¡ ±â¹ÝÇÑ Á¦¾ÈµÈ DQN ¾Ë°í¸®µëÀº ¼ö·ÅÀ» ´Þ¼ºÇϱâ À§ÇØ ¸î °¡Áö ´Ü°è¸¸ ÇÊ¿ä·Î Çϸç, ÀÌ´Â ±× È¿°ú¸¦ °ËÁõÇÑ´Ù.
Á¦ 1Æí : MATLAB ±âº»Æí
1. MATLAB ±âº»»ç¿ëÆí ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 003
1.1 MATLAB ½ÃÀÛÇϱ⠡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 003
¸í·Éâ(command Window)¿¡¼ÀÇ ÀÔ·Â 005
µµ¿ò¸»(Help)ÀÇ ÀÌ¿ë ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 007
1.2 ÀÔ·Â ¿À·ùÀÇ ¼öÁ¤ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 008
°è»êÀÇ ÁßÁö ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 009
MATLAB Á¾·áÇϱ⠡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 009
1.3 ¿¬»ê°ú º¯¼öÀÇ ÇÒ´ç ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 009
¿¬»êÀÚ ¿ì¼±¼øÀ§ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 011
³»ÀåÇÔ¼ö ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 012
1.4 µ¥ÀÌÅÍÀÇ Ç¥Çö ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 013
1.5 º¯¼öÀÇ Ã³¸® ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 015
º¯¼ö À̸§ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 015
clear ¸í·É¾î ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 016
Ư¼öº¯¼ö¿Í Á¤¼ö ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 017
whos ¸í·É¾î ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 017
1.6 º¤ÅÍ¿Í Çà·Ä ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 018
º¤ÅÍ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 018
Çà·Ä ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 023
½ºÅ©¸° Ãâ·Â°ú ¾ïÁ¦ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 024
1.7 ·£´ý(Random)¼ö¿Í º¹¼Ò¼ö ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 025
·£´ý ¼ö ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 025
º¹¼Ò¼ö ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 027
1.8 ±âÈ£¸¦ ÀÌ¿ëÇÑ ¿¬»ê ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 028
±âÈ£½Ä¿¡¼ÀÇ Ä¡È¯ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 029
1.9 ÄÚµå ÆÄÀÏ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 030
½ºÅ©¸³Æ® ÄÚµå ÆÄÀÏ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 030
ÄÚ¸àÆ®ÀÇ Ãß°¡ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 032
ÇÔ¼ö ÄÚµå ÆÄÀÏ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 033
»ç¿ëÀÚ Á¤ÀÇÇÔ¼ö ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 036
1.10 °£´ÜÇÑ ±×·¡ÇÁÀÇ »ý¼º ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 037
ezplotÀ» ÀÌ¿ëÇÑ ±×·¡ÇÁ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 037
plotÀ» ÀÌ¿ëÇÑ ±×·¡ÇÁ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 039
3Â÷¿ø ±×·¡ÇÁ ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 042
1.11 MATLAB°ú ¿¢¼¿(Excel)ÀÇ Á¢¼Ó 043
¿¢¼¿ µ¥ÀÌÅÍ ºÒ·¯¿À±â ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 043
µ¥ÀÌÅÍ °¡Á®¿À±â ¿É¼Ç ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 046
½ºÅ©¸³Æ® »ý¼º ¿É¼Ç ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 049
ÇÔ¼ö »ý¼º ¿É¼Ç ¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤¡¤ 049
»ý¼ºµÈ µ¥ÀÌÅ͸¦ ¿¢¼¿ÆÄÀÏ·Î ÀúÀåÇϱ⠡¤¡¤ 050
Á¦ 2Æí : ¿¬±¸³í¹®
Application of deep neural network and deep reinforcement learning in
wireless communication
1. Introduction 52
2. Literature review 52
3. Methods 54
4. Results and discussion 60
5. Conclusions 63
6. References 63