¿ù°£ Àα⠰Խù°

°Ô½Ã¹° 111°Ç
   
À¥·Î±× HTTP User-agent
±Û¾´ÀÌ : ÃÖ°í°ü¸®ÀÚ ³¯Â¥ : 2009-11-30 (¿ù) 22:28 Á¶È¸ : 30437
±ÛÁÖ¼Ò :
                             

 
À¥·Îº¿, RSS¸®´õ, À¥ ºê¶ó¿ìÀú µîÀÇ À¥¹®¼­¸¦ ·ÎµåÇÏ´Â ÇÁ·Î±×·¥Àº ¸î°³ÀÇ RFC Ç¥ÁØ¿¡ ÀÇÇØ User-agent¸¦ HTTP Request Header¿¡ Àûµµ·Ï µÇ¾î ÀÖ´Ù. ±Ç°í»çÇ×À̹ǷΠ²À ÁöÅ°Áö´Â ¾ÊÀ¸¸ç, Áöų Àǹ«µµ ¾ø±ä ÇÏ´Ù. ÇÏÁö¸¸ °£È¤ À¥¼­¹ö ¼³Á¤¿¡ ÀÇÇØ Æ¯Á¤ User-agent¿¡ ´ëÇؼ­ ¶Ç´Â ƯÁ¤ User-agent¿¡°Ô¸¸ º°µµÀÇ À¥ÆäÀÌÁö¸¦ Àü¼ÛÇϵµ·Ï ¸¸µé¾îÁø »çÀÌÆ®µµ Àֱ⠶§¹®¿¡ °¡±ÞÀû °íÀ¯ÀÇ User-agent(ÀÌÇÏ UA)°ªÀ» Àû¾î¼­ RequestÇÑ´Ù.
³» ºí·Î±× À¥¼­¹ö¿¡¼­ ³²±ä HTTP·Î±×¸¦ ºÐ¼®Çؼ­ ¸î°¡Áö ÀÚÁÖ µé¸£´Â UA°ªÀ» ¼Ò°³ÇØ º»´Ù. ¼ø¼­ÀÇ ±âÁØÀº µü Çϳª»ÓÀδÙ. ´ÙÀ½À» 1¹ø¿¡ ³õ´Â´Ù´Â°Í;;;;
¿ì¼± ¸î°¡Áö Àß ¾Ë·ÁÁø °Ë»ö¾÷üÀÇ ·Îº¿µé. ´ëü·Î UA¸íÀ» ÀÌ¿ëÇØ ·Îº¿ ¹èÁ¦ Ç¥ÁØ ¹æ¹ý¿¡ µû¶ó ¼öÁýÀ» °ÅºÎÇÒ ¼ö´Â ÀÖÁö¸¸ ÀÌ ¹èÁ¦Ç¥ÁØÀ̶õ°Ô ¹æ¹®À» °ÅºÎÇÒ ¼ö´Â ¾ø´Ù. °ÅºÎÇÏ´Â »çÀÌÆ®¶ó´Â »ç½ÇÀº Àû¾îµµ robots.txtÆÄÀÏ¿¡ ´ëÇÑ ¹æ¹® 1ȸ ÀÌ»óÀ» ÇØ¾ß ÇÒ¼ö Àֱ⠶§¹®ÀÌ´Ù.
À¥°Ë»ö ¾÷üÀÇ À¥¹®¼­ ¼öÁý ¼ÒÇÁÆ®¿þ¾î¸¦ ·Îº¿, À¥·Îº¿À̶ó°íµµ ÇÏ°í Å©·Ñ·¯(crawler), ±×·¡¹ö(grabber), ½ºÆÄÀÌ´õ(spider)¶ó°íµµ ÇÑ´Ù. ¿©±â´Â ³» ºí·Î±× À¥¼­¹ö ·Î±×¿¡ ³²Àº UA°ªÀ» À§ÁÖ·Î ¼Ò°³Çß°í, ´õ ¸¹Àº UA¸í(Á¤È®ÇÑ UA°ª ¸»°í)Àº http://www.wikipedia.org/robots.txt¸¦ º¸¸é ¾Ë¼ö ÀÖ´Ù^^
¿©´ãÀε¥..
ÈçÈ÷ robots.txt¿¡ ´ëÇØ À߸ø ¾Ë°í ÀÖ´Â °ÍÁß Çϳª°¡ crawl-delay: 1 sec ÀÌ°Ô Ç¥ÁØÀ̶ó°í »ý°¢Çϴ°ŴÙ. À̰ŠǥÁØ ¾Æ´Ï´Ù;;; robots.txt¿¡ »ç¿ëÇÒ¼ö ÀÖ´Â key´Â User-agent¿Í disallow »ÓÀÌ´Ù. allowµµ Ç¥ÁØÀÌ ¾Æ´Ï´Ù. robots.txt ÀÚü°¡ ±Ô¾àÀÌ ¾Æ´Ï¶ó Á¦¾ÈÀ̱⠶§¹®¿¡ °¢ ·Îº¿¸¶´Ù robots.txtÆÄÀÏÀÇ Çؼ®¿¡ ´ëÇÑ È®Àå±â´ÉÀ» ¸¶·ÃÇÑ °ÍµéÀÌ °¡²û Àִµ¥, crawl-delay³ª allowµîÀÌ ±×·± °ÍÀÌ´Ù. ÀÚ¼¼ÇÑ ³»¿ëÀº http://www.robotstxt.org/¿¡¼­^^;
  1. ´ÙÀ½ : Mozilla/4.0 (compatible; MSIE is not me; DAUMOA/1.0.0; DAUM Web Robot; Daum Communications Corp., Korea)

    Mozilla compatibleÀ» ¼±¾ðÇÏ°í DAUMOA¶ó´Â UA¸íÀ» ¾²´Â À¥Å©·Ñ·¯. MSIE is not me¶ó°í ÀûÀº ºÎºÐÀÌ ¿Ö ÀÖ´ÂÁö´Â ¼¼»ó¿¡¼­ µü 3¸í¸¸ ¾È´Ù..¤¾¤¾;;
    UA È®Àå ¹®ÀÚ¿­ÀÇ ³»¿ëÀº Á¶¸¸°£ ¹Ù²ðÁöµµ ¸ð¸£³ª, DAUMOA¶Ç´Â EDI¶ó´Â À̸§À¸·Î robots.txt¿¡ »ç¿ëÇÒ ¼ö ÀÖ´Ù´Â°Ç º¯ÇÏÁö ¾Ê´Â´Ù. EDI´Â DAUMOAÀÇ °³¹ß¹öÀüÀÇ UA¸íÀÌ´Ù.(ÇÁ·ÎÁ§Æ®ÄÚµå¶ó°íµµ ÇÏ°í..¤¾¤¾;;;)
    (¼³¸¶ ´ë¿Üºñ´Â ¾Æ´Ï°ÚÁö? ¤Ñ¤Ñ¤»)
    ¾ÆÁ÷ ·Îº¿ ¼Ò°³ ÆäÀÌÁö°¡ °ø°³µÇÁö ¾Ê¾Ò´Ù. °ð °ø°³µÉ ¿¹Á¤. http://www.robotstxt.org¿¡¼­ Á¦¾ÈÇÏ´Â ·Îº¿ ¹èÁ¦ Ç¥ÁØÀ» ÁؼöÇÑ´Ù.

  2. ±¸±Û : Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

    ±¸±Û À¥°Ë»öÀ» À§ÇÑ À¥Å©·Ñ·¯. "±¸±Ûº¿"À¸·Î ¾Ë·ÁÁ® ÀÖ´Ù.
    ¿ª½Ã Mozilla compatibleÀ» ¼±¾ðÇÏ°í GooglebotÀ̶ó´Â UA¸íÀ» ¾´´Ù.
    ¿ª½Ã robotstxt Ç¥ÁØÀ» ÁؼöÇÑ´Ù. ¼Ò°³ÆäÀÌÁöµµ Àß ¸¸µé¾îÁ® ÀÖ´Ù.

  3. ±¸±Û : Feedfetcher-Google; (+http://www.google.com/feedfetcher.html)

    ±¸±ÛÀÇ °³ÀÎÈ­µÈ Ȩ, ±¸±Û ¸®´õ µî¿¡ Feed¸¦ µî·ÏÇϸé ÀÌ ·Îº¿ÀÌ ¼öÁýÇÑ´Ù. ÀÌ ·Îº¿Àº robotstxt denialÀ» ÁؼöÇÏÁö ¾Ê´Âµ¥, ÀÌ´Â feed¸¦ ¼öÁýÇØ¿Àµµ·Ï ¿äûÇÑ »ç¶÷ÀÇ ¿äûÀÌ ¿ì¼±Çϱ⠶§¹®À̶ó°í ÀûÇôÀÖ´Ù.

  4. ±¸±Û : Mediapartners-Google/2.1

    ±¸±Û AdSense¸¦ À§ÇÑ À¥Å©·Ñ·¯. ÀÌ ·Îº¿ÀÌ ¹®¼­¸¦ ¼öÁýÇÏ¿© Å°¿öµå¸¦ ÃßÃâ, ¾î¶² ±¤°í¸¦ °ÔÀçÇÒÁö¸¦ °áÁ¤Çϴµ¥ ¾²ÀδÙ. robotstxtÇ¥ÁØÀ» ÁؼöÇϱ⠶§¹®¿¡ User-agent: *À» ½á¼­ ·Îº¿À» °ÅºÎÇϸé AdSense³ëÃâ¿¡ ¹®Á¦°¡ »ý±æ¼ö ÀÖ´Ù. À¥°Ë»ö À妽ÌÀº °ÅºÎÇϸ鼭 AdSense¸¦ »ç¿ëÇÏ·Á¸é User-agent: *À» °ÅºÎÇÏ°í User-agent: Mediapartners-Google ¿¡ ´ëÇØ Çã¿ëÇϸéµÈ´Ù.

  5. ¾ßÈÄ : Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp )

    ¾ßÈÄ À¥°Ë»ö Å©·Ñ·¯. ¿ª½Ã Mozilla compatibleÀ» ¼±¾ðÇÏ°í Slurp¶ó´Â UA¸íÀ» ¾´´Ù. robotstxt Ç¥ÁØÀ» ÁؼöÇÑ´Ù.
    ·Îº¿ ¼Ò°³ ÆäÀÌÁöµµ Àß ¸¸µé¾îÁ® ÀÖ´Ù.

  6. ³×À̹ö : Mozilla/4.0 (compatible; NaverBot/1.0; http://help.naver.com/delete_main.asp)

    ³×À̹öÀÇ À¥°Ë»ö¿ë Å©·Ñ·¯. Mozilla compatibleÀ» ¼±¾ðÇÏ°í, NaverBotÀ̶ó´Â UA¸íÀ» ¾´´Ù.
    ·Îº¿ ¼Ò°³ ÆäÀÌÁö°¡ Àß ÁغñµÇ¾î ÀÖÀ¸¸ç, robotstxt ¹èÁ¦Ç¥ÁØÀ» ÁؼöÇÑ´Ù. À妽º »èÁ¦¿äûÀ» ÇÒ¼ö ÀÖµµ·Ï ¸¸µé¾î µÎ¾ú´Ù.

  7. Microsoft : msnbot-media/1.0 (+http://search.msn.com/msnbot.htm)

    MozillaÀÇ À̸§À» °ÉÁö ¾Ê°í Á÷Á¢ msnbot-media¶ó´Â UA¸íÀ» Àü¸é¿¡ ³»¼¼¿ü´Ù. ¹«½¼ ÀڽۨÀϱî;;; ¼Ò°³ÆäÀÌÁö°¡ ÁغñµÇ¾î ÀÖ°í, MSNBotÀ̶ó´Â UA¸íÀ¸·Î ¹èÁ¦Ç¥ÁØÀ» ÁؼöÇÑ´Ù. 
     8. Microsoft : msnbot/1.0(+http://search.man.com/msnbot.htm)
          MSÀÇ ¶Ç´Ù¸¥ ·Îº¿. UA ¸íÀÌ ±×³É msnbotÀÌ´Ù. ¹«½¼Â÷ÀÌÀÎÁö´Â À߸ð¸£Áö¸¸ µÎ°¡Áö MS ·Îº¿¸ðµÎ MSNBot À̶ó´Â UA¸íÀ¸·Î ¹èÁ¦Ç¥ÁØÀ» ÁؼöÇÑ´Ù.

     9. ÇÑRSS : HanRSS/1.0

    10. ¿Ãºí·Î±×: Allblog.net RssSync4 (I Love Bluecat)

¿Ãºí·Î±×ÀÇ FeedÅ©·Ñ·¯. ¿Ãºí¿¡ Feed¸¦ µî·ÏÇÏ¸é ±×¶§ºÎÅÍ ÁÖ±âÀûÀ¸·Î ÀÌ ·Îº¿ÀÌ ºí·Î±×¸¦ ¹æ¹®ÇÑ´Ù. UA¸íÀÌ ¸ðÈ£ÇÏ´Ù.
¾Æ¸¶ ¹èÁ¦Ç¥ÁØÀ» ÁöÅ°Áö ¾Ê´Â °ÍÀ¸·Î º¸À̴µ¥, ±¸±ÛÀÇ Feedfetcher¿Í °°Àº ÀÌÀ¯ÀÏ °ÍÀ¸·Î »ý°¢µÈ´Ù. feed Å©·Ñ·¯´Â ¹èÁ¦Ç¥ÁØ ÁöÅ°¸é ¸ÞŸºí·Î±×ÀÇ ¿ªÇÒ ¼öÇàÀÌ Á» ¾î·Æ´Ù;;

  1. À̿ø° : Mozilla/4.0 (compatible; Eolin)

    À̿ø°Àº PingÀ¸·Î¸¸ °Ô½Ã¹°À» ¾÷µ¥ÀÌÆ® ÇÏ´ÂÁÙ ¾Ë¾Ò´Âµ¥, Å©·Ñ¸µµµ Çϴ°¡º¸´Ù. ¹º°¡ ±Ã¿©ÁöÃ¥À¸·Î °áÁ¤µÈ UA¸íÀÌ ´À²¸Áø´Ù. UA¸íÀº EolinÀÌ´Ù.

  2. Colcol : Colcol Meta(colcol.net) ColRSS V5.0 by.Mog422

    ColcolÀ̶ó´Â ±¹³» ºí·Î±× ¸ÞŸ »çÀÌÆ®Àε¥, Àß ±â¾ï ¾È³ª´Âµ¥ ¿©±âµµ µî·ÏÀ» ÇÑÀûÀÌ Àִ°¡º¸´Ù. ²Ï³ª ¿­½ÉÈ÷ ±Ü¾î°£´Ù.
    ³»°¡ ãÁö ¸øÇÑ °ÍÀÎÁö, ·Îº¿ ¼Ò°³ ÆäÀÌÁö³ª ·Îº¿ ¹èÁ¦ Ç¥ÁØ Áؼö¿©ºÎµµ ¾Ë¼ö ¾ø´Ù. UA¸íÀÌ ¸ðÈ£ÇÏ´Ù.

  3. Ç÷£Æ¼³Ý : PlantyNet_WebRobot_V1.9 dhkang@plantynet.com

    ¿Ö Å©·Ñ¸µÀ» ÇÏ´ÂÁö Àß ¸ð¸£°Ú´Ù. ÇÏ¿©°£ Ç÷£Æ¼³Ý¿¡¼­µµ Å©·Ñ¸µÀ» ÇÑ´Ù. http://plantynet.com/
    ¹èÁ¦Ç¥ÁØÀº ÁöŲ´Ù. ±Ùµ¥ ¾î¶² UA°ªÀ¸·Î ¸·¾Æ¾ß Çϴ°ÇÁö..¤Ñ¤Ñ¤» Å©·Ñ¸µ ¸ñÀû°ú Å©·Ñ¸µ µ¥ÀÌÅ͸¦ ¼­ºñ½ºÇϴ°÷ µî¿¡ ´ëÇØ ¹®ÀÇ ÇصР»óÅÂ.
´ÙÀ½Àº Feed ¸®´õ. À̰͵éÀ» ·Îº¿À̶ó ÇÒ¼ö ÀÖ´ÂÁö Àß ¸ð¸£°Ú´Ù. ·Îº¿ÀÇ ¼º°ÝÀÌ Â£Àº Feed ±¸µ¶ ¼­ºñ½º µîÀÇ Å©·Ñ·¯´Â À§¿¡¼­ ¼Ò°³Çß´Ù.
  1. ¿¬¸ð : YeonMo/5.6.0.0 (compatible; MSIE 6.0; Windows NT 5.1; SV2)

    ¿Ö Àú±â´Ù°¡ compatibleÀ» ½á³ùÀ»±î..¤Ñ¤Ñ¤»

  2. Free RSS Reader : NewsGator/2.0 (http://www.newsgator.com ; Microsoft Windows NT 5.1.2600.0; .NET CLR 1.1.4322.573)

    ÀÌ°Å ¿ª½Ã Feed±¸µ¶ ¼­ºñ½ºÀε¥ ¾î¶²ºÐÀÌ ÀÌ°É ¾²½Ã´ÂÁö..¤¾¤¾;;

  3. Protopage : Protopage/3.0 (http://www.protopage.com )

    Protopage¶ó´Â °³ÀÎÈ­ ȨÆäÀÌÁö ¼­ºñ½ºÀΰ¡º»µ¥, ´©±º°¡ ¿©±â¿¡ RSSÇǵ带 µî·ÏÇÏ¸é ±×¶§ºÎÅÍ ¿ä³à¼®ÀÌ ¹æ¹®ÇÑ´Ù.

  4. À§ÀÚµå´åÄÄ : WZD.COM Rss Sync

    ¿ª½Ã °³ÀÎÈ­ ȨÆäÀÌÁö ¼­ºñ½ºÀÎ À§ÀÚµå ´åÄÄ. À§¿Í °°´Ù.

´ÙÀ½Àº Àß ¾Ë·ÁÁø ºê¶ó¿ìÀú
  1. Microsoft Internet Explorer : Mozilla/x.x (compatible; MSIE x.x; Windows xx; {extra-information})

    ´Ù¾çÇÑ À©µµ¿ì ¹öÀü°ú IEºôµå ¸¸Å­À̳ª ´Ù¾çÇÑ UA·Î µé¾î¿Â´Ù. À§ÀÇ ÆÐÅÏÀº Ç×»ó ÁöÅ°´Â°ÍÀ¸·Î º¸ÀδÙ.

  2. Firefox2 : Mozilla/5.0 (Windows; U; Windows NT 5.1; ko; rv:1.8.1) Gecko/20061010 Firefox/2.0

    ¿äÁò ÆÄÀ̾îÆø½º´Â °ÅÀÇ(ÀüºÎ?) ÀÌ UA´Ù.

  3. Opera/9.02 (Windows NT 5.1; U; ko)

    ¿ÀÆä¶ó ¾²´Â ºÐµéµµ °¡²û ¿Â´Ù.

  4. Mozilla/5.0 (Macintosh; U; Intel Mac OS X; ko-kr) AppleWebKit/418.9.1 (KHTML, like Gecko) Safari/419.3

    ¸Æ¿¡¼­ »çÆĸ® ¾²´Â ºÐµéµµ ²Ï ÀÚÁÖ ¿Â´Ù.

´ÙÀ½Àº Á¤Ã¼°¡ ºÒºÐ¸íÇѵ¥ ÀÚÁÖ µé¾î¿À´Â UA
  1. ¾ÜÆÄÀÏ : Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0; \xbe\xdc\xc6\xc4\xc0\xcf (atfile.com))

    ÀÌ UAÀÇ Á¤Ã¼°¡ ºÒºÐ¸íÇÏ´Ù. Çí»çÄÚµå·Î ÆîÃÄÁø Àú ºÎºÐÀº "¾ÜÆÄÀÏ"ÀÇ euckr coding °ª°ú °°´Ù. ÇൿÀ¸·Î ºÁ¼­´Â ºê¶ó¿ìÀú °°Àºµ¥..

  2. Unknown : DoA/1.1

    ÀÌ°Ç Á¤¸» ³­°¨ÇÑ UA´Ù. DoA´Â ¿ö³« ÈçÇÑ À̴ϼÈÀ̶ó °Ë»öµµ Àß ¾ÈµÈ´Ù. ºê¶ó¿ìÀúÀÇ Á¾·ù°°´Ù´Â ´À³¦ÀÌ µå´Â°Ô, referer°ªÀ» °®°í ÀÖ´Ù. ±Ùµ¥, ´Ù¿î·Îµå ÇØ°¡´Â ÆÄÀÏÀ» º¸¸é ÇൿÇÏ´Â°Ç µü ·Îº¿ÀÌ´Ù. ¸ð¸£°Ú´Ù.

  3. Unknown : Mozilla/4.0 (compatible; MSIE 5.5; Windows 98; DigExt)

    ÀÌ°Ç ´õ ³­°¨ÇÏ´Ù. MSIEó·³ »ý°åÀ¸³ª ¸ðÁú¶ó¹öÀüºÎºÐ°ú OS¸í ºÎºÐ MSIE¹öÀü ºÎºÐ µîÀÌ ¸î°¡Áö ´Ù¸¥°Íµµ µé¾î¿Â´Ù. ÀÎÅͳݻóÀÇ °¢Á¾ °Ô½ÃÆÇÀ̳ª Æ÷·³µî¿¡¼­´Â Á¤È®ÇÑ Á¤Ã¼´Â ¸ð¸¥Ã¤ MSIEÀÇ ÇÑ branch¹öÀü ÂëÀ¸·Î ÃßÃøÇÏ°í ÀÖ´Ù. Åø¹ÙµîÀÇ IEÇ÷¯±×ÀÎÀÌ ¸¸µé¾î ³»´Â °ÍÀÎÁöµµ ¸ð¸£°Ú´Ù.

  4. Unknown : Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; i-NavFourF)

    ÀÌ°Ç VeriSignÀÇ IEÇ÷¯±×ÀÎÀÌ ¸¸µå´Â UA°ªÀ̶ó°í ÇÑ´Ù.

À̸§ Æнº¿öµå
ºñ¹Ð±Û (üũÇÏ¸é ±Û¾´À̸¸ ³»¿ëÀ» È®ÀÎÇÒ ¼ö ÀÖ½À´Ï´Ù.)
¿ÞÂÊÀÇ ±ÛÀÚ¸¦ ÀÔ·ÂÇϼ¼¿ä.
   

 



 
»çÀÌÆ®¸í : ¸ðÁö¸®³× | ´ëÇ¥ : ÀÌ°æÇö | °³ÀÎÄ¿¹Â´ÏƼ : ·©Å°´åÄÄ ¿î¿µÃ¼Á¦(OS) | °æ±âµµ ¼º³²½Ã ºÐ´ç±¸ | ÀüÀÚ¿ìÆí : mojily°ñ¹ðÀÌchonnom.com Copyright ¨Ï www.chonnom.com www.kyunghyun.net www.mojily.net. All rights reserved.