어린왕자와 여우

WebKnight에서 Agent 관련된 Deny가 있어서 Agent에 대해 정리해 본다.

스팸 필터나 인증 필터 등의 보안 이슈를 찾기 위해서 UserAgent를 활용하는 것도 하나의 방법입니다. 그래서 오늘은 UserAgent를 나열해 봅니다. 이들 이 외의 모르는 Agent 일 경우는 의심해 봄직 합니다. 계속 Agent를 업데이트하여 현행화를 진행하겠습니다. 혹시 빠진 부분이 있다면 댓글로 참여 부탁드립니다.

검색 사이트
1. 구글 : Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
2. 구글 : Feedfetcher-Google; (+http://www.google.com/feedfetcher.html) : 구글의 개인화된 홈, 구글 리더 등에 Feed를 등록하면 이 로봇이 수집한다.
3. 구글 : Mediapartners-Google/2.1 : 구글 AdSense를 위한 웹크롤러.
4. 야후 : Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp ) : 야후 웹검색 크롤러.
5. 네이버 : Mozilla/4.0 (compatible; NaverBot/1.0; http://help.naver.com/delete_main.asp)
6. 다음 : Mozilla/4.0 (compatible; MSIE is not me; DAUMOA/1.0.0; DAUM Web Robot; Daum Communications Corp., Korea)
7. Microsoft : msnbot-media/1.0 (+http://search.msn.com/msnbot.htm) : msnbot-media라는 UA명.
8. Microsoft : msnbot/1.0 (+http://search.msn.com/msnbot.htm) : M$의 또다른 로봇. UA명이 msnbot.
9. Empas : EMPAS.ROBOT
10. 바이두 : Baiduspider+(+http://www.baidu.com/search/spider.htm) - 중국

메타 블로그 관련 로봇
11. 올블로그: Allblog.net RssSync4 (I Love Bluecat)
12. 이올린 : Mozilla/4.0 (compatible; Eolin)
13. Colcol : Colcol Meta(colcol.net) ColRSS V5.0 by.Mog422
14. 플랜티넷 : PlantyNet_WebRobot_V1.9 dhkang@plantynet.com

RSS 리더 사이트
15. 한RSS : HanRSS/1.0 (http://www.hanrss.com; 39 subscribers)
16. 연모 : YeonMo/5.6.0.0 (compatible; MSIE 6.0; Windows NT 5.1; SV2)
17. Free RSS Reader : NewsGator/2.0 (http://www.newsgator.com ; Microsoft Windows NT 5.1.2600.0; .NET CLR 1.1.4322.573)
18. Protopage : Protopage/3.0 (http://www.protopage.com/ )
19. 위자드닷컴 : WZD.COM Rss Sync

브라우저
1. Microsoft Internet Explorer : Mozilla/x.x (compatible; MSIE x.x; Windows xx; {extra-information}) : Explorer
2. Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; BESAGENT; Embedded Web Browser from: http://bsalsa.com/; InfoPath.2; .NET CLR 2.0.50727; .NET CLR 1.1.4322; BESAGENT) : Explorer
2. Firefox2 : Mozilla/5.0 (Windows; U; Windows NT 5.1; ko; rv:1.8.1) Gecko/20061010 Firefox/2.0
3. Opera/9.02 (Windows NT 5.1; U; ko)
4. Mozilla/5.0 (Macintosh; U; Intel Mac OS X; ko-kr) AppleWebKit/418.9.1 (KHTML, like Gecko) Safari/419.3
5. Unknown : Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; i-NavFourF) : VeriSign의 IE플러그인이 만드는 UA값]
6. 선더버드 : Mozilla/5.0 (Windows; U; Windows NT 5.1; ko; rv:1.8.0.13) Gecko/20070809 Thunderbird/1.5.0.13
7. 네스케이프 : Mozilla/5.0 (Macintosh; U; PPC; en-US; rv:1.0.2) Gecko/20030208 Netscape/7.02
8. 파이어폭스 개발자버전 : Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.9a6) Gecko/20070629 GranParadiso/3.0a6

그 외 기타
1. LijitSpider/Nutch-0.9 (Reports crawler; http://www.lijit.com/; info(a)lijit(d)com)
2. Mozilla/5.0 (Twiceler-0.9 http://www.cuill.com/twiceler/robot.html)
3. Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt daily and follow it)
4. Mozilla/5.0 (compatible; YodaoBot/1.0; http://www.yodao.com/help/webmaster/spider/; )
5. WebGenBot/1.0 (http://www.webgen.co.jp/bot/)
6. Mozilla/5.0 (compatible; MJ12bot/v1.2.1; http://www.majestic12.co.uk/bot.php?+)
7. NutchCVS/0.8.1 (http://cis.poly.edu/westlab/; west@poly.edu)
8. Speedy Spider (http://www.entireweb.com/about/search_tech/speedy_spider/)
9. tags2dir.com/0.8 (+http://tags2dir.com/directory/)
10. 0SBIder/SBIder-0.8.2-dev (http://www.sitesell.com/sbider.html)
11. SurveyBot/2.3 (Whois Source)
12. KAIST AITrc Crawler
13. Unknown : DoA/1.1
14. Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0; \xbe\xdc\xc6\xc4\xc0\xcf (atfile.com)) : 앳파일
15. Unknown : Mozilla/4.0 (compatible; MSIE 5.5; Windows 98; DigExt)

출처 : http://www.mimul.com/pebble/default/2007/11/30/1196425260000.html