中国の次は韓国の非常識スパイダーか………(-_-;)
どちらも、負荷が高くなるから来て欲しくないのでご遠慮申し上げる。

202.179.180.45 Mozilla/4.0 (compatible; NaverBot/1.0;

百度(baidu)を拒否したので今まで目立たなかったnaverbotが目立って来たなー…..(-_-;)…… 一応、拒否IPに指定していたのだが新しいIPアドレスでアクセスしてきたので拒否設定にする。…..あー、また百度が来てるジャン….(;_;)

ハッスルサーバーやロリポップなどのレンタルサーバでは転送量が500MB/日と非常に少ないので行儀の悪いスパイダーが来たら一発でアウトです。

百度で困っているサイト運営者はたくさんいるようですし、皆で百度外しをしませんか……..

性質の悪い百度とNaverBotの拒否例です。….これでダメならISPに言って拒否設定にしてもらいましょう。

robots.txt

User-agent: baiduspider
Disallow: /

User-agent: NaverBot
Disallow: /

.htaccess

Order Allow,Deny
Allow from all
deny from asianetcom.net
deny from .asianetcom.net
deny from bta.net.cn
deny from baidu.com
deny from .baidu.com


SetEnvIfNoCase User-Agent "nabot" shutout
SetEnvIfNoCase User-Agent "NaverBot" shutout
SetEnvIf User-Agent ^Yeti shutout
SetEnvIf User-Agent "baiduspider" shutout
SetEnvIf User-Agent "Baiduspider" shutout
SetEnvIf User-Agent "sogou spider" shutout
SetEnvIf Referer "http://naver.com" shutout
SetEnvIf Referer "http://help.naver.com" shutout
SetEnvIf Referer "http://asianetcom.net" shutout
SetEnvIf Referer "http://baidu.com" shutout
SetEnvIf Referer "^http://image.baidu.com" shutout
SetEnvIf Referer "^http://asianetcom.net" shutout
SetEnvIf Referer "^http://www.baidu.jp" shutout
SetEnvIf Referer "^http://baidu.jp" shutout
SetEnvIf Referer "^http://www.baidu.com" shutout
SetEnvIf Referer "^http://www1.baidu.com" shutout
SetEnvIf Referer "^http://image.baidu.jp" shutout
SetEnvIf Referer "^http://image.baidu.com" shutout
Order allow,deny
Allow from all
Deny from env=shutout