日記帳
本ページはプロモーションが含まれています
カテゴリー
Links
blog(ブログ)マスター
アンドロイドの巣
ゼロから始めるベランダ菜園
タイトル
ラジコン
2024年3月
1 2 3
4 5 6 7 8 9 10
11 12 13 14 15 16 17
18 19 20 21 22 23 24
25 26 27 28 29 30 31

2017年1月 ロボ拒否

カテゴリー: General
2017-01-04 06:03
2017年1月
Hits ユーザエージェント
1 110647 Mozilla/5.0 (compatible; SemrushBot/1.1~bl; +http://www.semrush.com/bot.html)
2 28659 Mozilla/5.0 (compatible; bingbot/2.0;
3 1357 Mozilla/5.0 (compatible; Googlebot/2.1;

まだ3日しかたっていないですよ
1位のあなた11万ですか?
あたまおかしくないですか?
おかしいでしょ。そんなあなたは立ち入り禁止。
レッドカードをプレゼントします

[.htaccess]
RewriteEngine On
RewriteBase /

SetEnvIf User-Agent ".*(hatena|megalodon|jgn|SemrushBot)" deny_ok_robots

RewriteCond "%{ENV:deny_ok_robots}" "1"
RewriteRule "robots.txt$" robots_deny.txt [L]

RewriteCond "%{ENV:deny_ok_robots}" "1"
RewriteRule ".?" - [R=404,L]



ブログ内 関連記事: 2017年1月 ロボ拒否


ブログ内 関連記事: 2017年1月 ロボ拒否

トラックバック
トラックバックはありません。
PR

[PR]