Sidebar |
robots.txt こんな感じでいいのかなぁ 機械翻訳いってみよう♪
追記 Subject: Removal Request Please do not archive my site. Please remove my site's pages from the Wayback Machine. URL: とやると 送ってすぐみたら消滅しました。 単に表示しないだけかもしれないけど・・・ まぁ 消した過去のゴミ記事みれないならok と思ったけど 数分後 またアクセスしたら表示・・・ おちょくられたかも・・・ 翌日: 消えていませんね。 送っても無駄ってことですね。 geocityだからトップにrobots.txtおけないし・・ いまのところ1ページしかキャッシュされていないから まぁ いいや 数日後: ごにょごにょ 変な文をおくってきました。 どうやらサイトの所有者であるか示せだと? 個人情報保護の時代にそんなことされますかって!! ということで 機転を効かせて 巡回してこない場所だけどrobots.txtのファイルを置いて urlをそのまま返信 数日後 やっと消してくれました? Blocked Site Error. https://archive.org/about/faqs.php
How can I have my site's pages excluded from the Wayback Machine? 恐るべしロボット巡回
おとといくらいから なんかディスク消費が変だなと 思っていたのですが ディスク消費量がほとんど増えるはず無いのに 10MBくらい昨日より増えているので??? あれ〜 変だなぁ・・・ カウンターのログはこんなに増えるほど来てないし・・・ と 今日ログの統計画面を見ると 転送量 数百MB がたくさん はぁ? しょっちゅう こんなのきたら 転送量制限で サイトつぶれちゃうよん くるのは googleとyahooだけでいいよぉ 海外の検索エンジンに来てもらっても 百害あって一利無し robots.txtなんかいちいち書きません。 立ち入り禁止!! ということで 悪い子ちゃんの picsearch.com ask.com をホスト規制かけて 撃退!! おまえは もう 入れない バキューン☆彡 egspd42004.ask.com spider3.picsearch.com spider10.picsearch.com spider15.picsearch.com spider2.picsearch.com spider6.picsearch.com |
Sidebar |