shokun0803 : “robots.txtについて（設定がまずいのか）”
3 月 3rd, 2010
ｇｏｏｇｌｅのウェブマスターツールにて確認したところ
「robots.txt により URL が制限されています」と登録されない理由が書かれていました
citylights.halfmoon.jp/dvd/robots.txt
（仮想robots.txtということで自分で作ってはいません）
さまざまな情報に詳しい方がお答えになっているので横槍になるかもしれませんが、そもそもrobots.txtはサイトトップになければ有効でないと思いましたが、、、
つまりcitylights.halfmoon.jpのルートに手動で作成した、もしくは何らかのソフトウェアなどが自動生成したrobots.txtが存在しないでしょうか？
仮にcitylights.halfmoon.jp/dvd/robots.txtが存在しても検索エンジンは無視するような気がします。
あと、プラグインの中には仮想robots.txtを生成するものがあります。チェックなどではずせるはずです。Google XML Sitemapsあたりにありませんでしたか？
以上参考意見として捉えてください。
タグ: wordpress(フォーラム）
