Googleサイトマップ(sitemaps.orgサイトマップ)をMTで作る&robots.txtの作り方
Googleサイトマップを作ろうと思いました。
Googleサイトマップは、形式に従って作った
sitemap.xmlというのを作って置いとくだけで、
検索ロボットがブログをチェックしに来てくれるというもの。
Googleのサイトで、
サイトマップXML自動生成ツール(URL収集機能付きバージョン)ってのがあるんだけど、
これって、一回きりの登録なのか、継続的に情報更新してくれるのかわかんなかった。
でもよく考えてみれば、こちらがブログを更新して、
同時にsitemap.xmlをアップデートしてれば、
次にクローラ(ロボット)が来たときに更新を認識できるわけで。
てことは、常に更新しなきゃなんない・・・
メンドいので、MTにやらせようと思い、ここのとおりにする。
MT用sitemaps.orgサイトマップ生成テンプレート
robots.txtがいるのかと思いきや、
隠したいページが別にない場合は作らなくてもいいらしい。
〔空のrobots.txt〕
robots.txtはクローラーを制御するものなので中身が空では意味が無い感じですね。でも空のrobots.txtはindex,followと同じ意味を持つのです。
Googleサイトマップでrobots.txtを要求されたけど、どんなものにすればいいか分らない方。空のファイルを作って対処しましょう。
でも念のためつくっときました。
このブログなら、
とだけ書いたテキストファイルをつくって、
robots.txtと名づけ、ルート(トップページのファイルがある場所)に置いとけばいい。
"sitemap.xml"というファイル名は、各自、自分でつくった名前にしてくださいね。
参考:
Googleウェブマスターツール
https://www.google.com/webmasters/tools/docs/ja/protocol.html
robots.txtを作ったがために、
他人に隠しページの存在がバレてしまう可能性と対策
http://allabout.co.jp/internet/hpcreate/closeup/CU20021125A/index.htm
こんなことが知りたいという要望がありましたらメールください。 → moguにメールする



