クリボウの Blogger Tips

Google Blogger の使い方、カスタマイズ方法、各種ツールなど、
Blogger 関連の役立つ情報を紹介しています。

> > Blogger の robots.txt

Blogger の robots.txt

Posted at: 2007-08-01 Label: 2

最近の Blogger 関連記事から

ちょっと気になった INTERNET Watch の記事。Google 運営の Blogger から SEO のヒントを得ようという内容です。

内容としては、色々とつっこみどころもあると思いますが(参考:kuroyagi さんのSEM酒場の記事)、クリボウが一番気になったのはこちら。
Bloggerではラベルという機能を使って記事をテーマごとに分類することができます。これもURLにはラベルの名前が反映されます。しかし、なんとSEOの基本と言われるtitleタグにはラベル名は表示されないのです。
「オーバーチューニングはマイナスですよ」というGoogleによる暗黙のメッセージが伝わってくるように感じられます。

タイトルにキーワードを含めるべきかどうかという以前に、このラベル別投稿一覧ページは Google のインデックスには載りません。Blogger ブログの robots.txt では、ラベル別投稿一覧ページは検索サイトのインデックスに追加しないようにと書かれていますので…。

Google のウェブマスターツールでもこの通り。



Blogger の仕様から Google の検索に対する考え方を読み取るとすれば、「オーバーチューニングはマイナスですよ」というより「同じ内容のページは要りませんよ」ということかなと思ったり。


Blogger ブログの robots.txt

あまり知られていないようなので、Blogger の robots.txt の内容の方も確認しておきます。このファイルはブログのルートディレクトリに置かれますが、Blogger が自動作成するもので、ユーザーは内容を編集することができません。その中身(クリボウの写真日記の場合)がこちら。

User-agent: *
Disallow: /search
Sitemap: http://kuribo-photo.blogspot.com/feeds/posts/default?orderby=updated


1.インデックス追加制限

全ての検索サイトクローラに対して 2 行目で、/search 以下のページをインデックスに追加しないように指定しています。これに該当する Blogger のページは、検索結果ページ、ラベル別投稿一覧ページ、年間投稿一覧ページ。つまり、メインページ、アーカイブページ、アイテムページ(記事単独ページ)以外のページということ。それらのページは検索サイトの結果には出てきません。

2.サイトマップファイルの通知

全ての検索サイトクローラに対して 3 行目で、ブログのサイトマップファイルを通知しています。指定されているのはおなじみの Blogger ブログのフィード(ATOM)ですね。Google 以外にも Yahoo!、Live Search、Ask.com といった検索サービスが、robots.txt からサイトマップファイルを見つけてインデックスに利用しているみたいです。

…ということで、Blogger の robots.txt についてクリボウが知っているのはこんなところです。他にも知っているという方はぜひ教えて下さいね。


参考記事:


スポンサードリンク:
お願い:
「この記事役に立った!」と思ったら、ぜひフィード登録をお願いします。 

Comments:2

  1. なるほど~。
    いつもながら興味深い記事、有難うございます。

    >「オーバーチューニングはマイナスですよ」

    メタタグでキーワードを並べるぐらいなら、オーバーチューニングにはならないですよね(よく判っていない、汗)。

    ReplyDelete
  2. > メタタグでキーワードを並べるぐらいなら、オーバーチューニングにはならないですよね

    僕もどれが適正で、どれがやりすぎなのか、判断がつかないんですが、それぐらいなら OK かと。
    むずかしいですね~^^;

    ReplyDelete

Comments on Google+:

© 2005-2014 Kuribo. Powered by Blogger.