Web Masterの日記



googlebot.com

2016年02月24日(水)

チームのホームページを新しいURLにしたからなのか、
最近、アクセス解析を見るとgooglebot.comが、ほぼ毎日と言っていいほど
訪れていて何か気持ち悪い。
googlebot.comとはgoogleの巡回ロボットで検索サイトのための
情報収集に訪れていることは何となく知っていたけど、
個人のサイトにもそんな頻繁に来るものなのだろうか?
それもトップページだけでなく、かなり昔の試合詳細ページまで訪れている。
情報収集のためサイトを訪れることを「クローリング」と言うらしい。
ネットで調べたら、サイト内にMETAタグを設定したり、robots.txtを設定すれば
googlebotにクローリングさせないようにする対策が取れるらしいけど
そこまでタグの知識があるわけではないので、しばらくは放置かな。
まぁ、機械が通り過ぎるだけなので、こちらには何も迷惑になっていないし。
ただ、アクセスカウンターが上がっているのでアクセス解析を確認したら
googlebot.comばっかりっていうのも寂しいけどね。

 < 過去  INDEX  未来 >


Web Master