Google, 2 Aralık’tan itibaren Haberler servisi için yeni bir bot kullanmaya başladığını duyurdu. Googlebot-News adını verdiği bu bot hakkındaki ilgili açıklamayı Google Webmaster Central Blog‘da bulabilirsiniz.
Eğer sitenizde bulunan bir içeriğin Google Haberler servisinde yer almasını istemiyorsanız bu sayfadan ulaşabileceğiniz formu doldurup istediğiniz içeriği kaldırabilirsiniz.
Ayrıca robots.txt[1] dosyasının yardımıyla da bu botu kısıtlayabilirsiniz.
robots.txt kullanımı için aşağıdaki örneklere bakabilirsiniz.
Sayfaları Google web arama ve Google Haberlere eklemek için:
User-agent: Googlebot
Disallow:
Sayfaların Google web aramasına eklenmesi fakat Google Haberler’e eklenmemesi için:
User-agent: Googlebot
Disallow:
User-agent: Googlebot-News
Disallow: /
Sayfaların Google web arama ve Google Haberler’e eklenmemesi için:
User-agent: Googlebot
Disallow: /