Google Actualités : Nouveau User Agent pour le service de news
Google annonce la disponibilité d’un nouveau user-agent en ce qui concerne son service d’actualités : Googlebot-News.
Il est donc désormais possible d’intervenir au niveau de ses permissions et de lui attribuer les droits adéquats, ou au contraire lui retirer, sur tels ou tels contenus de sites web.
Techniquement, cela se passe dans le fichier robots.txt, et pour par exemple interdire tout accès il conviendra d’écrire :
User-Agent: Googlebot-News
Disallow: /
Cette mesure rejoint certainement celle prise hier concernant les limitations dans le programme Google First Click Free suite aux accrochages entre le moteur de recherche et les journaux/sites d’actualité.
Source : Webmaster central blog