Wenn man die XML-Sitemap vor bösen Bots und Content-Dieben schützen will, kann man mit folgendem Code nur noch gängigen Suchmaschinen Zugriff auf die sitemap.xml erlauben
Wenn man die XML-Sitemap vor bösen Bots und Content-Dieben schützen will, kann man mit folgendem Code nur noch gängigen Suchmaschinen Zugriff auf die sitemap.xml erlauben
<?php
if(preg_match('/(Googlebot|Slurp|Jeeves|msnbot)/', $_SERVER['HTTP_USER_AGENT'])
&& preg_match('/(googlebot\.com|yahoo\.net|ask\.com|live\.com)$/', gethostbyaddr($_SERVER['REMOTE_ADDR']))

