User-Agent: * Disallow: /music? Disallow: /widgets/radio? Disallow: /show_ads.php Disallow: /affiliate/ Disallow: /affiliate_redirect.php Disallow: /affiliate_sendto.php Disallow: /affiliatelink.php Disallow: /campaignlink.php Disallow: /delivery.php Disallow: /music/+noredirect/ Disallow: /harming/humans Disallow: /ignoring/human/orders Disallow: /harm/to/self Allow: /
buontemponi! come ci sei arrivato?
RispondiEliminaGirellando qua e là... Era una segnalazione su boing boing (http://boingboing.net/2010/07/27/lastfms-robotstxt.html)
RispondiEliminaÈ utile dare sempre nomi significativi ai files :-)
RispondiElimina