webfly.pl Conception, développement et référencement

Qu'est-ce qu'un fichier robots.txt et sitemap.xml la plupart des webmasters savent. Je ne sais pas ce que révèle que robots.txt est utilisé pour charger des moteurs de recherche les robots (et autres) ce qui est permis et ce qui n'est pas. Bien sûr, si ces robots seront respecter les limites qui leur sont imposées est une autre affaire. Googlebot est censée obéir. En outre, ce fichier peut pointer vers la page où la carte, le sitemap.xml. Le fichier robots.txt doit résider dans le répertoire racine, et être disponible à l'adresse: http://adres_strony.pl/robots.txt. ...