Si, y cómo agregar un archivo robots.txt y sitemap.xml mapa del sitio

¿Qué es el archivo robots.txt y sitemap.xml mayoría de los webmasters saben. Lo que no sabemos revelan que:
robots.txt usado para instruir a los robots de motores de búsqueda (y otros) lo que está permitido y lo que no lo es. Por supuesto, si estos bots respetarán los límites que les impone es harina de otro costal. Googlebot se supone que debe obedecer. Además, este archivo puede apuntar a que la página del mapa, el sitemap.xml.
Archivo robots.txt debe estar en el directorio raíz, y estará disponible en: http://adres_strony.pl/robots.txt.

sitemap.xml es un archivo que contiene el mapa del sitio en formato XML. El nombre de archivo puede ser diferente. Pero también debe estar disponible desde el nivel principal, es decir, por ejemplo. http://adres_strony.pl/sitemap.xml.
Si, y cómo agregar un archivo robots.txt y sitemap.xml mapa del sitio

No voy a profundizar en cómo se debe construir dos archivos. Usted puede incluso leer sobre ello aquí: Archivos  robots.txt  y  sitemap.xml. Controlar el comportamiento de los rastreadores web.

Con la página de mapa, Googlebot sabe mucho mejor lo que ha cambiado en el sitio y en qué dirección se encuentra contenido nuevo. De acuerdo a. mis pruebas y observaciones, da un delicado ventajas. Google a menudo se ve a un lado y un nuevo sub-índices más rápido. Por supuesto, no puedes contar con milagros. El factor principal que afecta la tasa de crawl la página es la "popularidad de Internet" o la cantidad y calidad de los enlaces que conducen al sitio.

En el caso de este sitio, espero una nueva entrada para la indexación dentro de las 24 horas. Esta página web no es de alguna manera super-Linked. Pero en el caso de mis páginas más populares (Bucket Foro), Un nuevo tema que ya está indexada en pocos minutos, al igual que una nueva página con hipervínculos desde la página principal del foro.

Al final voy a añadir que el mapa del sitio debe hacer ping (por google para hacerle saber que se ha actualizado). Esto se hace llamando a la dirección:
http://www.google.com/webmasters/sitemaps/ping?sitemap=http://adres_strony.pl/sitemap.xmlO uso del sitio: Envía tu sitemap a Google, Yahoo, Bing y Ask.com! ...

Cuando se trata de la generación de mapas a un archivo XML, lo mejor es hacer un script en PHP que se generará automáticamente y estará siempre al día. Si esto no es posible, puede utilizar las herramientas en línea gratis: Mapa del sitio Herramienta XML.
Tenga en cuenta que esta herramienta funciona en el lado de su navegador web, por lo que tiene que ser wylogowanym sobre el que se dibuja el mapa, de lo contrario el robot puede seguir los enlaces, que no deberían tener acceso.

Entradas relacionadas:

  • ¿Por qué no hacer una página basada en marcos

    ¿Por qué no hacer una página basada en marcos

    Un poco puede escribir extrañamente en 2012 acerca de los marcos. Pero tener una oportunidad. Las estadísticas muestran la mano que todavía hay algunos desesperados que van a utilizar el marco. Alternativamente, para averiguar acerca de esto. Desde que comenzó la creación de las páginas basadas en marcos y mucho tiempo seguido este desafortunado trato, tener el conocimiento y la experiencia suficiente para disuadir a los posibles marcos de aficionados. Desventajas de diseño de página creados en el ...
  • ¿Qué es SEO

    ¿Qué es SEO

    El posicionamiento en buscadores (SEO - Search Engine Optimization) está influyendo en la posición del sitio en los motores de búsqueda. Hoy en día, el posicionamiento se refiere principalmente a Google y no es nada extraño, porque es precisamente esta búsqueda genera más tráfico en Internet. SEO debido al método elegido se puede dividir en dos grupos: White Hat SEO (sombrero blanco) es un término para ...
  • SEO poco ético - Negro Hat SEO

    SEO poco ético - Negro Hat SEO

    SEO poco ético, mercado de habla Inglés llamado Negro Hat SEO es un método muy popular de los sitios Shill ranking en Google. En principio, el mismo posicionamiento que ya es bastante controversial, porque afectar artificialmente la posición de su sitio web en los motores de búsqueda. Por lo tanto, para determinar si el posicionamiento es ético o no, es bastante suave. Pero seguramente algunas técnicas claramente entre los del sombrero negro. Métodos populares utilizados en ...

Comentarios:

Esta entrada no tiene comentarios aún.

Añadir un comentario

* - Los campos obligatorios