Fecha actual Dom Ago 18, 2019 10:00 am

robots.txt Dinámico (Lo Primero que un Buscador Siempre Busca)

Optimizaciones de Motor de Búsqueda, o Search Engine Optimizations, son pequeños ajustes definidos por convenciones, que le permiten a los robots de los buscadores web encontrar más rápido el contenido nuevo y antiguo en nuestro sitio, y categorizarlo mejor por relevancia para tener un mejor ranking de búsqueda.


Usuarios leyendo este tema: Ninguno

robots.txt Dinámico (Lo Primero que un Buscador Siempre Busca)

Notapor ~ » Lun Nov 12, 2012 12:36 pm

robots.txt Dinámico (Lo Primero que un Buscador Siempre Busca)
________________________________________________________________
________________________________________________________________
________________________________________________________________
________________________________________________________________


Con un sitio web que los crawlers de los diferentes buscadores web (especialmente Google) visitan varias veces al día, la forma más fácil de hacer que estos encuentren links nuevos incluso en minutos, es tener un archivo robots.txt que sea dinámico.

Es decir, un archivo robots.txt, que en realidad sea generado por un script de lado servidor, y que contenga una lista actualizada, primero de los links más recientes e importantes que han sido agregados al sitio más recientemente, y después la lista de URLs normales y estáticas a las que debemos dar permiso.

Debemos usar la relativamente nueva directiva Allow: de robots.txt, para dar a conocer a los crawlers una nueva URL por línea.

Esto es justo como la función que tiene un feed RSS o ATOM, pero ya que es el legendario archivo robots.txt, este será accedido muchísimo más frecuentemente que dichos feeds, especialmente para sitios pequeños o medianos, con beneficios casi idénticos ya que los crawlers de los buscadores web mantendrán una imagen actualizada de nuestro sitio con esto.

La diferencia de aplicar o no este tip de SEO hace realmente una gran diferencia para muchos sitios que actualmente no tienen demasiadas visitas aparte de la de los crawlers.
Imagen
IP for hosts file (email udocproject@yahoo.com to get updates if website becomes offline):
Código: Seleccionar todo
190.150.9.244 archefire.org



See what I'm doing in real time:
Main Desktop 1
Main Desktop 2
Avatar de Usuario
~
Site Admin
 
Mensajes: 2958
Registrado: Sab Nov 10, 2012 1:04 pm

Volver a SEO

¿Quién está conectado?

Usuarios navegando por este Foro: No hay usuarios registrados visitando el Foro y 7 invitados


cron