Comments on: robots.txt para WordPress

By: Carole Hickman

Carole Hickman — Wed, 29 Dec 2010 04:13:12 +0000

Algunos blogs indexan como tags nombres de autor y cosas asi innecesarias realmente, tambien se ven los casos donde blogs tienen una carpeta ‘/videos’ donde la ruta de los videos son ‘http:sitio.com/videos/talvideo.wmv’ y estos son idexados por google, lo que hace que algunos vivarachos copien la url y roben el ancho de banda del sitio.Un robot.txt mal configurado podria traer consecuencias catastroficas, asi que gracias por la eplicacion.

By: Neri Aispuro

Neri Aispuro — Wed, 17 Nov 2010 20:40:35 +0000

Roberto, lo podés ver acá http://wordpress-hacks.com/robots.txt
saludos

By: Robert

Robert — Wed, 17 Nov 2010 13:48:09 +0000

“indexe el archivo (2009/03), ni tampoco lo de autor (/author/*), ni las páginas (/page/*).”

Podrias poner un ejemplo de como seria para impedir al robot que visite page, author, archivo. Gracias por adelantado

By: Jose M Ramirez

Jose M Ramirez — Tue, 28 Sep 2010 08:08:52 +0000

Un robot.txt mal configurado podria traer consecuencias catastroficas, asi que gracias por la eplicacion.

By: Juani

Juani — Sun, 25 Jul 2010 04:06:56 +0000

gracias por el dato Neri

By: Neri

Neri — Sat, 24 Jul 2010 22:41:14 +0000

Porque no sirve de cara al seo y no aporta nada

By: Juani

Juani — Sat, 24 Jul 2010 21:45:37 +0000

duda. por que no te gusta que los robots indexen el author, los archivos, la pages?