Evitar la indexación de ciertas secciones de una web al crear el sitemap – java php seo

Pregunta:


Buenas,

Tengo que actualizar el sitemap porque la estructura de mi página ha cambiado, sin embargo quiero evitar indexar ciertas páginas que son por así decirlo, dinámicas. Por ejemplo, tengo una sección de noticias y cada vez que pulsas sobre cualquier noticia te lleva a un noticias.php?ID=10, pongo 10 por poner un número, pero puede ser cualquiera.

El caso es que no consigo que el sitemap se salte ciertas páginas. Lo estoy intentando con el siguiente código en robots.txt:

User-Agent: Googlebot
Disallow: single.php?id=*

User-Agent: Googlebot
Disallow: listado_precios.php?juegosPorPagina=*&Ordenar=*&Genero=*&pagina=*

En los asteriscos se supone que van números, pero me los indexa igualmente.

Preguntado por: JetLagFox

Te dejo algunos ejemplos:

Bloquear todas las URL que incluye ?:

  • Disallow: /*?*

Bloquea todas las URL que tenga el parámetro param1

  • Disallow: /*?param1=*

Bloquea todas las URL que tenga el parámetro param1, param2, param3

  • Disallow: /*?param1=*&param2=*&param3=*

Tienes que saber también que no todos los bots aceptan o reconocen el * asterisco, excepto Google y Bing.

+ info

Fuente

Related Posts:

array push con keys php – php array
Pregunta: Buen día. Estoy tratando de crear un array con valores agrupados por categorías, mediante AJAX recibo dos variables una contiene un string con el nombre ...
Actualizar información con ajax php mysql – php jquery mysql
Pregunta: Tengo esta simple consulta que lo que simplemente me muestra las visitas de la web, pero quisiera que fuera automático con ajax ya que ...
¿Cómo insertar código en las entradas de WordPress? – php wordpress plugin
Pregunta: En algunos blogs de programación he visto algo como esto en las entradas: Me gustaría poder hacer lo mismo. Sin embargo, no solo quiero que ...
Como validar array checkbox – javascript php jquery
Pregunta: Que tal buen dia, alguien me podria decir como se puede hacer para que cuando presione el boton "BAJAR DATOS" si este esta vacio ...
Problema con UTF_8 – php sql sql-server
Pregunta: Buen día, mi problema es el siguiente, Php me lanza el siguiente Warning Warning: utf8_decode() expects parameter 1 to be string, object given ...
Obtener las fechas de los días Lunes dependiendo de un rango de fechas PHP – php datetime time
Pregunta: Dependiendo de un rango de fechas quiero obtener sólo las fechas de los días Lunes, tengo la siguiente función que funciona pero me trae ...
Customizar rutas de Login en Laravel 5.3 – php laravel laravel-5
Pregunta: Hola tengo un problema con el enrutado de Login con el metodo php artisan make:auth que te genera todo lo que se necesita Desde vamos ...
¿Cómo utilizar `count` para contabilizar la cantidad de registros para distintos valores de un campo en mysql? – php mysql sql
Pregunta: Resulta que tengo un campo llamado ESTADO en mi tabla. En este campo hay varias estados de pedido que son: LOGÍSTICA, PACKING, PICKING, CARTERA, ...
Tomcat no encuentra los recursos – java angularjs http
Pregunta: Bueno tengo una aplicación con AngularJS que hace peticiones al API de gitHub como un ejemplo para aprender a usar AngularJS, pero el problema ...
Precargar SOAP en PHP – php webservice soap
Pregunta: Estoy usando un webservice en el cual realizo la conexión por SOAP en PHP. El problema viene cuando en la primera llamada, a veces, no ...
Crear cuenta regresiva N segundos mientras se visualiza una Activity en Android – java android
Pregunta: Quiero implementar una cuenta regresiva de N segundos, que se inicie cuando la Activity se muestre, se pare el contador cuando el usuario decide ...
Xampp no carga proyecto laravel – php laravel apache
Pregunta: Tengo el proyecto laravel en un mac con OSX el capitán con php artisan. El proyecto se ejecuta sin problema, pero por motivos personales ...
¿Código html antes del anchor text? ¿Tendrían problemas los motores de búsqueda? – html seo
Pregunta: ¿Es posible incluír código html antes del anchor text y si perjudicaría que los pueda leer el crawler del buscador? Es que necesito que ...
URLs absolutas con PHP – php pretty-urls
Pregunta: Explico mi problema, es sencillo, lo tengo solucionado, pero solamente de manera local, no me sirve lo que hice si yo uso esto en ...
¿Es legal leer imágenes y descripciones de otro sitio web y ponerlas en mi app? – java woocommerce
Pregunta: ¿Es legal leer imágenes y descripciones de otro sitio web y ponerlas en mi programa? Supongamos que quiero hacer una aplicación como la de ebay, ...
Tags:, ,

2 Comments

Add a Comment

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *