Un vistazo al robots.txt de la SGAE

  1. #1   Ni p...a idea de que va esto.
    votos: 15    karma: 93
  1. #2   Al menos tienen asumido lo que son.

    #1 Son las búsquedas por la que no quieren aparecer en los navegadores.
    votos: 43    karma: 361
    1. #4   #2 Aaah. Gracias por el dato.
      votos: 5    karma: 58
    2. #14   #2 #12 #13 en realidad no.
      El archivo robots.txt lo que se encarga es de decirle a los bots que archivos del propio sitio web - en este caso sgae.es - no quiere que indexe. Por ejemplo Disallow:/?SGAE=LADRONES=MONOPOLIO significa: no indexes sgae.es/?SGAE=LADRONES=MONOPOLIO

      básicamente los de la SGAE no entendieron nada. En vez de arreglar su buscador para que no les hicieran cross scripting hicieron esta chapuza del robots.
      votos: 55    karma: 501
    3. #29   #2 Donde dije navegadores quise decir buscadores. Error tipográfico.
      votos: 0    karma: 5
  2. #15   #1,#2,#12, el robots.txt es un fichero público con el que informar a los robots de internet lo que quieres o no quieres que indexen de tu página web. No han hackeado nada pues es de acceso público y además lo utilizan mal, como dice #14 (te adelantaste..)

    Para más información
    support.google.com/webmasters/bin/answer.py?hl=es&answer=156449
    votos: 9    karma: 84
     *   saraguato saraguato
    1. #22   El fichero robots.txt sólo evita que el 'googlebot' y similares escaneen las páginas o directorios mencionados, pero no evita su indexación si alguien (incluído Google) ha visitado ya la página antes. Vamos, que lo que han hecho es una chapuza impresionante, como dice #14.

      Por ejemplo, el enlace que aparece en el robots.txt "a no indexar"

      www.sgae.es/?SGAE=LADRONES=MONOPOLIO

      Está indexado, porque hay otras páginas que hacen referencia a ésta (está explicado por google en el enlace de #15).
      votos: 4    karma: 34
       *   gaia26 gaia26
  3. #34   #1 ¿Te han votado negativo por no saber leer un código? Cómo. Está. El. Patio.
    votos: 8    karma: 70
    1. #44   #34
      #39

      Ya, la verdad es que no se que tiene de malo decir que no se sabe algo...gracias a eso me he enterado de que va la cosa. En fin...será que tenían un mal día.
      votos: 5    karma: 51
  4. #39   #1 Aunque mi karma da menos que una castaña y, aunque sí sé de que va esto, como dice #34, es una gilipollez absoluta que te voten negativo por ser claro y sincero.
    votos: 4    karma: 40
    comentarios cerrados

    menéame