EDICIóN GENERAL

Un vistazo al robots.txt de la SGAE

#36 Pero eso es por que los datos eran públicos, no así los links. Si quieres ocultar algo no lo haces accesible de forma pública confiando en que nadie va a conocer el enlace :-P

menéame