user-agent: *
Disallow: /robots.txt
Disallow: /wps/
Disallow: /AEAT.colaboradores/
Disallow: /AEAT.desarrolladores/
Disallow: /AEAT.internet/Modelos_formularios/
Disallow: /AEAT.internet/Inicio/Ayuda/Modelos__Procedimientos_y_Servicios/Modelos__Procedimientos_y_Servicios.shtml
Disallow: /AEAT.internet/Inicio/_otros_/_NoIx_/
Disallow: /AEAT.internet/ca_es/Inicio/_otros_/_NoIx_/
Disallow: /AEAT.internet/gl_es/Inicio/_otros_/_NoIx_/
Disallow: /AEAT.internet/va_es/Inicio/_otros_/_NoIx_/
Disallow: /AEAT.internet/en_gb/Inicio/_otros_/_NoIx_/
Disallow: /static_files/AEAT/NoIx/
Disallow: /static_files/AEAT/Recursos_Humanos/Contenidos_Privados/Oferta_de_Empleo_Publico/Convocatorias/OEP_2016/Oferta_2016/subgrupoA2/CejSVA/1606AdyexprovCEjSVA.pdf
Disallow: /static_files/AEAT_Sede/NoIx/
Disallow: /static_files/common/NoIx/
Disallow: /*_NoIx.pdf$

User-agent: gsa-crawler-A
User-agent: gsa-crawler-B
user-agent: AEAT-crawler-internet
Disallow: /robots.txt
Allow: /AEAT.desarrolladores/
Allow: /AEAT.colaboradores/
Allow: /AEAT.internet/Inicio/Ayuda/Modelos__Procedimientos_y_Servicios/Modelos__Procedimientos_y_Servicios.shtml
Disallow: /wps/
Disallow: /AEAT.internet/Modelos_formularios/
Disallow: /AEAT.internet/Inicio/_otros_/_NoIx_/
Disallow: /AEAT.internet/ca_es/Inicio/_otros_/_NoIx_/
Disallow: /AEAT.internet/gl_es/Inicio/_otros_/_NoIx_/
Disallow: /AEAT.internet/va_es/Inicio/_otros_/_NoIx_/
Disallow: /AEAT.internet/en_gb/Inicio/_otros_/_NoIx_/
Disallow: /static_files/AEAT/NoIx/
Disallow: /static_files/AEAT/Recursos_Humanos/Contenidos_Privados/Oferta_de_Empleo_Publico/Convocatorias/OEP_2016/Oferta_2016/subgrupoA2/CejSVA/1606AdyexprovCEjSVA.pdf
Disallow: /static_files/AEAT_Sede/NoIx/
Disallow: /static_files/common/NoIx/
Disallow: /*_NoIx.pdf$