indexar

Las etiquetas de encabezado de robots personalizadas permiten indicar a los rastreadores web que no indexen determinadas secciones del sitio.	Custom robots header tags allow you to tell web crawlers not to index certain sections of your site.
Los códigos de exclusión recomiendan a los motores de búsqueda que no indexen o almacenen una página web fuente, o que no la muestren en los resultados de la búsqueda.	Exclusion codes advise search engines not to index or to store a source web page or to display it within the search results.
Estos mensajes podrían ser solicitados para que los rastreadores no indexen determinados URL.	These messages could be to request that the search crawlers not index specified URLs.
La meta etiquetas noinde le comunican a los bots de motores de búsqueda que no indexen a un recurso particular.	The noindex meta tag tells the search engine bots to not index a particular resource.
Debido a que la etiqueta NoIndex es una orden para que los motores de búsqueda no indexen una página, no puedes asegurarte si es seguida completamente o parcialmente.	As the NoIndex tag is a directive for the search engines to not index a page, you can't be sure if it's followed fully or partially.