Como evitar la indexación de algunas partes de la web

hola a todos me gustaría sabes como poder evitar la indexación de algunas partes de mi pagina web ya que tengo algunas carpetas en las cuales tengo contenido no indexable o privado como por el ejemplo la administración etc.

Ademas tengo un fichero include php que utilizo como un iframe y cuando genero un sitemap veo que aparece ese include como una pagina completa y quiero bloquearlo, si alguien me ayuda estare agradecido!

hola si quieres evitar que se indexen directorios completos lo mejor es con robots, muy sencillo solo crea un documento de texto con el nombre robots.txt y pon dentro esto:

User-Agent: *
Disallow: 
Disallow: /directorio

donde poner directorio tienes que poner el nombre de tu directorio si por ejemplo quieres bloquear todos los includes y los tienes dentro de includes pones

User-Agent: *
Disallow: 
Disallow: /includes

así con todos los directorios que no quieras indexar:

User-Agent: *
Disallow: 
Disallow: /includes
Disallow: /admin
Disallow: /ect

salu2

mas claro el agua xd thank!