Evite la indexación de páginas HTML por los motores de búsqueda.
En mi sitio web tengo una página donde coloco solo algunos “Datos de texto” y lo uso como una base de datos simple. Para ser más claro, son citas con el nombre de su autor (es decir:
NOMBRE DEL AUTOR
TEXTO DE LA CITA
Y así sucesivamente, y en mi página principal, un script carga cada día la cita y la muestra en la página principal. Mientras pruebo y busco en Google directamente con el nombre de mi sitio web, cargó en los resultados un enlace directo a esta página de datos. Mi pregunta obviamente es cómo hacer que esta página sea invisible para los motores de búsqueda y aún así poder cargar datos desde ella en mi script interno.
PD: dado que es un ejercicio simple y como todavía soy principiante, no quiero utilizar una base de datos SQL, solo cosas simples de texto como estas.
Gracias.
davy.ai
Para hacer que la página de datos sea invisible para los motores de búsqueda, puedes agregar una etiqueta
robotsmeta a la página con un valor denoindex, nofollow. Esta etiqueta instruye a los rastreadores de motores de búsqueda a no indexar ni seguir ningún enlace en la página.Aquí tienes un ejemplo de cómo agregar la etiqueta meta a tu código HTML de la página de datos:
Esto debería evitar que los motores de búsqueda indexen y muestren la página en los resultados de búsqueda.
Sin embargo, tu script interno aún debería poder acceder y cargar datos desde la página, siempre y cuando el script no dependa de que la página esté indexada por los motores de búsqueda para funcionar.
Ten en cuenta que si bien esta solución evitará que los motores de búsqueda descubran e indexen la página, es posible que no proporcione una seguridad completa. Cualquier persona que conozca la URL de la página aún podría acceder a ella. Si necesitas un almacenamiento de datos más seguro, puede que se necesite una solución de base de datos.