Huevos de Pascua de Robots.txt: ¡haga que las directivas de sus robots sean divertidas para los humanos!

Los huevos de Pascua generalmente se asocian con elementos que encuentra durante una cacería, después de pasar tiempo buscándolos en lugares desconocidos, sin una guía clara sobre dónde buscar. Debido a que la búsqueda requiere algo de tiempo y esfuerzo, al final es gratificante encontrarlos.

Todo esto también es cierto para los huevos de Pascua que se encuentran en los productos tecnológicos.

Hoy, quiero ver huevos de Pascua en archivos robots.txt. Explicaré el concepto de huevos de Pascua y archivos robots.txt y por qué los desarrolladores pueden incluir huevos de Pascua en ellos.

También realicé mi propia búsqueda de huevos de pascua para determinar cuántas formas pueden tomar los huevos de pascua en los archivos robots.txt. Resulta que, ¡muchos!

Siga leyendo y asegúrese de llegar al final de este artículo. ¡Tendré una tarea para usted!

¿Qué son los huevos de Pascua en tecnología?

Los huevos de Pascua en tecnología se entienden como características no documentadas o piezas de software que no son necesarias para que el producto funcione. Estas características no se revelan abiertamente ni se comparten con los usuarios que necesitan buscarlas sin mucha orientación.

Los huevos de Pascua se encuentran comúnmente en videojuegos, programas, aplicaciones, software y partes de sitios web.

Vienen en muchas formas, tales como:

• códigos de trucos en un juego que descubren características o niveles adicionales,
• referencias culturales que aparecen en páginas ocultas u otros documentos web,
• juegos o aplicaciones ubicados en software creado para otros fines, por ejemplo, escribir y editar documentos de texto,
• mensajes dejados por los desarrolladores, por ejemplo, los que acreditan a los creadores del producto.

La lista continúa, y no hay límites para lo que pueden ser los huevos de Pascua.

Pero hay más.

Para mí, los huevos de pascua son un toque humano en un entorno de máquina caracterizado por abundante lógica y reglas concretas.

Los huevos de Pascua rompen con estas reglas estrictas. Son una forma de que los creadores agreguen un elemento único con rostro humano a su producto tecnológico. Incluir huevos de Pascua hace que toda la experiencia de usar un producto tecnológico determinado sea más divertida y podría ser un placer para los fanáticos acérrimos, según el producto.

Pasemos a los huevos de pascua que podemos encontrar en los archivos robots.txt de los sitios.

Huevos de Pascua y archivos robots.txt

Encontrar huevos de pascua en archivos robots.txt es menos complicado que en muchos otros casos: simplemente necesita acceder al archivo robots.txt de un sitio.

Hay numerosos ejemplos de huevos de Pascua en archivos robots.txt. Estos archivos están destinados a ser leídos y seguidos por robots; por lo tanto, los huevos de pascua deben agregarse de una manera que solo sea comprensible para los humanos.

Aclaremos qué son los archivos robots.txt y si agregar huevos de pascua no afectará la forma en que los robots leen el archivo.

¿Qué son los archivos robots.txt?

Un archivo robots.txt reside en la raíz de su dominio y contiene un conjunto de directivas para los rastreadores de motores de búsqueda, que les indican cómo rastrear las páginas de un sitio web.

Cada directiva bloquea o permite el acceso de un rastreador específico a una ruta de archivo en un sitio. A menos que se especifique lo contrario en robots.txt, los robots pueden rastrear todos los archivos de un sitio web.

Las directivas en un archivo robots.txt son una forma de maximizar su presupuesto de rastreo, por lo que Googlebot no lo desperdicia en páginas irrelevantes de su sitio.

¿Agregar huevos de pascua puede dañar su archivo robots.txt?

Los archivos Robots.txt siguen un formato específico sobre el que puede leer más en las pautas de Google sobre cómo agregar reglas de robots.txt .

Los motores de búsqueda ignoran los símbolos o comandos que aparecen en el archivo robots.txt después de un hashtag, por lo que incluir huevos de pascua precedidos por un hashtag no afectará la forma en que los robots entienden estos archivos.

Los huevos de Pascua también tienden a colocarse en documentos o ubicaciones a los que los usuarios no pueden acceder fácilmente, y eso es cierto en el caso de los archivos robots.txt. Por lo general, no están vinculados a otras páginas y los usuarios no pueden navegar hasta ellos simplemente haciendo clic en un botón en un sitio web.

¿Por qué debería agregar un huevo de Pascua a su archivo robots.txt?

Dado que puede agregar texto a los archivos robots.txt que solo pueden leer los humanos, ¿por qué no aprovechar esta oportunidad para crear contenido exclusivo para complementar sus esfuerzos de marketing?

Puede agregar huevos de pascua a su archivo robots.txt por muchas razones más allá de proporcionar entretenimiento a los usuarios.

Por ejemplo, el contenido de su archivo robots.txt también puede:

• Aumente el conocimiento de su marca
• Muestre la marca de su empleador

Esto se puede lograr de varias maneras. Puede:

• Implemente su propia marca, por ejemplo, incluya su logotipo o eslogan.
• Referirse a los servicios o productos que ofreces oa tu empresa como entorno de trabajo.
• Anime a los visitantes a postularse a sus ofertas de trabajo; de esta manera, se dirige solo a un grupo seleccionado de personas que visitan su archivo robots.txt. ¡Puedes hacerlo especialmente para invitar a los geeks a unirse a tu equipo de desarrollo o SEO!
• Crear contenido relevante y original. Puede coincidir temáticamente con el propósito del archivo robots.txt, por ejemplo, dirigirse a los robots, incluir referencias humorísticas a ellos, motores de búsqueda u otros temas, como la cultura pop. Incluir contenido alegre como ese puede hacer que su marca parezca más accesible y orientada al usuario.

Elija un enfoque que muestre su marca de la mejor manera y sea un activo único para la forma en que los usuarios perciben su marca.

Ejemplos de huevos de pascua en robots.txt

Veamos ejemplos de huevos de pascua en archivos robots.txt y veamos los distintos tipos de mensajes que podemos encontrar en ellos.

Robots asesinos de Google.txt

El archivo killer-robots.txt de Google fue un huevo de Pascua memorable creado para el vigésimo aniversario de que la directiva robots.txt estuviera disponible para los webmasters. Desde entonces se eliminó, pero sigue siendo uno de los ejemplos más famosos de huevos de Pascua en archivos robots.txt.

Aquí está el texto que Google incluyó:

Agente de usuario: T-1000

Agente de usuario: T-800

No permitir: /+LarryPage

Rechazar: /+SergeyBrin

T-800 es el Terminator interpretado por Arnold Schwarzenegger en la famosa película. T-1000 es el robot asesino de la película Terminator 2 . Las directivas incluidas en este archivo evitan que T-800 y T-1000 maten a los fundadores de Google, Larry Page y Sergey Brin.

Nike

Nike incorpora su marca en el archivo robots.txt al incluir una versión humorística del eslogan de su marca. Se combina con una referencia a los motores de búsqueda:

Nike lleva estas características de la marca aún más al incorporar su logotipo:

Llamarada de la nube

Cloudflare se dirige personalmente a los robots. Comienza así:

Y termina con el robot respondiendo a la solicitud y accediendo a seguirla:

YouTube

Youtube hace referencia a los robots y se refiere a un futuro distópico donde son dominantes:

Puerta de cristal

Glassdoor es un sitio web que permite a los empleados revisar empresas, ver los salarios que ofrecen, buscar trabajos en la plataforma y mucho más. Su archivo robots.txt sigue el tema del trabajo . Las directivas en el archivo alientan a los expertos en SEO que se aventuran en su archivo robots.txt a postularse para uno de sus puestos:

Etsy

El mensaje de Etsy parece ser italiano para "¡por el amor de Dios!" e incluye una imagen simple con forma de... un robot, por supuesto:

Gañido

Yelp cita a un famoso autor de ciencia ficción, Isaac Asimov, y sus Tres leyes de la robótica . Asimov introdujo estas leyes en un cuento de 1942 y luego las usó como base para sus novelas.

Las leyes son un sistema ético para humanos y robots, y un archivo robots.txt podría verse precisamente como eso: una forma para que humanos y robots interactúen y se beneficien mutuamente de:

tripadvisor

Al igual que Glassdoor, Tripadvisor valora la curiosidad de las personas y les pide a los buscadores de huevos de pascua que presenten una solicitud y se conviertan en miembros de su equipo de SEO:

Wikipedia

El archivo robots.txt de Wikipedia contiene varios mensajes; estos son solo algunos de ellos:

Estas directivas comentan sobre el comportamiento de los robots; dado que solo los humanos pueden leerlas, es una forma de bromear sobre los robots. Muestra el lado divertido y alegre de Wikipedia, que contrasta con lo que esperamos de ella: artículos serios y verificados.

Merriam Webster

Merriam Webster recuerda a cualquiera que tenga acceso al archivo que "edite con cuidado":

Este es un doble recordatorio de que cualquier directiva incluida en los archivos robots.txt debe planificarse cuidadosamente y colocarse en el archivo; después de todo, los errores pueden impedir que los robots rastreen el sitio correctamente.

Rana Gritando

Screaming Frog incluyó directivas humorísticas relacionadas con el nombre de la empresa:

Pero hay más que solo ser una referencia divertida. Incluir estas directivas ayuda a crear conciencia de marca. Mencionar el "equipo de protección de la rana" podría verse como un ejemplo de marca de empleador.

Más adelante en el archivo robots.txt, podemos encontrar una invitación para unirse al equipo de SEO de la empresa:

Tierra del motor de búsqueda

Search Engine Land se dirige a las personas que pueden leer el siguiente mensaje, porque los robots no pueden, reconociendo que puede haber personas que no sean robots que visiten su archivo robots.txt. También hay una referencia a Battlestar Galactica:

Humanos.txt

Internet debería tratarse de humanos, no solo de robots.

Si hay un archivo robots.txt para robots, también debería haber uno para humanos.

Esta es la idea detrás de human.txt , que se creó como una iniciativa contraria a los archivos robots.txt. Como leemos en su web oficial:

“Es una iniciativa para conocer a las personas que hay detrás de una web. Es un archivo TXT que contiene información sobre las diferentes personas que han contribuido a construir el sitio web”.

Un archivo .txt no interfiere con el código y es una manera fácil de probar la autoría de un sitio.

Aquí está el texto que contiene el archivo human.txt de Google:

“Google está construido por un gran equipo de ingenieros, diseñadores, investigadores, robots y otros en muchos sitios diferentes en todo el mundo. Se actualiza continuamente y se crea con más herramientas y tecnologías de las que podemos imaginar. Si desea ayudarnos, consulte careers.google.com”.

Otros sitios web también lo usan y, a menudo, se vuelven más creativos: mire los archivos human.txt de Netflix y Medium .

Próximos pasos

Ahora que ha visto ejemplos de huevos de Pascua encontrados en archivos robots.txt, ¿se siente inspirado para dejar un huevo de Pascua para sus usuarios?

¡Lo hicimos!