# data[].attributes.attachment_link.readable_text
El robot de Google es el robot de rastreo web de Google (en ocasiones, también denominado "araña"). El rastreo es el proceso mediante el cual el robot de Google descubre páginas nuevas y actualizadas y las añade al índice de Google.

Utilizamos una enorme cantidad de ordenadores para obtener (o "rastrear") miles de millones de páginas de la Web. El robot de Google utiliza un proceso de rastreo algorítmico: a través de programas informáticos se determinan los sitios web que hay que rastrear, la frecuencia y el número de páginas que hay que explorar en cada uno de ellos.

El proceso de rastreo del robot de Google comienza con una lista de URL de páginas web generada a partir de procesos anteriores de rastreo y se amplía con los datos de los sitemaps que ofrecen los webmasters. A medida que el robot de Google visita cada uno de esos sitios web, detecta enlaces (SRC y HREF) en sus páginas y los añade a la lista de páginas que debe rastrear. Los sitios web nuevos, los cambios en los existentes y los enlaces obsoletos se detectan y se utilizan para actualizar el índice de Google.

Para webmasters: el robot de Google y tu sitio

Cómo accede el robot de Google a tu sitio

De media, el robot de Google no suele acceder a la mayoría de los sitios más de una vez cada pocos segundos. Sin embargo, a causa de retrasos en la red, es posible que el porcentaje parezca ligeramente superior en períodos cortos de tiempo.

El robot de Google está diseñado para distribuirse en varios equipos con el fin de mejorar el rendimiento y ajustar la escala a medida que la Web se desarrolla. Además, para reducir el uso del ancho de banda, muchos de los rastreadores se ejecutan en equipos ubicados cerca de los sitios web que indexan en la red. Por tanto, es posible que tus registros muestren visitas de varios equipos a la página google.com, en todos los casos con el robot de Google como user-agent. Nuestro objetivo consiste en rastrear el mayor número posible de páginas de tu sitio en cada visita sin colapsar el ancho de banda de tu servidor. Solicita que se modifique la frecuencia de rastreo.

Bloquear el acceso del robot de Google al contenido de tu sitio

Resulta prácticamente imposible no publicar enlaces a un servidor web para mantenerlo en secreto. En el momento en que un usuario utilice un enlace de tu servidor "secreto" para acceder a otro servidor web, tu URL "secreta" podrá mostrarse en la etiqueta de referencia, y el otro servidor web podrá almacenarla y publicarla en su registro de referencia. Además, la Web contiene un gran número de enlaces obsoletos y rotos. Siempre que se publique un enlace incorrecto a tu sitio o que los enlaces no se actualicen correctamente para reflejar los cambios realizados en tu servidor, el robot de Google tratará de descargar un enlace incorrecto de tu sitio.

Dispones de varias opciones para evitar que el robot de Google rastree el contenido de tu sitio, incluido el uso del archivo robots.txt para bloquear el acceso a los archivos y a los directorios de tu servidor.

Es posible que el robot de Google tarde un tiempo en detectar los cambios una vez que haya creado el archivo robots.txt. Si el robot de Google sigue rastreando contenido bloqueado en el archivo robots.txt, comprueba que la ubicación de este archivo sea correcta. Debe estar en el directorio principal del servidor (por ejemplo, www.example.com/robots.txt). Si lo colocas en un subdirectorio, no ocurrirá nada.

Si solo quieres evitar que se muestren en el registro de tu servidor web mensajes de error en los que se indique que no se puede encontrar el archivo, crea un archivo vacío con el nombre "robots.txt". Para evitar que el robot de Google siga los enlaces a una página de tu sitio, utiliza la metaetiqueta nofollow. Para evitar que el robot de Google siga un enlace individual, añade el atributo rel="nofollow" al enlace.

A continuación se indican otros consejos:

Comprueba si tu archivo robots.txt funciona correctamente. La herramienta Probar robots.txt de la página URL bloqueadas (en Estado) te permite ver exactamente cómo el robot de Google interpretará el contenido de tu archivo robots.txt. El user-agent de Google se llama precisamente Googlebot.

La herramienta Explorar como Google de Search Console te ayuda a comprender exactamente cómo tu sitio se muestra para el robot de Google. Esta herramienta puede resultarte muy útil para solucionar problemas relacionados con el contenido del sitio o con su visibilidad en los resultados de búsqueda.

Asegurarte de que se pueda rastrear tu sitio

El robot de Google encuentra sitios siguiendo enlaces entre páginas. En la página Errores de rastreo de Search Console se muestran los problemas que ha encontrado el robot de Google al rastrear tu sitio. Te recomendamos que consultes con regularidad esos errores de rastreo para identificar los problemas relacionados con tu sitio web.

Si tu archivo robots.txt funciona correctamente, pero el sitio web no presenta tráfico, es posible que la posición del contenido en las páginas de resultados no sea buena por alguno de los motivos que se indican a continuación.

Problemas relacionados con spammers y con otros user-agents

Las direcciones IP que utiliza el robot de Google varían cada cierto tiempo. La mejor forma de identificar los accesos del robot de Google es utilizar el user-agent (Googlebot). Para comprobar si el robot que accede a tu servidor es realmente el robot de Google, realiza una petición de DNS inversa.

El robot de Google, al igual que el resto de robots de motor de búsqueda acreditados, respetará las directrices del archivo robots.txt, pero es posible que algunos spammers y otros usuarios malintencionados no las respeten. Informa de spam a Google.

Google también dispone de otros user-agents, como Feedfetcher (user-agent: Feedfetcher-Google). Las solicitudes de Feedfetcher proceden de acciones explícitas realizadas por usuarios que han añadido feeds a la página principal de Google (y no de rastreadores automatizados), por lo que Feedfetcher no sigue las directrices del archivo robots.txt. Para evitar que Feedfetcher rastree tu sitio web, configura tu servidor para que muestre mensajes de estado de error 404 o 410 o de cualquier otro tipo al user-agent Feedfetcher-Google. Obtén más información sobre Feedfetcher.

# data[].attributes.attachment_link.description
El robot de Google es el robot de rastreo web de Google (en ocasiones, también denominado "araña"). El rastreo es el proceso mediante el cual el robot de Google descubre páginas nuevas y actualizadas y las añade al índice de Google. Utilizamos una enorme cantidad de ordenadores para obtener (o "rastrear") miles de millones de páginas de la Web.

# data[].attributes.body
Un metabuscador es un buscador de buscadores. Unapotente herramienta que realiza rastreos por diferentes bases de datos proporcionando una combinación de los mejores resultados. Comúnmente se les denomina robots, arañas o gusanos "crawlers".

A la hora de utilizar los metabuscadores hay que tener en cuenta las diferentes estrategias de búsqueda que tiene cada buscador. Muchas veces el orden de los resultados no tiene en cuenta la relevancia y los muestra según otros los criterios como la coincidencia de palabras claves, velocidad de carga de la página, temática...

Si tenemos en cuenta que cada buscador solo es capaz de rastrear una búsqueda entre el 15% de las páginas webque existen en la red, utilizar un metabuscador supone realizar una búsqueda más exhaustiva.

A continuación hablamos de algunos de los metabuscadores más utilizados.

El Buscón es la plataforma de recursos electrónicos de la Biblioteca Nacional que permite el acceso a los recursos electrónicos suscritos opr la Biblioteca Nacional, así como seleccionar estos recursos por materias o tipologías.

Ixquick es el "buscador más confidencial del mundo" ya que proporciona una navegación anónima que no deja rastro de direcciones IP, ni cookies, ni guarda datos personales...Desde que comenzó a funcionar ha proporcionado 1.200 millones de búsquedas.

Kartoo es un metabuscador de información que devuelve los resultados de la búsqueda en forma de mapas. Según al relevancia de los sitios encontrados aparecen esferas más o menos grandes. Además se pueden realizar búsquedas vanzadas por temas que se pueden ir ajustando dependiendo los criterios de búsqueda.

Metacrawler es un metabuscador que ofrece los resultados de las búsquedas de cada buscador utilizado clasificados por columnas. Es una buena forma de diferenciar los resultados.Google, Yahoo, Bing o Ask son algunos de los motores de búsqueda de los que extrae resultados.

Turbo10 permite una búsqueda en diez buscadores, que el usuario selecciona previamente. Existe un listado de 1.700 buscadores especializados.

Dogpile es un metabuscador simple y rápido que utiliza motores de búsqueda como About, Ask.com, FinWhat, Bing, Google, LookSmart o MSN Search. Permite búsquedas de información, imágenes y vídeos.

Mamma devuelve información sobre noticias, imágenes, video e incluso rastrea en Twitter

Copernic además de un metabuscador es un programa metabuscador cuyo software se instala en el ordenador. Existe una versión gratuita y otra de pago. Entre sus ventajas más relevantes se encuentra el filtrado y la ordenación de los resultados, los criterios de pertinencia propios, posibilidad de salvar y recuperar búsquedas para actualizar resultados...

# data[].attributes.attachment_link.title
Fuentes disponibles para la investigacion en el internet (Metabuscadores e indice)

# data[].attributes.attachment_link.description
Uploaded by Jeison Bastidas on 2016-04-11.

# data[].attributes.body
MEJORES BUSCADORES

# data[].attributes.attachment_link.title
EL MEJOR NAVEGADOR WEB DEL MUNDO (Marzo 2016)

# data[].attributes.attachment_link.title
Fuentes disponibles para la investigacion en el internet (Motores de busqueda)

# data[].attributes.body
Lo cierto es que usar un motor de búsqueda es algo sencillo o muy sencillo para la mayoría de los usuarios. Basta con escribir unas cuantas palabras en el cajetín del buscador y hacer click sobre el botón para disfrutar de cientos o miles de resultados sobre el tema de nuestro interés.

Esta simplicidad y sencillez para usar cualquier buscador las han convertido  en herramientas muy populares y de gran utilidad para la mayoría de nosotros.

A pesar de esto, en numerosas ocasiones cuando queremos resultados de calidad sobre un tema de nuestro interés este procedimiento no es tan eficiente.

Es decir, los resultados que nos ofrece el buscador no son los que necesitamos.

Es por esto que en esta entrada quiero dar algunos consejos para saber como usar un motor de búsqueda de la forma más correcta para obtener resultados de calidad.

Por supuesto no estas obligado a seguir estos consejos.

Claves  para usar un motor de búsqueda

Utilizar un motor de búsqueda esta al alcance de todos. No es una materia complicada.

Sin embargo cuando hablamos de obtener resultados de calidad con estas herramientas la cosa es diferente. Para empezar existen motores de búsqueda más adecuados para una temática que otros y por supuesto cada buscador tiene sus propios entresijos que es bueno conocer.

Veamos cuales son las calves que debemos tener en cuenta a la hora de usar un motor de búsqueda:

Elegir el motor de búsqueda correcto para cada tarea

Utilizar la búsqueda avanzada

Conocer la búsqueda booleana

Familiarizarse con los comandos rápidos de búsqueda del buscador

Como ves son una claves bastante sencillas. Vamos a comentarlas ahora con mayor profundidad.

Clave #1: Eligiendo el mejor motor de búsqueda para cada tarea

De todas estas claves la más importante es la primera. No seremos capaces de encontrar resultados de calidad si no utilizamos la herramienta correcta.

Para empezar podemos clasificar los buscadores en:

Generalistas: son buscadores como Google, Bing o directorios como Yahoo que generalmente indexan páginas de la web superficial sobre cualquier temática.

Y temáticos:  especializados en un tema concreto muchos de estos buscadores están relacionados con la web profunda.

Si no lo sabias, la web suele dividirse entre la Internet profunda y la Internet superficial. Esta última es la web que generalmente esta indexada por motores de búsqueda generalista. Si quieres saber más sobre este tema, puedes consultar este artículo sobre como funciona un motor de búsqueda

Evidentemente elegir un tipo u otro de buscador dependerá de la temática de nuestra investigación.

Para saber que motor de búsqueda elegir te recomiendo que leas este artículo sobre cómo seleccionar el mejor motor de búsqueda para cada investigación.

En esta entrada encontrarás una selección de buscadores por categorías de búsquedas que puedes utilizar. Muy práctico.

Clave #2: Utilizando la búsqueda avanzada de un motor de búsqueda:

Por lo general los buscadores disponen de este tipo de búsqueda dentro de sus opciones.

Esta, es una utilidad muy práctica para obtener resultados muy precisos… pero es a la vez una utilidad totalmente infrautilzada por la mayoría de los usuarios.

Usar correctamente un motor de búsqueda supone muchas veces echar mano de la búsqueda avanzada ya que permite utilizar potentes filtros con los que focalizar la búsqueda al máximo.

Aquí te dejo una pequeña guía de cómo usar la búsqueda avanzada de Google y otros 15 servicios de búsqueda avanzada de otros tantos buscadores.

Clave #3: Descubriendo la búsqueda Booleana

En realidad la búsqueda booleana es un tipo de búsqueda basada en los operadores booleanos del álgebra de Boole.

Te habrá sonado a chino pero es algo realmente sencillo. Se trata de incorporar a tus búsquedas estos comandos:

AND: sirve para asociar dos palabras o términos claves en tus búsquedas

OR: sirve para incluir un termino en tus resultados de búsqueda

NOT: sirve para excluir cualquier termino de tus búsquedas

Existen más operadores Booleanos pero estos tres son los principales.

Ten en cuenta que no todos los buscadores aceptan los comandos de la búsqueda booleanapero la mayoría permiten el uso del AND OR y NOT.

Clave #4: Usando los comandos de búsqueda rápida de tu buscador

Muchos motores de búsqueda tienen comandos de búsqueda rápida que podemos utilizar para mejorar la calidad de los resultados.

Algunos de estos comandos son exclusivos para cada buscador pero otros son bastante comunes y pueden emplearse indistintamente en Bing, Google; Yahoo y otros buscadores.

Algunos de estos comandos serían:

El uso de comillas “”

El uso de símbolo – para eliminar palabras

El uso del símbolo ~ para incluir términos similares

Por poner algunos ejemplos.

Si hablamos de Google el buscador generalista por excelencia puedes consultar sus comandos mas populares en estas dos entradas