{"id":968,"date":"2023-06-20T11:30:46","date_gmt":"2023-06-20T11:30:46","guid":{"rendered":"https:\/\/www.appyweb.es\/diccionario\/?page_id=968"},"modified":"2024-03-21T11:13:59","modified_gmt":"2024-03-21T11:13:59","slug":"crawlers","status":"publish","type":"page","link":"https:\/\/www.appyweb.es\/diccionario\/crawlers\/","title":{"rendered":"Crawlers"},"content":{"rendered":"<h1 class=\"entry-title main_title\"><\/h1>\n<p><img loading=\"lazy\" decoding=\"async\" class=\"alignnone  wp-image-11948\" src=\"https:\/\/www.appyweb.es\/diccionario\/wp-content\/uploads\/2024\/03\/crawler-1-300x180.jpg\" alt=\"Crawler\" width=\"1127\" height=\"676\" srcset=\"https:\/\/www.appyweb.es\/diccionario\/wp-content\/uploads\/2024\/03\/crawler-1-300x180.jpg 300w, https:\/\/www.appyweb.es\/diccionario\/wp-content\/uploads\/2024\/03\/crawler-1-768x461.jpg 768w, https:\/\/www.appyweb.es\/diccionario\/wp-content\/uploads\/2024\/03\/crawler-1.jpg 1000w\" sizes=\"auto, (max-width: 1127px) 100vw, 1127px\" \/><\/p>\n<div class=\"entry-content\">\n<p>Los crawlers o mejor conocidos como\u00a0<em>ara\u00f1as rastreadoras<\/em>, son peque\u00f1os bots que exploran y analizan los sitios web en Internet. Son parte de un\u00a0<strong>algoritmo de un motor de b\u00fasqueda como Google<\/strong>, por lo que integran sistemas para ofrecer mejores resultados en el posicionamiento web.<\/p>\n<h2>\u00bfQu\u00e9 son?<\/h2>\n<p>Los crawlers son programas inform\u00e1ticos que recopilan datos en Internet para su an\u00e1lisis y clasificaci\u00f3n. Su tarea principal es verificar que los sitios web cumplan con los est\u00e1ndares de posicionamiento web, y aquellos que mejor los cumplan se colocar\u00e1n en los primeros lugares de las p\u00e1ginas de resultados de b\u00fasqueda.<\/p>\n<p>Aunque los motores de b\u00fasqueda como Google no divulgan los est\u00e1ndares exactos, aseguran que los par\u00e1metros de optimizaci\u00f3n SEO se acercan mucho a ellos.<\/p>\n<p>Origen Los crawlers fueron desarrollados por Brian Pinkerton en la Universidad de Washington y se presentaron por primera vez el 20 de abril de 1994. Fueron adquiridos por AOL en 1995. Adem\u00e1s de \u00abcrawlers\u00bb, tambi\u00e9n se les llama rastreadores, ara\u00f1as, bots y algoritmos.<\/p>\n<h2>\u00bfPara qu\u00e9 sirven los Crawlers?<\/h2>\n<p>Su funci\u00f3n principal es extraer informaci\u00f3n de los sitios web, aunque esto var\u00eda seg\u00fan el tipo de rastreador. Los crawlers se clasifican seg\u00fan el tipo de informaci\u00f3n que recopilan, como noticias, v\u00eddeos, im\u00e1genes y ubicaciones. Cada tipo de crawler tiene diferentes criterios para clasificar un sitio web.<\/p>\n<p>Por ejemplo, los crawlers que rastrean medios de comunicaci\u00f3n para Google News posicionar\u00e1n mejor los sitios que est\u00e9n registrados en el Centro de Editores de Google.<\/p>\n<h2>\u00bfC\u00f3mo funcionan?<\/h2>\n<p>Los crawlers de Google act\u00faan r\u00e1pidamente y de forma autom\u00e1tica cada vez que se publica una nueva p\u00e1gina web. Realizan las siguientes fases:<\/p>\n<ol>\n<li><strong>Enlaces para rastrear:<\/strong> Verifican si hay nuevos enlaces en un sitio web.<\/li>\n<li><strong>Enlaces visitados:<\/strong> Eval\u00faan los enlaces previamente indexados en busca de nuevas modificaciones.<\/li>\n<li><strong>B\u00fasqueda:<\/strong> Comparan e indexan palabras clave en el contenido, la URL y otros enlaces.<\/li>\n<li><strong>Extracci\u00f3n:<\/strong> Almacenan los enlaces rastreados.<\/li>\n<li><strong>Filtraci\u00f3n:<\/strong> Eliminan los enlaces o c\u00f3digos que no deben ser rastreados, seg\u00fan lo indicado por el propietario en el c\u00f3digo.<\/li>\n<\/ol>\n<p>Es importante recordar que la filtraci\u00f3n de enlaces o c\u00f3digos no deseados puede ser una pr\u00e1ctica delicada y debe realizarse con cuidado para evitar problemas de indexaci\u00f3n.<\/p>\n<\/div>\n<div class=\"entry-content\">\n<h2>M\u00e1s informaci\u00f3n sobre Crawlers<\/h2>\n<ul>\n<li><a href=\"https:\/\/www.appyweb.es\/diccionario\/crawl-budget\/\">\u00bfQu\u00e9 es Crawl Budget y para qu\u00e9 sirve?<\/a><\/li>\n<li><a href=\"https:\/\/www.lavanguardia.com\/vida\/junior-report\/20180928\/452053691426\/googlebot-arana-web-robots-algoritmos-seo.html\" rel=\"nofollow noopener\" target=\"_blank\">La ara\u00f1a web: \u00bfc\u00f3mo funciona Google?<\/a><\/li>\n<\/ul>\n<\/div>\n<p>&nbsp;<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Los crawlers o mejor conocidos como\u00a0ara\u00f1as rastreadoras, son peque\u00f1os bots que exploran y analizan los sitios web en Internet. Son parte de un\u00a0algoritmo de un motor de b\u00fasqueda como Google, por lo que integran sistemas para ofrecer mejores resultados en el posicionamiento web. \u00bfQu\u00e9 son? Los crawlers son programas inform\u00e1ticos que recopilan datos en Internet [&hellip;]<\/p>\n","protected":false},"author":1,"featured_media":11948,"parent":0,"menu_order":0,"comment_status":"closed","ping_status":"closed","template":"","meta":{"inline_featured_image":false,"footnotes":""},"class_list":["post-968","page","type-page","status-publish","has-post-thumbnail","hentry"],"_links":{"self":[{"href":"https:\/\/www.appyweb.es\/diccionario\/wp-json\/wp\/v2\/pages\/968","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.appyweb.es\/diccionario\/wp-json\/wp\/v2\/pages"}],"about":[{"href":"https:\/\/www.appyweb.es\/diccionario\/wp-json\/wp\/v2\/types\/page"}],"author":[{"embeddable":true,"href":"https:\/\/www.appyweb.es\/diccionario\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/www.appyweb.es\/diccionario\/wp-json\/wp\/v2\/comments?post=968"}],"version-history":[{"count":8,"href":"https:\/\/www.appyweb.es\/diccionario\/wp-json\/wp\/v2\/pages\/968\/revisions"}],"predecessor-version":[{"id":11949,"href":"https:\/\/www.appyweb.es\/diccionario\/wp-json\/wp\/v2\/pages\/968\/revisions\/11949"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/www.appyweb.es\/diccionario\/wp-json\/wp\/v2\/media\/11948"}],"wp:attachment":[{"href":"https:\/\/www.appyweb.es\/diccionario\/wp-json\/wp\/v2\/media?parent=968"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}