{"id":1477,"date":"2017-12-05T00:00:00","date_gmt":"2017-12-05T00:00:00","guid":{"rendered":"https:\/\/rockcontent.com\/br\/2017\/12\/05\/googlebot\/"},"modified":"2017-12-05T00:00:00","modified_gmt":"2017-12-05T00:00:00","slug":"googlebot","status":"publish","type":"post","link":"https:\/\/pingback.com\/br\/resources\/googlebot\/","title":{"rendered":"Googlebot, entenda como funciona o rob\u00f4 do Google"},"content":{"rendered":"

Voc\u00ea j\u00e1 se perguntou como o Google conhece tantos sites para retornar milhares (ou at\u00e9 mesmo milh\u00f5es) de p\u00e1ginas nos resultados das nossas pesquisas no buscador?<\/p>\n

Apesar de um pouco extensa, a resposta pode ser resumida em uma palavra: Googlebot.<\/p>\n

Caso nunca tenha ouvido falar no Googlebot, n\u00e3o se preocupe. Neste post, vamos entender o que \u00e9 esse recurso t\u00e3o particular do Google, como ele funciona e qual \u00e9 o seu impacto para o site da sua empresa.<\/p>\n

Acompanhe!<\/p>\n

O que \u00e9 o Googlebot?<\/h2>\n

O Googlebot nada mais \u00e9 do que um programa de computador desenvolvido pelo Google com a finalidade de rastrear as p\u00e1ginas p\u00fablicas de toda a web.<\/p>\n

Tamb\u00e9m chamado de crawler<\/em>, spider<\/em> ou bot<\/em><\/a> (vers\u00e3o encurtada de robot<\/em>), esse software navega de p\u00e1gina em p\u00e1gina por meio dos links que encontra em busca de novas webpages ou conte\u00fados atualizados.<\/p>\n

Todos eles ser\u00e3o adicionados ao \u00edndice do Google, um processo conhecido como indexa\u00e7\u00e3o.<\/p>\n

O \u00edndice funciona como um banco de dados do mecanismo de busca.<\/p>\n

\u00c9 l\u00e1 que ficam armazenadas as informa\u00e7\u00f5es que o Googlebot conseguiu examinar nas p\u00e1ginas pelas quais passou, como a URL, o t\u00edtulo e o conte\u00fado em formato de texto.<\/p>\n

Para conseguir inspecionar as bilh\u00f5es de p\u00e1ginas existentes na internet, o Google precisa manter diversas inst\u00e2ncias desses bots funcionando simultaneamente em um conjunto de computadores.<\/p>\n

Vale lembrar que os outros buscadores t\u00eam os seus pr\u00f3prios bots. Por isso, usamos Googlebot para nos referirmos ao crawler<\/em> espec\u00edfico do Google.<\/p>\n

Como funciona o processo de rastreamento?<\/h2>\n

O processo de rastreamento do Googlebot precisa ter um ponto de partida.<\/p>\n

O programa utiliza uma lista de URLs j\u00e1 definida anteriormente com base em rastreamentos j\u00e1 realizados.<\/p>\n

Essa lista tamb\u00e9m \u00e9 atualizada com a ajuda dos pr\u00f3prios webmasters, que podem enviar seus sitemaps<\/a> diretamente pelo Search Console<\/a> (uma ferramenta gratuita com diversos recursos que permitem analisar a situa\u00e7\u00e3o do seu site no Google).<\/p>\n

\u00c0 medida que o Googlebot visita os sites dessa lista, ele detecta os links presentes em cada p\u00e1gina e os inclui na fila de p\u00e1ginas a rastrear.<\/p>\n

Conforme ele encontra conte\u00fados novos, mudan\u00e7as nas p\u00e1ginas e links quebrados (quando um link n\u00e3o direciona para uma p\u00e1gina v\u00e1lida e exibe o c\u00f3digo de erro 404<\/a>), envia essas informa\u00e7\u00f5es ao \u00edndice para que ele seja atualizado.<\/p>\n

Qual \u00e9 o impacto do Googlebot no seu site?<\/h2>\n

Agora que voc\u00ea entende como funciona o processo do Google para fazer o rastreamento e a indexa\u00e7\u00e3o de p\u00e1ginas, fica mais f\u00e1cil compreender de que modo o Googlebot impacta o seu site.<\/p>\n

O Google domina o mercado de buscas, contando com mais de 90% de participa\u00e7\u00e3o<\/a> \u2014 o que faz dele o buscador mais utilizado no mundo.<\/p>\n

Tamanha quantidade de usu\u00e1rios explica o fato de esse mecanismo de busca ser uma excelente fonte de tr\u00e1fego para muitos sites (e por que n\u00e3o para o seu?).<\/p>\n

Contudo, o requisito mais b\u00e1sico para que isso ocorra \u00e9 que o Google conhe\u00e7a o seu site.<\/p>\n

Ou seja, ele precisa estar presente no \u00edndice para ter a possibilidade de aparecer no SERP, sigla em ingl\u00eas para Search Engine Results Page<\/em> ou p\u00e1gina de resultados das pesquisas.<\/p>\n

Quanto mais relevante for o conte\u00fado das suas p\u00e1ginas, maiores ser\u00e3o as chances de elas aparecerem com um bom posicionamento nas pesquisas e atrair a aten\u00e7\u00e3o dos usu\u00e1rios.<\/p>\n

Mas isso j\u00e1 entra no assunto de Search Engine Optimization<\/a> (SEO)\u2026<\/p>\n

Sendo assim, na pr\u00f3xima se\u00e7\u00e3o, vamos focar em maneiras de garantir que o Googlebot consiga visitar as suas p\u00e1ginas.<\/p>\n

Como saber se o Googlebot consegue rastrear o seu site?<\/h2>\n

Para que uma p\u00e1gina seja rastre\u00e1vel pelo crawler<\/em>, \u00e9 necess\u00e1rio constru\u00ed-la com os padr\u00f5es de HTML e n\u00e3o mant\u00ea-la com acesso p\u00fablica, j\u00e1 que o bot<\/em> n\u00e3o consegue transpor um sistema de acesso protegido por senha.<\/p>\n

Sites criados em Flash, por exemplo, n\u00e3o s\u00e3o rastre\u00e1veis pelo Googlebot.<\/p>\n

Inclusive, o uso dessa tecnologia j\u00e1 \u00e9 considerado ultrapassado no mercado de busca e em outras \u00e1reas.<\/p>\n

Superados esses requisitos, um cuidado que \u00e9 preciso ter \u00e9 verificar o robots.txt<\/a>.<\/p>\n

Trata-se de um arquivo que fica na raiz do site e define as p\u00e1ginas ou diret\u00f3rios aos quais os bots<\/em> podem ter acesso ou n\u00e3o.<\/p>\n

Essa verifica\u00e7\u00e3o \u00e9 importante porque o profissional que desenvolveu o site pode ter configurado para que o Googlebot e outros bots n\u00e3o fa\u00e7am o rastreamento das p\u00e1ginas enquanto elas estiverem em fase de testes.<\/p>\n

Por algum equ\u00edvoco ou esquecimento, acontece de o robots.txt permanecer com essa restri\u00e7\u00e3o, impedindo que o Google e outros buscadores indexem as webpages.<\/p>\n

E uma das maneiras mais simples de fazer essa verifica\u00e7\u00e3o \u00e9 por meio do Google Search Console, que citamos anteriormente.<\/p>\n

Dentro da ferramenta, acesse a op\u00e7\u00e3o \u201cRastreamento\u201d e depois \u201cErros de rastreamento\u201d.<\/p>\n

Na aba \u201cBusca de robots.txt\u201d, \u00e9 poss\u00edvel visualizar se o Googlebot teve algum problema para rastrear o seu site nos \u00faltimos 90 dias.<\/p>\n

Ali\u00e1s, dentro da op\u00e7\u00e3o \u201cRastreamento\u201d tamb\u00e9m existem as \u201cEstat\u00edsticas de rastreamento\u201d.<\/p>\n

Com esse recurso, voc\u00ea consegue ver informa\u00e7\u00f5es sobre a atividade do Googlebot dentro do seu site, como o n\u00famero de p\u00e1ginas rastreadas por dia e o tempo que ele leva para fazer o download de uma p\u00e1gina.<\/p>\n

Tamb\u00e9m existe a op\u00e7\u00e3o de \u201cBuscar como o Google\u201d e analisar como o buscador processa as p\u00e1ginas do seu website.<\/p>\n

Basta inserir a URL e clicar em \u201cBuscar\u201d. Depois, \u00e9 s\u00f3 conferir os detalhes do teste para garantir que tudo est\u00e1 funcionando corretamente.<\/p>\n

Por fim, conclu\u00edmos que o Googlebot \u00e9 parte essencial da inclus\u00e3o do seu site no Google e a frequente atualiza\u00e7\u00e3o do \u00edndice conforme voc\u00ea renova ou adiciona novos conte\u00fados.<\/p>\n

Se por algum motivo voc\u00ea bloque\u00e1-lo ou dificultar o seu trabalho de rastreamento, poder\u00e1 perder uma das melhores fontes de tr\u00e1fego org\u00e2nico que existem e, possivelmente, deixar passar \u00f3timas oportunidades com usu\u00e1rios com o potencial de se tornarem clientes.<\/p>\n

Se voc\u00ea gostou deste post, continue se informando com nossos posts sobre SEO e o funcionamento dos mecanismos de busca.<\/p>\n

Fica a sugest\u00e3o de conferir o passo a passo completo e definitivo para indexar as suas p\u00e1ginas no Google<\/a>!<\/p>\n

[rock-convert-cta id=”39082″]<\/div>\n","protected":false},"excerpt":{"rendered":"

Voc\u00ea j\u00e1 se perguntou como o Google conhece tantos sites para retornar milhares (ou at\u00e9 mesmo milh\u00f5es) de p\u00e1ginas nos resultados das nossas pesquisas no buscador? Apesar de um pouco extensa, a resposta pode ser resumida em uma palavra: Googlebot. Caso nunca tenha ouvido falar no Googlebot, n\u00e3o se preocupe. Neste post, vamos entender o […]<\/p>\n","protected":false},"author":1,"featured_media":12771,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[17],"tags":[],"class_list":["post-1477","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-marketing"],"yoast_head":"\nGooglebot, entenda como funciona o rob\u00f4 do Google<\/title>\n<meta name=\"description\" content=\"O Googlebot \u00e9 um programa desenvolvido pelo Google para rastrear as p\u00e1ginas p\u00fablicas da web. Com esse sistema, o buscador \u00e9 capaz de analisar as p\u00e1ginas e sua relev\u00e2ncia.\" \/>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/pingback.com\/br\/resources\/googlebot\/\" \/>\n<meta property=\"og:locale\" content=\"pt_BR\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Googlebot, entenda como funciona o rob\u00f4 do Google\" \/>\n<meta property=\"og:description\" content=\"O Googlebot \u00e9 um programa desenvolvido pelo Google para rastrear as p\u00e1ginas p\u00fablicas da web. Com esse sistema, o buscador \u00e9 capaz de analisar as p\u00e1ginas e sua relev\u00e2ncia.\" \/>\n<meta property=\"og:url\" content=\"https:\/\/pingback.com\/br\/resources\/googlebot\/\" \/>\n<meta property=\"og:site_name\" content=\"Pingback\" \/>\n<meta property=\"article:published_time\" content=\"2017-12-05T00:00:00+00:00\" \/>\n<meta name=\"author\" content=\"Pingback\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:creator\" content=\"@pingbackoficial\" \/>\n<meta name=\"twitter:site\" content=\"@pingbackoficial\" \/>\n<meta name=\"twitter:label1\" content=\"Escrito por\" \/>\n\t<meta name=\"twitter:data1\" content=\"Pingback\" \/>\n\t<meta name=\"twitter:label2\" content=\"Est. tempo de leitura\" \/>\n\t<meta name=\"twitter:data2\" content=\"5 minutos\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\/\/schema.org\",\"@graph\":[{\"@type\":\"WebPage\",\"@id\":\"https:\/\/pingback.com\/br\/resources\/googlebot\/\",\"url\":\"https:\/\/pingback.com\/br\/resources\/googlebot\/\",\"name\":\"Googlebot, entenda como funciona o rob\u00f4 do Google\",\"isPartOf\":{\"@id\":\"https:\/\/pingback.com\/br\/resources\/#website\"},\"primaryImageOfPage\":{\"@id\":\"https:\/\/pingback.com\/br\/resources\/googlebot\/#primaryimage\"},\"image\":{\"@id\":\"https:\/\/pingback.com\/br\/resources\/googlebot\/#primaryimage\"},\"thumbnailUrl\":\"\",\"datePublished\":\"2017-12-05T00:00:00+00:00\",\"author\":{\"@id\":\"https:\/\/pingback.com\/br\/resources\/#\/schema\/person\/170478128352e2f21e2360c2e4944a66\"},\"description\":\"O Googlebot \u00e9 um programa desenvolvido pelo Google para rastrear as p\u00e1ginas p\u00fablicas da web. Com esse sistema, o buscador \u00e9 capaz de analisar as p\u00e1ginas e sua relev\u00e2ncia.\",\"breadcrumb\":{\"@id\":\"https:\/\/pingback.com\/br\/resources\/googlebot\/#breadcrumb\"},\"inLanguage\":\"pt-BR\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\/\/pingback.com\/br\/resources\/googlebot\/\"]}]},{\"@type\":\"ImageObject\",\"inLanguage\":\"pt-BR\",\"@id\":\"https:\/\/pingback.com\/br\/resources\/googlebot\/#primaryimage\",\"url\":\"\",\"contentUrl\":\"\"},{\"@type\":\"BreadcrumbList\",\"@id\":\"https:\/\/pingback.com\/br\/resources\/googlebot\/#breadcrumb\",\"itemListElement\":[{\"@type\":\"ListItem\",\"position\":1,\"name\":\"In\u00edcio\",\"item\":\"https:\/\/pingback.com\/br\/resources\/\"},{\"@type\":\"ListItem\",\"position\":2,\"name\":\"Googlebot, entenda como funciona o rob\u00f4 do Google\"}]},{\"@type\":\"WebSite\",\"@id\":\"https:\/\/pingback.com\/br\/resources\/#website\",\"url\":\"https:\/\/pingback.com\/br\/resources\/\",\"name\":\"Pingback Blog\",\"description\":\"Marketing for builders\",\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\/\/pingback.com\/br\/resources\/?s={search_term_string}\"},\"query-input\":{\"@type\":\"PropertyValueSpecification\",\"valueRequired\":true,\"valueName\":\"search_term_string\"}}],\"inLanguage\":\"pt-BR\"},{\"@type\":\"Person\",\"@id\":\"https:\/\/pingback.com\/br\/resources\/#\/schema\/person\/170478128352e2f21e2360c2e4944a66\",\"name\":\"Pingback\",\"image\":{\"@type\":\"ImageObject\",\"inLanguage\":\"pt-BR\",\"@id\":\"https:\/\/pingback.com\/br\/resources\/#\/schema\/person\/image\/\",\"url\":\"https:\/\/secure.gravatar.com\/avatar\/70cde532238b4f8bf4a6e7e589ff0a259eda38fa966564ca7ed7d23e61c27774?s=96&d=mm&r=g\",\"contentUrl\":\"https:\/\/secure.gravatar.com\/avatar\/70cde532238b4f8bf4a6e7e589ff0a259eda38fa966564ca7ed7d23e61c27774?s=96&d=mm&r=g\",\"caption\":\"Pingback\"},\"description\":\"Pingback: Marketing for builders.\",\"sameAs\":[\"https:\/\/pingback.com\",\"https:\/\/www.instagram.com\/pingbackoficial\/\",\"https:\/\/www.linkedin.com\/company\/pingbackoficial\/\",\"https:\/\/x.com\/pingbackoficial\",\"https:\/\/www.youtube.com\/@pingbackoficial\"],\"url\":\"https:\/\/pingback.com\/br\/resources\/author\/adm1n\/\"}]}<\/script>\n<!-- \/ Yoast SEO plugin. -->","yoast_head_json":{"title":"Googlebot, entenda como funciona o rob\u00f4 do Google","description":"O Googlebot \u00e9 um programa desenvolvido pelo Google para rastrear as p\u00e1ginas p\u00fablicas da web. Com esse sistema, o buscador \u00e9 capaz de analisar as p\u00e1ginas e sua relev\u00e2ncia.","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/pingback.com\/br\/resources\/googlebot\/","og_locale":"pt_BR","og_type":"article","og_title":"Googlebot, entenda como funciona o rob\u00f4 do Google","og_description":"O Googlebot \u00e9 um programa desenvolvido pelo Google para rastrear as p\u00e1ginas p\u00fablicas da web. Com esse sistema, o buscador \u00e9 capaz de analisar as p\u00e1ginas e sua relev\u00e2ncia.","og_url":"https:\/\/pingback.com\/br\/resources\/googlebot\/","og_site_name":"Pingback","article_published_time":"2017-12-05T00:00:00+00:00","author":"Pingback","twitter_card":"summary_large_image","twitter_creator":"@pingbackoficial","twitter_site":"@pingbackoficial","twitter_misc":{"Escrito por":"Pingback","Est. tempo de leitura":"5 minutos"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"WebPage","@id":"https:\/\/pingback.com\/br\/resources\/googlebot\/","url":"https:\/\/pingback.com\/br\/resources\/googlebot\/","name":"Googlebot, entenda como funciona o rob\u00f4 do Google","isPartOf":{"@id":"https:\/\/pingback.com\/br\/resources\/#website"},"primaryImageOfPage":{"@id":"https:\/\/pingback.com\/br\/resources\/googlebot\/#primaryimage"},"image":{"@id":"https:\/\/pingback.com\/br\/resources\/googlebot\/#primaryimage"},"thumbnailUrl":"","datePublished":"2017-12-05T00:00:00+00:00","author":{"@id":"https:\/\/pingback.com\/br\/resources\/#\/schema\/person\/170478128352e2f21e2360c2e4944a66"},"description":"O Googlebot \u00e9 um programa desenvolvido pelo Google para rastrear as p\u00e1ginas p\u00fablicas da web. Com esse sistema, o buscador \u00e9 capaz de analisar as p\u00e1ginas e sua relev\u00e2ncia.","breadcrumb":{"@id":"https:\/\/pingback.com\/br\/resources\/googlebot\/#breadcrumb"},"inLanguage":"pt-BR","potentialAction":[{"@type":"ReadAction","target":["https:\/\/pingback.com\/br\/resources\/googlebot\/"]}]},{"@type":"ImageObject","inLanguage":"pt-BR","@id":"https:\/\/pingback.com\/br\/resources\/googlebot\/#primaryimage","url":"","contentUrl":""},{"@type":"BreadcrumbList","@id":"https:\/\/pingback.com\/br\/resources\/googlebot\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"In\u00edcio","item":"https:\/\/pingback.com\/br\/resources\/"},{"@type":"ListItem","position":2,"name":"Googlebot, entenda como funciona o rob\u00f4 do Google"}]},{"@type":"WebSite","@id":"https:\/\/pingback.com\/br\/resources\/#website","url":"https:\/\/pingback.com\/br\/resources\/","name":"Pingback Blog","description":"Marketing for builders","potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/pingback.com\/br\/resources\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"pt-BR"},{"@type":"Person","@id":"https:\/\/pingback.com\/br\/resources\/#\/schema\/person\/170478128352e2f21e2360c2e4944a66","name":"Pingback","image":{"@type":"ImageObject","inLanguage":"pt-BR","@id":"https:\/\/pingback.com\/br\/resources\/#\/schema\/person\/image\/","url":"https:\/\/secure.gravatar.com\/avatar\/70cde532238b4f8bf4a6e7e589ff0a259eda38fa966564ca7ed7d23e61c27774?s=96&d=mm&r=g","contentUrl":"https:\/\/secure.gravatar.com\/avatar\/70cde532238b4f8bf4a6e7e589ff0a259eda38fa966564ca7ed7d23e61c27774?s=96&d=mm&r=g","caption":"Pingback"},"description":"Pingback: Marketing for builders.","sameAs":["https:\/\/pingback.com","https:\/\/www.instagram.com\/pingbackoficial\/","https:\/\/www.linkedin.com\/company\/pingbackoficial\/","https:\/\/x.com\/pingbackoficial","https:\/\/www.youtube.com\/@pingbackoficial"],"url":"https:\/\/pingback.com\/br\/resources\/author\/adm1n\/"}]}},"_links":{"self":[{"href":"https:\/\/pingback.com\/br\/resources\/wp-json\/wp\/v2\/posts\/1477","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/pingback.com\/br\/resources\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/pingback.com\/br\/resources\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/pingback.com\/br\/resources\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/pingback.com\/br\/resources\/wp-json\/wp\/v2\/comments?post=1477"}],"version-history":[{"count":0,"href":"https:\/\/pingback.com\/br\/resources\/wp-json\/wp\/v2\/posts\/1477\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/pingback.com\/br\/resources\/wp-json\/"}],"wp:attachment":[{"href":"https:\/\/pingback.com\/br\/resources\/wp-json\/wp\/v2\/media?parent=1477"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/pingback.com\/br\/resources\/wp-json\/wp\/v2\/categories?post=1477"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/pingback.com\/br\/resources\/wp-json\/wp\/v2\/tags?post=1477"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}