Bing Webmaster Tools e IndexNow

Módulo 2: Search Console, Bing e IndexNow · Tempo de leitura: 12 minutos

Objetivo de aprendizagem: Depois desta lição, saberá adicionar o seu site ao Bing Webmaster Tools (também importando-o do Search Console), explicar como funciona o IndexNow e verificar se o ficheiro de chave IndexNow do seu site está correto.

Conceitos chave: Bing Webmaster Tools, Bingbot, importação a partir do Google Search Console, verificação (ficheiro XML BingSiteAuth.xml, meta tag msvalidate.01, CNAME para verify.bing.com), motores de pesquisa que utilizam resultados do Bing, IndexNow, chave, ficheiro de chave, keyLocation, motores de pesquisa participantes

Porque é que o Bing também conta

Em Portugal, tal como na maioria dos países europeus, a grande maioria das pessoas utiliza o Google. Ainda assim, vale a pena dar atenção ao Bing, por três razões. Em primeiro lugar, há pessoas que usam o Bing sem o saber: é o motor de pesquisa predefinido do Microsoft Edge. Em segundo lugar, outros motores de pesquisa apoiam-se no Bing. O DuckDuckGo indica que obtém os seus resultados web normais sobretudo do Bing, e o Ecosia mostra por predefinição resultados do Bing (em alguns países e navegadores também os do Google). Em terceiro lugar, dá pouco trabalho: se o seu site já está no Search Console, em poucos minutos fica também no Bing.

O Bing Webmaster Tools é para o Bing o que o Search Console é para o Google: gratuito, com relatórios sobre desempenho nas pesquisas, indexação, sitemaps e a possibilidade de inspecionar um endereço específico. Os nomes e a organização são diferentes, mas a ideia é a mesma.

Adicionar o seu site

Há dois caminhos.

1. Importar a partir do Google Search Console (recomendado). Inicie sessão no Bing Webmaster Tools, escolha Importar e inicie sessão com a conta Google do seu Search Console. Depois de dar autorização, o Bing mostra os sites que verificou no Search Console, com os respetivos sitemaps. Selecione os sites e importe-os. O Bing verifica-os então por si: não precisa de alterar nada no seu DNS. O Bing também adota os seus sitemaps e volta a confirmar a propriedade regularmente através do Search Console. Segundo o Bing, pode importar até 100 sites de cada vez; podem passar até 48 horas até aparecerem dados de tráfego. Se mais tarde retirar ao Bing o acesso ao Search Console, terá de fazer a verificação de outra forma.

2. Adicionar e verificar manualmente. Introduza o endereço do seu site e escolha um destes métodos:

Para o método DNS, cria, por exemplo:

1a2b3c4d5e6f.example.com.  3600  IN  CNAME  verify.bing.com.

Repare na diferença em relação ao Google: aí é um registo TXT no próprio domínio, aqui é um CNAME num nome próprio. Um CNAME nunca pode ficar no domínio simples (@) (curso de DNS, lição 3.2); aqui também não é necessário, porque o nome é o código. Se criar o registo num painel que acrescenta automaticamente o nome de domínio, escreva apenas o código como nome. Em alguns registadores, o Bing pode também criar o registo por si depois de iniciar sessão nesse registador.

Depois disso, submeta também o seu sitemap no Bing, se não tiver vindo já com a importação.

IndexNow: avisar o próprio site de que algo mudou

Os motores de pesquisa passam pelo seu site ao seu próprio ritmo. Se alterar um preço ou publicar uma página nova, pode demorar algum tempo até um crawler dar por isso. O IndexNow é um protocolo aberto com o qual um site comunica por si: "estes endereços são novos, foram alterados ou removidos". Em indexnow.org constam como participantes a Amazon, o Bing, o Naver, o Seznam, o Yandex e o Yep. O Google não participa: para o Google, o caminho continua a ser o sitemap e o Search Console.

Um aspeto prático: se comunicar um endereço a um participante, ele é partilhado com todos os outros participantes. Basta, portanto, comunicar uma vez.

Como prova um site que a comunicação vem dele?

Qualquer pessoa poderia comunicar que as páginas de outro site foram alteradas. Por isso, o IndexNow funciona com uma chave:

1. O site escolhe uma chave: 8 a 128 caracteres, apenas letras (a-z, A-Z), algarismos e o hífen.
2. O site coloca na pasta raiz um ficheiro de texto cujo conteúdo é exatamente essa chave e cujo nome é a própria chave (em que <sleutel> representa a chave): https://www.example.com/<sleutel>.txt (UTF-8).
3. Em cada comunicação, o site envia a chave. O motor de pesquisa obtém o ficheiro e verifica se a chave corresponde.

O ficheiro pode também estar noutro local do mesmo host; nesse caso, a comunicação tem de indicar onde com keyLocation. Mas atenção: um ficheiro de chave numa subpasta (por exemplo /catalogus/) só é válido para endereços dentro dessa pasta. Para simplificar, coloque-o na pasta raiz.

Uma comunicação tem este aspeto (é o software do seu site que a faz, não o utilizador à mão):

POST https://api.indexnow.org/indexnow
Content-Type: application/json; charset=utf-8

{"host": "www.example.com",
 "key": "3f9a1c7d2b6e4a8f9c0d1e2f3a4b5c6d",
 "keyLocation": "https://www.example.com/3f9a1c7d2b6e4a8f9c0d1e2f3a4b5c6d.txt",
 "urlList": ["https://www.example.com/bruidswerk/", "https://www.example.com/workshops/"]}

Cada comunicação pode incluir até 10.000 endereços. A resposta é um código de estado: 200 (recebido), 202 (recebido, a chave ainda está a ser verificada), 403 (chave não encontrada ou incorreta), 422 (os endereços não pertencem ao host), 429 (demasiadas comunicações).

O que o IndexNow não faz

Uma comunicação é um convite para vir ver, não uma ordem para incluir a página. O site indexnow.org di-lo textualmente: submeter não garante indexação imediata. Comunique apenas alterações reais; comunicar repetidamente a mesma página sem alterações não ajuda e pode ser considerado abuso (código 429).

Na prática: quem faz a comunicação por si?

Raramente precisará de implementar o IndexNow por conta própria. O AI Builder da WebOké cria uma chave fixa por site, coloca o ficheiro de chave na pasta web e, após cada publicação, comunica as páginas alteradas ao IndexNow; não o faz numa demonstração gratuita nem quando o site está definido como "não indexar". Para WordPress existe, entre outros, o plugin IndexNow da equipa do Bing Webmaster Tools, e alguns plugins de SEO já o trazem integrado. Outros criadores de sites e algumas CDN também o oferecem. Se quiser saber se funciona no seu caso, procure o ficheiro de chave: se existir e contiver exatamente a chave, o seu site pode fazer comunicações.

Resumo

• O Bing também conta: através do Edge e porque, entre outros, o DuckDuckGo e o Ecosia se apoiam (em parte) no Bing.
• Importe o seu site do Search Console para o Bing Webmaster Tools: fica logo verificado e os sitemaps vêm junto.
• A verificação manual pode ser feita com BingSiteAuth.xml, com a meta tag msvalidate.01 ou com um CNAME do código para verify.bing.com.
• O IndexNow comunica alterações a todos os motores de pesquisa participantes de uma só vez; o Google não participa.
• O ficheiro de chave <sleutel>.txt contém exatamente a chave; uma comunicação não garante a inclusão no índice.

Questionário

Exercício

Exercício A2.5: A sua chave IndexNow está correta? Introduza o seu site e a chave IndexNow que o seu criador de sites ou plugin utiliza (no WordPress, encontra-a nas definições do plugin; no AI Builder, é o nome do ficheiro .txt de 32 caracteres na pasta raiz). Se o seu ficheiro de chave não estiver na pasta raiz, introduza também o endereço completo. A ferramenta verifica se a chave tem o formato correto e se o ficheiro existe e contém exatamente a chave. A ferramenta nunca envia ela própria uma comunicação.

Para saber mais

Os passos destes artigos aplicam-se aos painéis da WebOké; noutros fornecedores, o funcionamento é semelhante.

• Submeter o seu site aos motores de busca (Google e Bing)
• Manual do WebOké 5.4: Gerir o DNS: adicionar, alterar e eliminar registos
• Curso gratuito de DNS 3.2: CNAME e o domínio raiz
• Bing Webmaster Tools, Add and verify site: https://www.bing.com/webmasters/help/add-and-verify-site-12184f8b
• Bing Webmaster Blog, Import sites from Search Console: https://blogs.bing.com/webmaster/2019/9/Import-sites-from-Search-Console-to-Bing-Webmaster-Tools/
• IndexNow, documentação: https://www.indexnow.org/documentation
• IndexNow, perguntas frequentes: https://www.indexnow.org/faq
• DuckDuckGo, de onde vêm os resultados: https://duckduckgo.com/duckduckgo-help-pages/results/sources
• Ser encontrado online 3.1: Bing Webmaster Tools: importar ou verificar manualmente
• Ser encontrado online 3.2: IndexNow: comunicar as alterações diretamente