Ahrefs revela seu novo mecanismo de busca: Sim

Você esqueceu que o provedor de ferramentas de SEO Ahrefs anunciou planos para construir seu próprio mecanismo de pesquisa em 2019?

Se você respondeu “sim”, você não está sozinho.

A Ahrefs esteve ocupada nesses três anos desde então, investindo US$ 60 milhões de seu próprio dinheiro no lançamento de um novo mecanismo de busca, chamado Yep.

O que é sim?

Yep é um mecanismo de pesquisa na web de uso geral. Sim, em breve estará disponível em todos os países e na maioria dos idiomas.

A Ahrefs está posicionando-a como concorrente do Googe. No entanto, vimos muitos concorrentes do Google e “assassinos” do Google irem e virem nas últimas duas décadas. Então, por enquanto, vamos chamá-lo de uma alternativa do Google.

Então, o que o Yep está apostando para se tornar uma verdadeira alternativa ao Google? Duas coisas:

Privacidade

A Yep não coletará informações pessoais (por exemplo, geolocalização, nome, idade, sexo) por padrão. Seu histórico de pesquisa Yep não será armazenado em nenhum lugar.

O que a Yep contará são estatísticas de pesquisa agregadas para melhorar algoritmos, correções ortográficas e sugestões de pesquisa, disse a empresa.

“Em outras palavras, salvamos certos dados nas pesquisas, mas nunca de uma maneira pessoalmente identificável”, disse o CEO da Ahrefs, Dmytro Gerasymenko. “Por exemplo, vamos rastrear quantas vezes uma palavra é pesquisada e a posição do link que recebe mais cliques. Mas não criaremos seu perfil para publicidade direcionada.”

O que o Yep usará é um pesquisador:

• Palavras-chave inseridas.
• Preferência de idioma recebida do navegador.
• Área geográfica aproximada na origem da pesquisa na escala de uma região ou cidade (deduzida do endereço IP).

Partilha de lucros

O plano para o mecanismo de busca da Ahrefs é um modelo de participação nos lucros 90/10, onde a Ahrefs compartilha 90% de seus lucros de publicidade com editores de conteúdo.

O motivo: o Google exibe conteúdo em seus resultados de pesquisa, sem a necessidade de clicar no site. Isso significa que os sites estão perdendo tráfego. E para muitos sites, menos tráfego significa menos receita.

“Os criadores que tornam os resultados de pesquisa possíveis merecem receber pagamentos por seu trabalho”, disse Gerasymenko. “Vimos como o modelo de participação nos lucros do YouTube fez toda a indústria de vídeos prosperar. Dividindo os lucros da publicidade 90/10 com os autores de conteúdo, queremos dar um impulso para tratar os talentos de forma justa no setor de buscas.”

Aqui está o que Yep diz:

“Digamos que o maior mecanismo de busca do mundo ganhe US$ 100 bilhões por ano. Agora, imagine se eles dessem US$ 90 bilhões para criadores e editores de conteúdo.

A Wikipedia provavelmente ganharia alguns bilhões de dólares por ano com seu conteúdo. Eles poderiam parar de pedir doações e começar a pagar um salário decente às pessoas que lapidam seus artigos.

Não haveria mais necessidade de paywalls e links de afiliados, então os editores que tiveram que recorrer a perseguir tráfego com artigos clickbait e encher suas páginas com anúncios poderiam voltar a fazer peças investigativas e análises de qualidade. Um jornalista cidadão que descobrisse corrupção em um emprego em tempo integral poderia ser compensado sem ter que gastar tempo tentando monetizar o conteúdo.

E o melhor? Você não precisa ser um especialista para se beneficiar.

Digamos que você ame panquecas mais do que qualquer outra coisa no mundo. Agora você tem um incentivo para aumentar essa paixão – imagine ser bem pago para compartilhar receitas criativas, publicar fotos de suas criações e ensinar ao resto do mundo como eles também podem fazer as panquecas mais fofas de todos os tempos. Criadores independentes em todos os lugares finalmente poderão florescer.”

Tudo isso soa bem na teoria. Mas Yep está apenas lançando.

O DuckDuckGo, lançado em 2008, recebe tantas pesquisas por ano (~ 15,7 bilhões) quanto o Google recebe em cerca de dois ou três dias. Mesmo o Microsoft Bing – que é de propriedade da Microsoft, a terceira maior empresa do planeta em valor de mercado – não conseguiu fazer uma diferença significativa na participação de mercado de buscas do Google desde 2009.

Como funciona o Yep

O que realmente importa é a qualidade da pesquisa. Isso significa que a Yep terá que satisfazer os desejos e necessidades dos pesquisadores. Então, como eles estão reunindo esses resultados de pesquisa?

Rastejando

A Yep coleta dados do site usando o AhrefsBot. O Ahrefs disse que planeja substituir o AhrefsBot pelo YepBot em um “futuro próximo”.

O AhrefsBot visita mais de 8 bilhões de páginas da web a cada 24 horas, o que o torna o segundo rastreador mais ativo da web, atrás apenas do Google, disse o Ahrefs.

Há 12 anos, o AhrefsBot rastreia a web. Eles estavam usando os dados do AhrefsBot para alimentar seu banco de dados de links e insights de SEO,

Indexação

O índice de pesquisa Yep é atualizado a cada 15 a 30 minutos. Diariamente, a empresa adiciona 30 milhões de páginas na web e descarta 20 milhões.

Outros detalhes técnicos

A Ahrefs disse que seu data center em Cingapura é alimentado por cerca de 1.000 servidores que armazenam e processam 100 petabytes de dados da web (páginas da web, links entre eles e o índice de pesquisa). Cada servidor usa pelo menos 2 conexões de 100 GB. Alguns servidores usam várias placas de GPU para treinar grandes modelos de transformadores. Antes do final do ano, a Ahrefs planeja abrir um data center nos Estados Unidos.

Objetivo final do Ahrefs?

Em 2019, Gerasymenko disse que o objetivo de seu então hipotético mecanismo de busca era atrair a atenção de uma empresa maior (por exemplo, a Microsoft) que pudesse se dar ao luxo de levar a ideia à escala.

“Considerando que a plataforma gera apenas uma fração da receita de US$ 120 bilhões da empresa, a organização poderia facilmente reformular o Bing sob um modelo de participação nos lucros. É minha previsão que o sentimento público positivo por si só teria um ROI maior do que a receita de anúncios existente. Se tivermos sucesso em nossos empreendimentos, o Google finalmente terá uma concorrência há muito esperada pelas buscas.”

Dmytro Gerasymenko, CEO da Ahrefs, “Dinheiro do investidor versus interesse público: o Google falhou em construir uma plataforma não-mal?“

Sim resultados de pesquisa

As páginas de resultados de pesquisa (SERPs) do Yep são mínimas. Não está exatamente no nível dos velhos tempos de 10 links azuis, mas não está longe disso.

Suas opções são resultados da web ou de notícias.

Há também caixas de “conhecimento” no lado direito de alguns SERPs, apresentando conteúdo retirado da Wikipedia, sobre sua pesquisa.

Aqui está um exemplo de pesquisa para [apple wwdc]:

Você notará que a página Apple Events recebe seis sitelinks. Muitos dos outros resultados também têm links adicionais no snippet de pesquisa.

E os resultados das notícias para [apple wwdc]? Bem, parece que algo deu errado:

O Yep também oferece a opção de tentar a mesma pesquisa em outros mecanismos de pesquisa - Google, Bing, Mojeek e DuckDuckGo.

Importante: o primeiro resultado orgânico para todos os outros quatro mecanismos de busca é a página oficial da WWDC da Apple, ao contrário do Yep. Isso é uma falha. E os resultados do Yep são muito mais obsoletos do que todos os concorrentes que ele aponta, além dos do Mojeek (que são bastante atrozes).

Para comparação, veja como são:

Os resultados [Apple WWDC] para Google, Bing e DuckDuckGo são todos muito mais recentes, apresentando links para notícias dos últimos minutos ou horas, publicadas pela CNN, CNBC, MacRumors, TechCrunch e outros.

Conclusão: a versão simplificada dos resultados de pesquisa da Yep não é um problema. E se você não se importa com novos resultados, talvez esses resultados sejam aceitáveis ​​– especialmente onde esse é um termo de pesquisa amplo. Mas, claramente, o Yep tem algum trabalho pela frente antes que seja uma alternativa séria e convença os pesquisadores a usá-lo no Google – ou ajudar qualquer criador a ganhar mais do que trocados.

Mais por vir

Entrei em contato com a Ahrefs para responder a várias outras perguntas sobre seu mecanismo de busca. Atualizarei conforme essas respostas chegarem.