O trabalho dos motores de busca

O mecanismo de busca moderno é um complexo completo que consiste em programas e algoritmos mais complicados que trabalham com uma velocidade surpreendente. Imagine, o novo algoritmo de pesquisa A cafeína do Google é capaz de processar informações equivalentes a 3 km de folhas A4 em apenas 1 segundo!

Em todos os motores de busca, os componentes de software podem ser divididos em cinco grupos principais:

• "Aranhas"


• "Aranhas viajando"


• indexadores


• bases de dados


• sistemas de resultados

Aranhas - aranhas (aranhas) - pelo algoritmo de seu trabalho se assemelham a navegadores, mas não possuem componentes visuais. A aranha carrega o código html da página usando protocolos http.

Uma solicitação de robô para o servidor inclui um comando"Obter / caminho / documento" e alguns outros comandos de solicitação http. Para este pedido, a aranha recebe uma resposta do servidor como um fluxo de texto contendo as informações do serviço sobre o documento e o próprio documento. A aranha é uma parte do módulo de indexação para motores de busca.

"A aranha viajadora" - rastreador - é outro componentemódulo de indexação. O Crawler navega automaticamente através de todos os hiperlinks que foram encontrados pela aranha na página e, assim, buscam documentos que ainda não são conhecidos pelo mecanismo de pesquisa.

Robot-Indexer (indexador) trabalha diretamente com o conteúdo das páginas carregadas por robôs de aranha. O indexador realiza uma análise morfológica e léxica das páginas, dividindo-as em partes separadas.

Bases de dados (banco de dados) são softwares especiais projetados para armazenar documentos indexados coletados e indexados por componentes.

Mecanismo de resultados do mecanismo de pesquisa - o sistema para emitir resultados é um dos mais importantescomponentes do motor de busca. É com o sistema de saída que o usuário final está lidando, que entra na consulta na cadeia de pesquisa. O sistema de produção de resultados com base em mais de duzentos critérios diferentes executa a seleção dos resultados mais satisfatórios dos objetivos de pesquisa.

O algoritmo de tal seleção geralmente é chamado de algoritmo ou mecanismo de classificação. Para evitar a fraude por parte dos webmasters para influenciar os resultados da emissão, os mecanismos de busca de algoritmo de classificação exata são mantidos no segredo mais rigoroso.

No entanto, há uma série de critérios conhecidos que são levados em consideração no trabalho dos motores de busca, otimizando o que o webmaster pode "legalmente" influenciar os resultados da pesquisa. Por exemplo, O mecanismo de pesquisa ao analisar a página leva em consideração:

• se existe uma palavra-chave no título da página (Título)


• A palavra-chave aparece no URL da página?


• se há uma palavra-chave nos cabeçalhos H1-H6, tags STRONG, B, EM, I


• Qual é a densidade das palavras-chave na página (Densidade)


• A palavra-chave existe nas meta tags: palavras-chave, descrição


• Existem links internos e externos na página?

O usuário interage com o mecanismo de pesquisa através do servidor de pesquisa. Consulta de pesquisa recebida do usuárioO servidor processa e passa o módulo de classificação como entrada para o parâmetro. Por sua vez, o módulo realiza o processamento de documentos, informações sobre quais são armazenados no banco de dados do sistema de pesquisa e faz uma avaliação das páginas correspondentes ao pedido do usuário.

Em seguida, o sistema gera snippet - informações de texto que são exibidas para o usuário na forma de SERP (Search Engine Result Page) - páginas de resultados de pesquisa.

Assim, mesmo uma breve descrição do principalOs princípios do trabalho dos sistemas de busca mostram quão estreitamente todos os componentes de software do sistema estão interconectados uns com os outros e com o bom funcionamento do mecanismo de pesquisa e funcionam claramente para fornecer ao usuário a informação mais rápida e confiável em sua consulta de pesquisa.