Como os (crawl, bot, spider) encontram sites criados recentes

Olá pessoal,

Como vão?

Eu queria tirar uma dúvida, pois sei que muitos aqui tem experiencia e podem tirar a minha dúvida.

A dúvida é a seguinte, como os bots dos sites de buscas que rastreiam os sites e indexam em seu índice como por exemplo o do google (Googlebot), descobre e indexa um site que ainda não enviou o sitemap ou fez o cadastro no painel de webmaster do google? por exemplo, acabei de criar um site e não mandei meu sitemaps para o google e nem fiz o cadastro do meu site no painel de webmaster do google, mas o google já achou meu site e já indexou no índice dele. Como isso acontece, se eu não informei nada para eles saberem que o meu site existe?

Abraços!

Os webcrawlers do Google não buscam apenas páginas cadastradas diretamente no Google, mas também escaneiam sites existentes em busca de alterações e novos links para buscar. É difícil determinar com exatidão mas, se em alguma página pública existe um link para o seu site, é possível que o Google tenha localizado seu site e adicionado ao seu índice.

Abraço.