Um arquivo robots.txt pode impedir motor de pesquisa indexadores de acessar todo o seu site ou partes do mesmo e adicioná-lo ao índice. Se você não quiser bloquear o seu site apareça nos resultados de busca mais, você excluir o arquivo robots.txt para permitir crawlers para indexar seu site novamente.
Abra o seu navegador de Internet e conectar a interface do gerenciador de arquivos do seu host. Você pode encontrar um link para a interface, junto com seu nome de usuário e senha, no e-mail de boas-vindas que você recebeu após a compra de sua conta de hospedagem.
Procure um arquivo chamado "robots.txt" no diretório raiz do seu servidor. O diretório raiz é o diretório primário que normalmente contém o "index.html" ou arquivo "index.php" de sua página inicial.
Clique para selecionar o arquivo "robots.txt" e clique no botão "Excluir". O procedimento para excluir o arquivo pode variar de acordo com a interface específica do gestor da sua empresa de hospedagem de arquivos.
Como excluir cobian backup
Como remover um link da web no yahoo!
Como adicionar o meu site para lycos
Como editar minha página com cpanel