Olá, tudo bem?
Neste artigo vamos explicar como configurar e trabalhar da melhor maneira seu arquivo Robots.txt, em específico dentro da plataforma Tray Commerce.
Robots.txt é o arquivo em formato de texto inserido no site para dar “orientações” aos robôs de busca, ou webcrawlers/spiders.
O robots.txt é de extrema importância para qualquer projeto de website. Com ele você consegue controlar os mecanismos de busca, dizendo se podem ou não entrar em um determinado arquivo ou diretório do site.
Para criar este arquivo é muito simples, existem ferramentas online que vão te auxiliar na hora de gerar o arquivo. Contudo, você também pode criar seu próprio código até mesmo no bloco de notas do seu computador.
Primeiro, acesse seu painel administrativo e vá em Minha Loja > SEO - Indexação da Loja.
Serão apresentados a você três fatores de SEO relacionados ao SEO de seu website (Sitemap, Robots e Metatags). Selecione a opção Robots.
Observação: Para criar um google robots você deve abrir um txt inserir as regras do google, salvar com o nome robots.txt
O robots.txt é um arquivo no qual trabalha através de comandos, e será através desses comandos em que você determinará o que você quer ou não que seja indexado nos resultados de pesquisa dos buscadores.
Regra Padrão:
Regras para bloquear alguma página ou diretório:
Atenção: O comando a seguir irá bloquear toda a indexação das páginas nos resultados do Google.
User-agent: *
Disallow: SEUDOMINIO.commercesuite.com.br/
User-agent: BDCbot
Disallow: /
User-agent: *
Disallow: /loja/carrinho.php*
Disallow: /loja/pag_parcelado.php*
Disallow: /404
Disallow: /cgi-bin/
Disallow: /error_log
Disallow: /loja/busca.php?
Disallow: /*transID*
Disallow: /checkout*
Disallow: /loja/comparador.php
Disallow: /loja/view/404.php
Disallow: /rewrite.asp?404;
Allow:
User-agent: Googlebot-Image
Allow:
User-agent: Mediapartners-Google
Allow:
User-agent: Adsbot-Google
Allow:
User-agent: Googlebot
Allow:
Fácil, não é mesmo?
Criar um robots.txt para o seu site é essencial para que os mecanismos de buscas apresentem corretamente seus conteúdos nos resultados das pesquisas.
Em caso de dúvidas, nos encaminhe um e-mail para suporte@webpeak.com.br
Até a próxima! ;)