Jump to content

Robot.txt y Sitemap


Recommended Posts

Buenos días, estoy empezando con el seo de mi web http://zapatosnoa.es/es/ y quería saber si alguien podía mirarme si esta bien lo que estoy haciendo, para no perjudicar mi web...si alguien es tan amable...que necesitais? el robot.txt es el que genera prestahop por defecto y el sitemap me e bajado el modulo. Gracias por todo.

Share this post


Link to post
Share on other sites
  • 2 months later...

Para revisar tu SEO te recomiendo nibbler o seospidermonkey. Hay más completas, pero son de pago, así que con alguna de estas puedes empezar.

 

Nuevamente no sé si se pueden colocar enlaces en los posts, si se puede, por favor que alguien me confirme :)

Share this post


Link to post
Share on other sites
  • 3 years later...
hace 3 minutos, Mireillelahoud dijo:

Buenos días,

hace poco hice mi web y estoy con el tema del Seo.

Descargué SEO Meta in 1click y analizando me pone que:

Canonical :Canonical URL is not defined.

Robots Tag 

Robots meta tag is not defined.

Buenos días,

hace poco hice mi web y estoy con el tema del Seo.

Descargué SEO Meta in 1click y analizando me pone que:

Canonical :   Canonical URL is not defined.

Robots Tag:   Robots meta tag is not defined.

 

No he tocado los robot.txt, son todavía los originales donde solo me permite lo siguiente:

# robots.txt automatically generated by PrestaShop e-commerce open-source solution
# http://www.prestashop.com - http://www.prestashop.com/forums
# This file is to prevent the crawling and indexing of certain parts
# of your site by web crawlers and spiders run by sites like Yahoo!
# and Google. By telling these "robots" where not to go on your site,
# you save bandwidth and server resources.
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/robotstxt.html
User-agent: *
# Allow Directives
Allow: */modules/*.css
Allow: */modules/*.js
Allow: */modules/*.png
Allow: */modules/*.jpg
Allow: /js/jquery/*
# Private pages

 

 

Todo el resto son Disallow...

Debería modificar algo y como hacerlo en ese caso?

Gracias

(se me cortó el comentario anterior)

Share this post


Link to post
Share on other sites
  • 8 months later...
On 4/22/2020 at 1:04 PM, Mireillelahoud said:

Buenos días,

hace poco hice mi web y estoy con el tema del Seo.

Descargué SEO Meta in 1click y analizando me pone que:

Canonical :   Canonical URL is not defined.

Robots Tag:   Robots meta tag is not defined.

 

No he tocado los robot.txt, son todavía los originales donde solo me permite lo siguiente:

# robots.txt automatically generated by PrestaShop e-commerce open-source solution
# http://www.prestashop.com - http://www.prestashop.com/forums
# This file is to prevent the crawling and indexing of certain parts
# of your site by web crawlers and spiders run by sites like Yahoo!
# and Google. By telling these "robots" where not to go on your site,
# you save bandwidth and server resources.
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/robotstxt.html
User-agent: *
# Allow Directives
Allow: */modules/*.css
Allow: */modules/*.js
Allow: */modules/*.png
Allow: */modules/*.jpg
Allow: /js/jquery/*
# Private pages

 

 

Todo el resto son Disallow...

Debería modificar algo y como hacerlo en ese caso?

Gracias

(se me cortó el comentario anterior)

Buenas @Mireillelahoud!

Por partes que has tocado varias cosas: 

  • Canonical. Si tu web no está sacando la etiqueta canonical, la URL que estás viendo se comporta como canonical. Es decir, si no tiene, se comprota como si la tuviese a sí misma. PrestaSop, almenos las últimas versiones que yo sepa, todo el tema de canonicals ya lo hace correctamente. Las que te deberían de preocupar, son sobre todo las URLs parametrizadas que se te generan en los filtros y en los sistemas de ordenación. 
  • Robots tag. Esto, si no tienes nada definido, le estás diciendo a Google que puede indexar toda tu web. Es decir, si la URL en concreto no tiene meta robots, su comportamiento es que se puede indexar y seguir sus enlaces (index,follow). La meta robots o x-robots-tag, te recomiendo que en general siempre la dejes en index,follow. Si tienes thin content o cosas perjudiciales, habría que ver la mejor manera de excluirlo del índice de Google sin que te afecte a thin content, crawl budget...
  • Robots.txt. Con el que viene por defecto de PrestaShop no tienes que tener problemas. Se puede seguir optimizando el que trae, pero ya es meterte en hilar muy fino con tema de SEO, no necesitas en principio hacerle nada. No obstante, estate atento a las alertas y avisos de exclusiones en Search Console por si se te está indexando algo bloqueado por robtos.txt o tienes algún otro problema derivado de una mala configuración en el robots.txt

Share this post


Link to post
Share on other sites

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!

Register a new account

Sign in

Already have an account? Sign in here.

Sign In Now
×
×
  • Create New...

Important Information

Cookies ensure the smooth running of our services. Using these, you accept the use of cookies. Learn More