Recommandé par Google pour optimiser l'indexation des pages web, l'utilisation du fichier robots.txt permet de contrôler efficacement, par user-agent, le référencement des pages d'un site web.
Dans le cas d'un blog sous Wordpress, un seul article peut être retrouvé sous plusieures URL. Si vous utilisez l'URL Rewriting, un même article sera ...