COMMENT LES ROBOTS DES MOTEURS DE RECHERCHE VOIENT VOTRE SITE
Autres méthodes de simulation :
1- désactiver les cookies
2- désactiver le javascript
Outils : pour désactiver les cookies , le java , le javascript , les styles CSS etc, utiliser le plugins webdevelopper de Mozilla Firefox ou chrome
les robots araignées qui indexent le web : spiders or crawlers en anglais :
- Googlebot de Google
- Scooter de AltaVista
- OptimalSearch_Bot de Optimal Search
- MSNBot de MSN
- Slurp de Yahoo!
- KB Crawl de KB CRAWL SAS
- OmniExplorer_Bot de OmniExplorer
- TwengaBot de Twenga
- ExaBot de Exalead
- MooveOnBot de mooveon.net
- gloObotBot de gloObot.com
- VerticrawlBot de Verticrawl
- JOBBot de 123-emploi.com
On peut aussi passer par Google Webmaster qui propose une exploration comme Google le fait. C’est une belle expérience !
Thank you for supplying us such important facts!