Bienvenue sur Web-News
Re: Exploration de robots.txt par Google 10/01/25 14:33 / Fri, 10 Jan 2025 14:33:21 +0100 Dedibox Discussions
| Sujet | Re: Exploration de robots.txt par Google | ||||||||||||||||||
| De | Earld | ||||||||||||||||||
| Date | Fri, 10 Jan 2025 14:33:21 +0100 | ||||||||||||||||||
| Groupes de discussion | proxad.free.services.pagesperso | ||||||||||||||||||
Le 09/01/25 à 13:45, JC_Et a écrit : > Le 09/01/2025 à 13:18, Earld a écrit : > >> Quelqu'un aurait-il des explications ? > > quel site web ? > Voici le fichier robots.txt. Comme vous voyez, il est très simple. Il ouvre l'accès à tout le contenu du site. User-agent: * Allow: / Plus la ligne du lien vers le sitemap.xml Le problème ne vient pas du site mais probablement d'autorisations données par free. Les pages s'indexent très bien quand Google a accès à robots.txt et aux pages. Il serait bien que d'autres utilisateurs des pages personnelles examinent les rapports Google sur le sujet. | |||||||||||||||||||
| |||||||||||||||||||
