robots.txt

4La chaleur

3Répondre

Est-il possible d'empêcher les robots des moteurs de recherche d'explorer à l'infini les liens de radiomessagerie dans les résultats de recherche?

Notre équipe de référencement aimerait ouvrir notre page de résultats de recherche dynamique principale aux araignées et supprimer le 'nofollow' des balises meta. Il est actuellement accessible aux ar

18La chaleur

3Répondre

Robots.txt: autoriser uniquement les majors SE

Y a-t-il un moyen de configurer le fichier robots.txt afin que le site accepte uniquement les visites de Google, Yahoo! et les araignées MSN?

4La chaleur

1Répondre

Robots.txt pour interdire tout et autoriser uniquement certaines parties du site/des pages. Est-ce que "allow" est supporté par les robots comme Ultraseek et FAST?

Je voulais juste savoir s'il est possible d'interdire tout le site pour les robots d'exploration et de ne permettre que des pages ou des sections spécifiques? Est-ce que "allow" est supporté par les c

0La chaleur

5Répondre

Comment empêcher robots.txt passant de mise en scène env à la production?

Il m'était arrivé dans le passé que l'un de nos spécialistes en informatique déplacera accidentellement le fichier robots.txt de la mise en scène. Bloquer Google et d'autres d'indexer le site de nos c

5La chaleur

5Répondre

Dois-je me débarrasser des robots qui visitent mon site?

J'ai remarqué sur mes trackers que les robots visitent mon site ALOT. Dois-je changer ou modifier mon fichier robots.txt ou changer quelque chose? Je ne sais pas si c'est bon, parce qu'ils indexent ou