Quel est robots.txt ?
robots.txt est un dossier des textes qui peut être employé pour limiter des robots de Web à accéder à votre site Web seulement des manières dont vous approuvez.
Ce dossier de robots.txt bloque Imagebot de Google du site Web entier :
Utilisateur-agent : La Googlebot-Image rejettent : /
Pour plus d'information sur robots.txt, lire une norme pour l'exclusion de robot.
Vérifier la syntaxe de votre robots.txt
Plusieurs outils Web-basés sont disponibles qui rechercheront le dossier de robots.txt de votre site Web et l'examineront pour déceler les erreurs de syntaxe.
Mauvais robots
Quelques robots de Web épuiseront des quantités considérables de ressources de largeur de bande et de système, tout en renvoyant peu ou pas d'avantage pratique au propriétaire de site Web.
Pour votre convenance, nous maintenons une liste de certains de ces mauvais robots dans le format de robots.txt.
Les plus défunts poteaux de Blog
Chapeau rouge - ordinateur de bureau global à prix réduit
Premières photos de l'édition spéciale du halo 3 de Zune
Windows de nettoyage et de organisation
Morceau à l'avance d'IBM faisant la technologie -- Encore
eStarling - une étape plus près de votre rêve-maison
La terre de Google - maintenant avec des bruits
| Moteur 1 de traduction : |  |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
 |
| Moteur 2 de traduction : | |
|
|
|
|
|
|
|
|
|
|
 |
Signet social cette page
FAQ de édition de Web
- Quels sont des moteurs de recherche ?
- Quel est SEO (optimisation de Search Engine) ?
- Quelles sont des politiques de moteurs de recherche envers SEO ?
- Quel est SERPs ?
- Quel est P.R. (grade de page) ?
- Quel est grade de Web ?
- Quelle est une estimation d'Alexa ?
- Quels sont IBL et OBL ?
- Quel est texte d'ancre ?
- Combien de temps est-ce que je dois attendre Googlebot pour ramper entièrement mon emplacement ?
- Combien de temps est-ce que je dois attendre jusqu'à ma page révèle dans l'index de Google ?
- Combien de temps est-ce que je dois attendre pour être énuméré à DMOZ ?
- Comment est-ce que je choisis les meilleurs mots-clés ?
- Comment est-ce que j'ajoute un dispositif de recherche d'emplacement ?
- Quelle est une carte d'emplacement ?
- Quels sont des sitemaps de Search Engine ?
- Comment est-ce que je fais des liens de Javascript ?
- Quel est l'attribut de " nofollow " de rel= ?
- Combien de temps les URL peuvent-ils être ?
- Comment ose-t-il le contrôle de charme d'I ma page Web ?
- Au cas où j'employer WWW dans mon nom d'emplacement ?
- Où peux-je obtenir le contenu libre pour mon site Web ?
- Quels sont quelques manuscrits d'annuaire de Web ?
- Quels sont quelques manuscrits d'enchère ?
- Quels sont quelques directeurs réciproques de lien ?
- Où peux-je trouver des graphiques de page Web ?
- Quelles sont des étiquettes de méta et importent-elles ?
- Quel est meilleur, _ ou - ?
- Comment est-ce que j'obtiens des liens à ma page Web ?
- À quels moteurs de recherche est-ce que je devrais soumettre ?
- Comment est-ce que je peux trouver des annuaires de Web ?
- Quels sont quelques annuaires des annuaires ?
- Où peux-je soumettre un article pour la publication ?
- Où peux-je soumettre mon communiqué de presse ?
- Ce que webring ?
- Les liens dans les newsgroup aident-ils le P.R. ?
- Les liens de PHP passent-ils le P.R. ?
- Quelles sont de bonnes statistiques de site Web rapportant des outils ?
- Quel est analytics de Web ?
- Comment est-ce que je trouve le PageRank pour ma page ?
- Comment est-ce que je vois les liens d'arrivée pour ma page ?
- Comment est-ce que je peux dépister mes rangs dans les moteurs de recherche ?
- Quels sont les datacenters courants de Google ?
- Quelle est une danse de Google ?
- Comment est-ce que je vois si Google danse ?
- Comment est-ce que je peux trouver des liens cassés ?
- Comment est-ce que je peux valider mon HTML ?
- Comment est-ce que je crée des 301 réoriente ?
- Comment est-ce que je peux empêcher hotlinking ?
- Comment est-ce que j'empêche le téléchargement de mon site Web entier ?
- Quel est Spam de referrer ?
- Quel est robots.txt ?
- Quels sont quelques mauvais robots ?
- Comment est-ce que je bloque Google Autolink ?
- Quels sont des réseaux d'annonce ?
- Que le CPM annonce-t-il ?
- Que CPC annonce-t-il ?
- Que CPA annonce-t-il ?
- Quelle est fraude de clic ?
- Quels sont des programmes de filiale ?
- Est-ce que je peux acheter et vendre des liens ?
- Comment est-ce que j'obtiens une meilleure stat de Google AdSense ?
- Quelles sont des solutions de rechange à Google AdSense ?
- Quel est le chapeau noir SEO ?
- Quelles sont des pages de porte ?
- Que masque ?
- Quel est Spam de referrer ?
- Quelle est une ferme de lien ?
- Quelle est une bombe de Google ?
- Comment est-ce que je rapporte Spam SEO ?
- Comment est-ce que je recherche mieux avec Google ?
- Quel est Googlebot ?
- Quelle est une demande de reinclusion ?
- Les moteurs de recherche classent-ils le flash ?
- Quelle est une baisse d'oublie ?
- Comment est-ce que j'empêche cacher de ma page Web ?
- Où peux-je acheter et vendre des sites Web ?
- Que l'adresse munging ?
- Quel est un emplacement de racleur ?
- Que cybersquatting ?
- Comment est-ce que j'ajoute une liste libre de procuration à ma page Web ?
Menu principal
- Gestion de réseau
- Gestion de réseau physique
- Gestion de réseau de liaison de transmission de données
- Gestion de réseau de couche réseau
- Sécurité de réseau
- Réseaux sans fil
- VoIP
- Téléphonie
- Téléphonie mobile
- Radio
- Télévision
- Cryptology
- Mots de passe
- Cartes magnétiques et futées
- Intimité
- Malware
- Vulnérabilités de logiciel
- Unix
- Microsoft Windows
- Le Web
- Édition de Web
- Transmission de messages instantanée
- Bases de données
- Matériel d'ordinateur
- Unités centrales de traitement
- Mémoire
- Stockage
- Audio
- Satellite
- Java
- IL gestion
- La Science
- Divers
Commentaires