Pages de l'index. Qu'est-ce que l'index a besoin d'un index? Plugins et expansion

Temps de lecture: 11 minutes (s)

Les modifications techniques des exigences de référencement et l'optimisation de la structure du site sont primordiales dans la promotion de la ressource, mais si les moteurs de recherche ne le savent pas, il n'est pas indexé, la promotion est impossible.

Quelle est l'indexation? Cela ajoute des robots de recherche collectés des informations sur la ressource de la base de données. Les classements supplémentaires sont survenus par des pages indexées. Nous offrons des moyens simples et compréhensibles de vérifier les pages «voir» des moteurs de recherche.

Considérez chaque option plus en détail.

1. Vérification de l'indexation du site via le panneau Yandex.Vebaster et la console de recherche Google

Manière libre et fiable en utilisant des services pour webmasters.

Yandex.vebmaster

Après avoir passé la vérification, allez au panneau et cliquez sur l'onglet "Indexing" - "Pages à la recherche". Il existe des pages de sites Web impliquées dans la recherche de Yandex.

De plus, le nombre de pages téléchargées et indexées peut être consulté dans le service sur la page Mes sites.

Pour analyse, la liste des pages peut être téléchargée à partir du fichier de service dans formats.xls i.csv.

Console de recherche Google.

De même, le webmaster Yandex passe par autorisation dans compte google, Nous entrons dans le service https://search.google.com/search-console/about?hl\u003dru, entrez l'URL du site et appuyez sur le bouton "Ajouter une ressource".

Après avoir confirmé le droit de vérifier l'indexation des ressources dans le panneau Google Webmaster, allez à l'onglet "Index" - "Revêtement".

Il convient de garder à l'esprit que les informations de la console de recherche Google sont approximatives, car le rapport affiche les statistiques après le dernier contexte, c'est-à-dire que le nombre de pages peut être différent à la vérification actuelle.

Exemples d'indexation du site

2. Vérifiez le nombre de pages indexées dans PS à l'aide des opérateurs

L'application d'un document de document «site» est possible de voir un nombre approximatif de pages dans l'index. Pour utiliser cette option, entrez dans la chaîne de recherche "Site: Address_Named_Site", par exemple "Site: https: //www.bordur32.ru".

3. Analyse de l'indexation du site avec des plug-ins et des extensions

Pour ne pas entrer dans la barre de navigateur avant l'URL utilise cette méthode automatisée. Téléchargez un bookmarket gratuit pour un navigateur (un script de petite taille, enregistré dans les signets) et cliquez sur une icône spéciale étant sur le site.

4. Suivi des pages indexées à l'aide de services en ligne

Une autre façon de tester l'indexation est l'utilisation de ressources tierces. Par exemple, nous nous tournons vers le site A.PR-CY.RU Entrez l'URL et cliquez sur "Analyser".

L'indexation du site peut être vérifiée dans d'autres services, par exemple: Seogadget.ru, Xseo.in et autres.

5. Programmes d'indexation du site

Il y a gratuit (auditeur de site) et programmes rémunérés (Sarnonitor) pour analyser le site et vérifier les pages de l'index. Choisi logiciel Téléchargez et installez sur PC. Dans la chaîne d'entrée, ajoutez une URL du site en cours de vérification.

Vérifiez la page d'indexation

Parfois, il est nécessaire non seulement de savoir combien de pages sont indexées dans YANDEX et Google, mais il est également nécessaire de déterminer si une page particulière est indexée. Cela peut être fait de la manière suivante:

1. Dans le panneau Webmasters:

2. Opérateur "URL"

Dans la barre de recherche, nous entrons dans un opérateur spécial. La requête ressemblera à ceci: "URL: adresse_starter.

3. Opérateur "Info"

À la recherche système Google Vous pouvez utiliser l'opérateur "Info". La demande de la barre de recherche sera la suivante: "Info: adresse_starting_starting"

Pourquoi le site peut ne pas indexer

Idéalement, les pages de la ressource doivent être indexées et leur nombre dans moteurs de rechercheah devrait être approximativement le même. Mais cela n'arrive pas toujours. Considérez les raisons de l'indexation interférente du site.

Erreurs dans le fichier robots.txt

Le fichier robots.txt est document texte Dans le format.txt, mené dans le répertoire racine du site Web, interdisant ou permettant des pages d'indexation des robots PS. Par conséquent, une utilisation incorrecte des directives peut se terminer d'indexer tout le site ou pages séparées Ressource.

Pas de fichier sitemap.xml

Plan du site (Sitemap.XML Fichier) est un document spécial situé dans le répertoire racine contenant des liens vers toutes les pages de ressources. Ce fichier permet de rechercher des robots rapidement et d'indexer efficacement la ressource. Par conséquent, il est nécessaire d'ajouter uniquement les pages qui doivent entrer dans l'index.

Nouveau site web

Le processus d'indexation d'une nouvelle ressource prend un certain temps. Par conséquent, dans ce cas, il vous suffit d'attendre, sans oublier de contrôler le processus d'indexation.

Paramètres privés

Dans certains CMS, tels que WordPress et Megagroup, il est possible de cacher à partir de l'indexation de la page via le panneau Admin Site, ces paramètres peuvent rester par défaut.

Étiquette "noindex"

Les pages peuvent être fermées à partir de l'index dans le code à l'aide du nom de la balise méta \u003d "robots" content \u003d "noindex, nofollow" /\u003e. Vous devez vérifier et supprimer du code, soit remplacer "l'index" et "foll".

Pages à épousseter

Une autre raison peut être un grand nombre de pages à ordures qui ne fournissent pas de contenu utile et unique sur le site. Ces pages doivent être proches de l'indexation de manière à ce qu'il n'y ait aucun problème avec l'indexation des ressources et le robot n'a pas passé de temps à visiter ces pages.

De plus, la raison de la non-indexation des pages de ressources peut être des erreurs de numérisation, verrouillage du site dans le fichier.htaccess, des pages en double, pas un contenu unique, une hébergement de disponibilité basse, une vitesse de téléchargement de site lente, des bannies et des filtres PS.

Conclusions du spécialiste du référencement du centre Web

L'objectif principal que le propriétaire du site et le spécialiste de la référencement pour atteindre l'indexation des bonnes pages Ressource. Pour ce faire, vous devez surveiller régulièrement les pages de la recherche de Yandex et Google, consultez les services des webmasters pour des erreurs sur le site, remplissez-la avec un contenu unique et utile, suivez et optimisez la vitesse du chargement des ressources.

Pour accélérer le processus d'indexation, vous devez confirmer les droits sur le site de Yandex.Vebaster et Google Rechercher la console et placez un lien vers le fichier Sitemap.xml, vous pouvez également envoyer des pages de ressources importantes.

Index des moteurs de recherche - une base de données spéciale dans laquelle les informations collectées par des robots de recherche à partir de pages de site sont entrées. Cela prend en compte le contenu textuel, les références internes et externes, le graphique et certains autres objets. Lorsque l'utilisateur spécifie la demande du moteur de recherche, la base de données appelle. Après cela, le classement sur la pertinence est effectué - la formation d'une liste de sites lorsqu'elles diminuent leur importance.

Quelle est l'indexation

Le processus d'ajout des robots des informations collectées dans la base de données est appelée indexation. Ensuite, les données d'une certaine manière sont traitées et un index est créé - de la compression des documents. Le processus de remplissage de l'indice est effectué de deux manières: manuellement ou automatiquement. Dans le premier cas, le propriétaire de la ressource doit ajouter de manière indépendante une URL de ressource Web dans un formulaire spécial, qui a Yandex, Google et d'autres moteurs de recherche. Dans le deuxième robot, le site lui-même trouve systématiquement par des liens externes à partir d'autres plates-formes ou à la numérisation d'une carte de fichier SITEMAP.XML.

Les premières tentatives d'indexation des ressources Web ont été effectuées au milieu des années 90 du siècle dernier. Ensuite, la base de données était semblable au pointeur de fond habituel qui contenait mots cléstrouvé par des robots visités par eux sites. Depuis près de 30 ans, cet algorithme était considérablement amélioré et compliqué. Par exemple, les informations avant d'entrer dans l'index sont traitées selon les algorithmes de calcul les plus complexes avec l'implication de l'intelligence artificielle.

Pourquoi l'index des moteurs de recherche

Les pages de site d'indexation font partie intégrante du travail des moteurs de recherche (non seulement Google et Yandex, mais également tous les autres). La base obtenue dans le processus de numérisation des ressources Web est utilisée pour former une émission pertinente. Robots de moteurs de recherche de base:

principale- analyse tout le contenu sur le site et ses pages individuelles;
vite - index uniquement nouvelle informationqui a été ajouté après la prochaine mise à jour.

Il existe également des robots pour indexer la bande RSS, les images, etc.

Lorsque vous visitez pour la première fois, tous les nouveaux sites entrent dans la base de données s'ils conviennent aux besoins du moteur de recherche. Au cours d'une visite, les informations ne sont complétées que par les détails.

Vitesse d'indexation de la page

Plus la page est plus rapide ajoute à l'index, meilleure pour la ressource Web. Toutefois, les robots de recherche ne peuvent pas effectuer une telle quantité de travail aussi souvent que le contenu du site est mis à jour. L'indexation de Yandex prend en moyenne une ou deux semaines et dans Google - plusieurs jours. Afin d'accélérer l'indexation des ressources pour lesquelles les informations rapides de la base de données sont très importantes (portails de presse, etc.), un robot spécial visitant de tels sites de une à plusieurs fois par jour est appliqué.

Comment vérifier l'indexation dans Yandex et Google

Utilisez des informations à partir du panneau WebMaster. Dans la liste services Google Ouvrez la console de recherche, puis passez à la section Index Google. Information nécessaire sera dans le bloc "Statut d'indexation". Dans Yandex.Vulmaster, vous devez vous rendre à la chaîne suivante: "Indexation du site" - "Pages à la recherche". Une autre option: "Indexation du site" - "Historique" - "Pages à la recherche".

Définir la recherche sur le site en utilisant des opérateurs spéciaux. Pour ce faire, utilisez la demande avec le design "Site:" en spécifiant l'adresse de votre ressource en format complet. Vous apprendrez donc le nombre de pages indexées. Des divergences graves dans des valeurs (jusqu'à 80%) obtenues dans différents moteurs de recherche, parlent de la présence de problèmes (par exemple, une ressource Web peut être sous le filtre).

Installer des plugins spéciaux et des signets. Ce sont de petits ajouts de navigateur qui vous permettent de vérifier le chèque d'indexation du site. L'un des plus populaires parmi eux est RDS Bar.

Comment accélérer l'indexation

Plusieurs facteurs affectent directement le taux d'indexation du site:

aucune erreur qui ralentit le processus de collecte d'informations au robot de recherche;
autorité des ressources;
fréquence de mise à jour du contenu sur le site;
fréquence d'ajout de nouveau contenu sur le site;
niveau de nidification de page;
dossier correctement rempli sitemap.xml;
restrictions dans robots.txt.

Pour accélérer l'indexation du site, exécutez un certain nombre de règles:

choisissez un hébergement rapide et fiable;
configurez les robots.txt en définissant les règles d'indexation et en supprimez les interdictions inutiles;
débarrassez-vous des doubles et des erreurs dans le code de page;
créez une carte de site Sitemap.xml et enregistrez le fichier dans le dossier racine;
si possible, organisez la navigation afin que toutes les pages soient en 3 clics de la principale;
ajoutez une ressource dans le panneau Yandex et Google WebMakers;
faire perelinovka intérieure pages;
enregistrer un site en cotes faisant autorité;
mettre à jour régulièrement le contenu.

De plus, nous recommandons d'évaluer le volume d'éléments flash en termes d'impact sur la promotion. La présence d'objets visuels de ce type réduit considérablement la proportion de trafic de recherche, car elle ne permet pas aux robots d'effectuer une indexation au maximum. Aussi pas un hébergement souhaitable information clé Dans les fichiers PDF enregistrés d'une certaine manière (seul le contenu du texte du document peut être numérisé).

Les moteurs de recherche pour un certain nombre d'index de raisons ne sont pas toutes les pages de site ou, au contraire, ajoutent index indésirable. En conséquence, il est pratiquement impossible de trouver un site qui coïnciderait le nombre de pages de Yandex et de Google.

Si la divergence ne dépasse pas 10%, cela ne fait pas toutes attention. Mais cette position est valable pour les sites de support et d'information, lorsque la perte de la petite partie des pages n'affecte pas la participation totale. Mais pour les magasins en ligne et d'autres sites commerciaux, le manque de pages de produits de base dans la recherche (même l'une des dix) est une perte de revenu.

Par conséquent, il est important au moins une fois par mois de vérifier l'indexation des pages de Yandex et de Google, comparez les résultats, détectez quelles pages manquent dans la recherche et agissent.

Problème dans la surveillance de l'indexation

Voir les pages indexées n'est pas difficile. Vous pouvez le faire en déchargement des rapports dans les panneaux de webmasters:

("Indexation" / "pages dans la recherche" / "toutes les pages" / "Tableau de téléchargement XLS / CSV");

Caractéristiques de l'outil:

vérification simultanée des pages indexées dans Yandex et Google (ou dans un PS);
la possibilité de vérifier à la fois toute l'URL du site par la carte XML;
aucune limite sur le nombre d'URL.

Caractéristiques:

travail "dans le nuage" - n'a pas besoin de télécharger et d'installer des logiciels ou des plugins;
télécharger des rapports au format XLSX;
notification sur le poste d'obtention du diplôme de la collecte de données;
signaler le stockage Unlimited Time sur le serveur PROMOPULT.

Comment savoir rapidement si la page est importante pour vous à l'index du moteur de recherche? Et en général, combien de pages de site "Voir" moteurs de recherche? J'ai décrit les moyens de ce post, qui utilisent le plus souvent des spécialistes du référencement et préparé un bonus pour les lecteurs.

Lors de l'indexation de la page, le robot du moteur de recherche ajoute des informations sur le site à la base de données. Une recherche supplémentaire se produit sur les pages indexées. Ne confondez pas l'indexation et la numérisation.

Le robot peut analyser l'ensemble du site rapidement. Et ajouter à l'index lentement, n'ajoutez pas une partie des pages ni de la suppression des pages de l'index.

1. Vérifiez l'indexation dans le panneau WebMaster

Ceci est une méthode de vérification de base pour le webmaster ou le propriétaire du site Web.

Google. Il est nécessaire d'aller à B. Console de recherche. Et sur l'onglet Index Google, sélectionnez "Statut d'indexation".

Yandex. Nous passons à l'autorisation de Yandex.Pasport, allez à Yandex.Vastmaster et passons par le chemin "Indexation du site" - "Pages de la recherche". Une autre option: "Indexation du site" - "Historique" - "Pages à la recherche". Ici, vous pouvez voir la dynamique des modifications du nombre de pages dans la recherche.

Pour utiliser cette méthode, vous devez avoir un certain niveau d'accès au panneau WebMaster. Un exemple d'indexation d'un bon site. La quantité de pages de qualité augmente et ils sont ajoutés à l'index.
Les problèmes d'indexation ressemblent à ceci:

Dans la capture d'écran - le site, fermé de l'indexation dans le fichier robots.txt

Vous voulez en savoir plus sur la recherche de recherche? Abonnez-vous à la newsletter:

Envoyer

Nos abonnés reçoivent toujours plus.

2. Utilisez les opérateurs dans les requêtes de recherche

Les opérateurs de recherche vous permettent de spécifier les résultats de la recherche. Le «Site:« Opérateur émet des informations sur le nombre approximatif de pages indexées. Pour vérifier la chaîne recherche Google Ou Yandex entrez "Site:".

Par exemple, le site Cubing.com.ua est sous le filtre de AGS.

Utilisant outils supplémentaires Recherche, vous pouvez trouver les données d'indexation pendant une certaine période. Donc, au cours de la dernière heure, 49 pages de Wikipedia de langue russe sont apparues dans l'index Google:

3. Utilisez des plugins et des signets

Plugins et signets (petits programmes JavaScript stockés sous forme de signets de navigateur) - Option de vérification automatisée. Dans ce cas, vous n'avez pas besoin d'ouvrir un moteur de recherche séparément et d'entrer quelque chose dans la recherche.

Ceci est fait des plugins et des scripts:

Netpeak Spider vous permet de numériser tout le site. De plus, vous obtenez non seulement des informations sur le nombre de pages de l'index, mais aussi une liste de ces pages, ainsi que beaucoup de données supplémentaires: canonique, code de réponse, titre, titres, méturaure, méta robots, robots.txt , redirections, liens internes et externes et autres. En outre, le programme met en garde sur les erreurs dans ces données.

Dès que la liste de toutes les URL du site a été reçue, elle peut être téléchargée sur Netpeak Checker et vérifiez déjà directement le fait de l'indexation par les moteurs de recherche.

Pourquoi le site n'est-il pas indexé?

1. Nouveau site. Parfois, vous avez juste besoin d'attendre. Les pages de l'index ne tombent pas et ne sont pas immédiatement. Souvent, ce processus est étiré pendant plusieurs mois.

2. Pas de carte de site (Plan du site). Une carte de site de haute qualité aidera à rechercher des robots à disperser et à indexer votre site Web. Le lien vers la carte doit être ajouté au panneau WebMaster.

3. Erreurs sur le site. Les panneaux de webmasters avertissent régulièrement les propriétaires de sites d'erreur. Remarqué le problème dans l'indexation? Voyez quelles erreurs trouvent un robot et corrigez-les.

Une erreur fréquente avec un changement inconscient de paramètres CMS ou d'hébergement. La ligne suivante apparaît dans le code de la page du site:

5. Erreur avec robots.txt. Conseille souvent de fermer tout inutile dans robots.txt. La fonctionnalité du fichier robots.txt est qu'un symbole supplémentaire peut devenir un site d'indexage en fermé. Même si vous étiez correctement fermé une partie du site, il était possible de accrocher les choses nécessaires qui sont plus profondes. Votre site est fermé de l'indexation si vous voyez dans vos robots.txt cette conception:

Agent utilisateur: * Interdit: /

conclusions

Le propriétaire du site est que toutes les pages ouvertes à l'indexation étaient dans l'index des moteurs de recherche. Il est difficile de le réaliser. En outre, il est important de suivre le processus d'amélioration des pages à l'index: des modifications strictes de côté positif ou négatif - un signal sur le problème. Nous avons décrit quatre façons de vérifier l'indexation du site:

Dans les panneaux Google Webmaster et Yandex.
Passant par opérateur de recherche "Placer:".
Avec l'aide de plugins, comme RDS Bar et Burkarklets.
Dans des services spéciaux, tels que Netpeak Spider.

Souvent, ce n'est pas d'indexation, mais dans l'approche de l'optimisation. Voulez-vous indexer et classer - répondre à la demande de l'utilisateur est préférable. Dans ce cas, tout décrit ci-dessus n'aura besoin que de réparer un bon résultat.

P.s. Bonus pour ceux qui lisent :)

Gardez la table par laquelle je travaille avec des sites d'indexation. Comment travailler avec une table?

Faire une copie.
Sélectionnez une zone de domaine.
Charge jusqu'à la colonne et la liste des URL.
Attendez les résultats (plus les adresses, plus il est nécessaire d'attendre).

En conséquence, nous obtenons une telle photo aussi:

Ensuite, vous pouvez sélectionner les colonnes B, C et copier les données aux deux colonnes adjacentes. Vous enregistrez donc les résultats à la date actuelle de la comparaison avec les résultats de l'indexation à un moment donné. Mais une autre table pour la fixation des résultats de l'émission du "Site:" Opérateur pour Yandex. L'instruction est simple:

Sélectionnez une zone de domaine.
Choisissez une région.
Entrez la requête (adresse du site).
Mettez "1" si vous voulez obtenir l'adresse et le titre.
Entrez le nombre de pages émettrices que vous souhaitez enregistrer (de 1 à 100).

Avec cette assiette, j'ai souvent trouvé le titre de problème ou pages supplémentaires dans l'index.

L'indexation du site Web dans les moteurs de recherche est importante pour chaque webmaster. Après tout, pour une promotion de la qualité de la qualité du projet, elle devrait être suivie de son indexation. Je vais décrire le processus de vérification de l'indexation dans Yandex.

Indexation dans Yandex.

Le robot de Yandex Jour après jour examine les sites à la recherche de quelque chose de "délicieux". Collecte dans le top émettant ces sites et pages qui, à son avis, sont les plus mérités. Bien, ou juste yandex si recherché, qui le connaît

En tant que véritable webmaster, nous adhérerons à la théorie que le meilleur site est fait, plus sa position et plus de trafic.

Vous pouvez vérifier l'indexation du site à Yandex de plusieurs manières:

en utilisant des webmasters Yandex;
en utilisant les opérateurs de moteur de recherche;
avec l'aide d'extensions et de plugins;
avec l'aide de services en ligne.

Pages de site d'indexation dans le webmaster Yandex

Pour comprendre ce que le moteur de recherche est accumulé sur notre site, vous devez vous rendre à notre webmaster Yandex préféré dans la section "Indexing".

Statistiques sur les marques dans le webmaster Yandex

Pour commencer, allons aux statistiques sur les points. La section vous permet de déterminer quelles pages de votre site Bypass Robot. Vous pouvez identifier les adresses que le robot n'a pas pu charger en raison de l'indisponibilité du serveur sur lequel le site est situé ou en raison d'erreurs dans le contenu des pages elles-mêmes.

La section contient des informations de page:

nouveaux pages qui ont récemment comparu sur le site ou le robot qu'ils viennent de se sont vus tout autour;
les changements - les pages que le moteur de recherche Yandex avait déjà vu, mais ils ont changé;
historique de dérivation - Nombre de pages qui ont contourné Yandex, en tenant compte du code de réponse du serveur (200, 301, 404 et d'autres personnes).

Le graphique reflète nouveau (vert) et modifié ( couleur bleue) pages.

Et ceci est un horaire d'histoire de dérivation.

Cet article montre les pages que Yandex trouvées.

N / A - URL n'est pas connu du robot, c'est-à-dire Le robot ne l'a pas rencontrée auparavant.

Quelles conclusions à partir des écrans peuvent être faites:

Yandex n'a pas trouvé l'adresse / Xenforo / XenForostyles /, qui, en fait, est logique, car Cette page n'est plus.
Yandex a trouvé l'adresse / bystrye-ssylki-v-yandex-webmaster /, qui est également assez logique, car Nouvelle page.

Donc, dans mon cas, au webmaster Yandex reflété ce que je m'attendais à voir: ce qui n'est pas nécessaire - Yandex supprimé et ce qui est nécessaire - Yandex ajouté. Donc, en se passant, tout est bon, il n'y a pas de serrures.

Pages à la recherche

La recherche de la recherche est en constante évolution - de nouveaux sites sont ajoutés, anciens sont supprimés, les lieux sont ajustés dans l'extradition et ainsi de suite.

Informations dans la section "Pages dans la recherche" que vous pouvez utiliser:

suivre les changements dans le nombre de pages de Yandex;
pour suivre des pages ajoutées et exclues;
clarifier les raisons de l'exclusion du site à partir de résultats de recherche;
pour plus d'informations à la date des visites sur le moteur de recherche de site;
pour plus d'informations sur la modification des résultats de la recherche.

Pour vérifier l'indexation des pages et vous avez besoin de cette section. Ici Yandex Webmaster montre des pages ajoutées à Émission de recherche. Si toutes vos pages sont ajoutées à la section (Nouveau sera ajouté pendant la semaine), alors cela signifie que tout est en ordre avec les pages.

Vérifiez le nombre de pages dans l'index Yandex à l'aide des opérateurs

En plus des webmasters Yandex, vérifiez l'indexation de la page à l'aide des opérateurs directement dans le moteur de recherche lui-même.

Nous utiliserons deux opérateurs:

"Site" - recherche de tous les sous-domaines et pages du site spécifié;
"Hôte" - Recherche par pages placées sur cet hôte.

Nous utilisons le "site" de l'opérateur. Avis, il n'y a pas d'espace entre l'opérateur et le site. 18 pages sont dans la recherche de Yandex.

Nous utilisons l'opérateur "hôte". 19 pages indexées par Yandex.

Vérifiez l'indexation à l'aide des plugins et des extensions

Vérifiez l'indexation du site à l'aide de services

Il y a beaucoup de services de ce type. Je vais vous montrer deux.

Serphunt.

Serphunt - Service en ligne pour analyse de site. Ils ont outil utile Vérifier les pages d'indexation.

Dans le même temps, vous pouvez vérifier jusqu'à 100 pages du site pour deux moteurs de recherche - Yandex et Google.

Cliquez sur "Démarrer le chèque" et après quelques secondes, nous obtenons le résultat: