Plan du site:

plan du site est un moyen plus fiable pour guider la crawler pour explorer des pages qui sont importantes. En général, les administrateurs du site créeront plan du site pour votre site et le rendre disponible en lien direct robots.txt. Mise à jour du site de expertrec est indiqué ci-dessous.

 

Ajouter plusieurs sitemaps à l'index

Pour ajouter une autre url plan du site, Cliquez sur “Ajouter plus sitemaps” bouton et suivez les mêmes règles d'URL pour ajouter un nouveau plan du site urls. Il suffit de ne pas oublier de mettre à jour votre sitemap chaque fois que vous créez de nouvelles pages ou messages sinon ces documents Web ne viendront pas aux résultats de recherche.

Règles pour les sitemaps:

  1. localhost(127.0.0.1) urls : Si vous avez un site en cours d'exécution dans votre système local, alors il ne sera pas accessible par Internet. Donc, plan du site de ces urls ne sera jamais accessible par crawler Expertrec et sera mis au rebut.
  2. Plan du site du site de mise en scène: site Mise en scène qui est clone de votre site de production est destiné à un usage interne. index de recherche de construction au-dessus du site de la mise en scène n'est pas utile si son recommandé de ne pas mettre du site de sites de mise en scène.
  3. Site Intranet Plan du site: sites Intranet sont disponibles dans votre réseau d'entreprise uniquement. Plan du site d'un tel site inaccessible ne sera pas considéré par crawler Expertrec.
  4. Urls absolue à l'intérieur du site: Urls à l'intérieur du site ne devrait pas être partielle. Il est recommandé de mettre urls absolue dans le plan du site au lieu de simplement mettre le chemin relatif.

crawler Expertrec vous permet de contrôler urls dans la section plan du site via des options ci-dessous:

  1. Appliquer un filtre sur site
  2. explorer uniquement Plan du site

1. Appliquer un filtre sur site:

Filtres sur plan du site

Par défaut urls présent dans sitemap seront considérés pour l'exploration. Si vous avez besoin d'un filtre au-dessus de urls présents à l'intérieur du site, c'est une option pour vous. #filtre montre différentes façons de filtrer sur ou considérer urls.

2. Vide sanitaire uniquement plan du site

explorer uniquement plan du site

Si vous voulez que le robot d'exploration pour coller à tout urls présents dans le plan du site, crawler expertrec peut être chargé via cette option. En activant cette option, robot ne tiendra pas toutes les urls nouvellement découverts et gardera la liste rampants comprenant urls mentionnés dans urls plan du site. Si votre sitemap est d'avoir tous les liens vers des documents Web attendus, puis activez cette option.