Mappa del sito:

Sitemap è un modo più affidabile per guidare crawler di scansione di pagine che sono importanti. In genere gli amministratori di siti web potranno creare sitemap per il tuo sito e renderlo disponibile come collegamento diretto in robots.txt. Aggiornamento del sito di expertrec viene mostrato sotto.

 

Aggiungere più Sitemap per indicizzare

Al fine di aggiungere un altro URL della Sitemap, clic “Aggiungere più Sitemap” pulsante e seguire le stesse regole url per l'aggiunta di nuovi URL sitemap. Basta non dimenticare di aggiornare il sito ogni volta che si creano nuove pagine o messaggi in caso contrario tali documenti web non verranno ai risultati della ricerca.

Regole per Sitemap:

  1. localhost(127.0.0.1) gli URL : Se si dispone di un sito in esecuzione nel sistema locale, allora non sarà accessibile via internet. Così sitemap di tali gli URL non sarà mai accessibile da Expertrec crawler e verrà scartato.
  2. Sitemap del sito di staging: sito di staging che è clone del sito di produzione è destinato solo per uso interno. Costruire indice di ricerca sulla parte superiore del sito di staging non è utile così la sua consiglia di non mettere sitemap di siti di sosta.
  3. sito Intranet Mappa del sito: siti Intranet sono disponibili all'interno della rete aziendale solo. Mappa del sito di un tale sito non raggiungibile, non saranno prese in considerazione dalla Expertrec crawler.
  4. Gli URL assoluti all'interno del sito: URL all'interno del sito non dovrebbero essere parziale. Si raccomanda di mettere URL assoluti nel sito invece di mettere il percorso relativo.

crawler Expertrec permette di controllare gli URL nella sezione del sito via di seguito le opzioni:

  1. Applicare filtro sul sito
  2. strisciare solo Sitemap

1. Applicare filtro sul sito:

Filtri su mappa del sito

Con URL predefiniti presenti nel sito saranno considerati per la scansione. Se avete bisogno di un filtro sulla parte superiore di URL presenti all'interno del sito, questa è un'opzione per voi. #filtro mostra diversi modi per filtrare o prendere in considerazione gli URL.

2. Crawl solo sitemap

strisciare solo sitemap

Se si desidera che il crawler di attenersi a qualunque gli URL presenti nel sito, crawler expertrec può essere istruito tramite questa opzione. Su attivazione di questa opzione, crawler scarterà tutti gli URL di recente scoperta e manterrà l'elenco strisciante composta di URL di cui URL della Sitemap. Se il vostro sito sta avendo tutti i link a documenti web attesi, quindi attivare questa opzione.