Benodigde licentie
| Abonnement | Suite Team of hoger, Knowledge Professional of hoger |
| Toegang | Admin |
Filters bepalen welke pagina's van een site de crawler meeneemt en welke hij laat staan. Zet ze vóór de eerste run, niet erna.
Ze instellen
- Klik in Kennis op Instellingen in de zijbalk en daarna op Search settings. Klik onder Crawlers op Manage en dan op Add Crawler.
- Geef de Start URLs op: een domein, een sitemappad zoals
voorbeeld.nl/sitemap.xml, of losse pagina's. Maximaal vijf, met + Add another. - Voeg de paden toe die hij meeneemt en de paden die hij overslaat, elke URL op een eigen regel.
- Sla op en laat de crawler lopen.
- Zoek op iets waarvan je weet dat het op een overgeslagen pagina staat, en bevestig dat het ontbreekt.
Je kunt meerdere crawlers laten lopen, op dezelfde site of op verschillende, en dat is vaak netter dan één crawler om elke uitzondering heen buigen. Een sitemap als start-URL verdient de voorkeur als de site er een heeft: die vertelt de crawler wat de eigenaar van de site als pagina beschouwt, in plaats van hem te laten volgen wat er toevallig aan links staat.
Neem smal mee in plaats van breed uit te sluiten
De crawler op een documentatiepad richten en de rest met rust laten is een regel die blijft werken als de site groeit. Alles crawlen en de delen uitsluiten waar je aan dacht, is een regel die stilletjes faalt zodra iemand een nieuw deel toevoegt.
Wat er meestal uit moet
- Blog en nieuws, waar gedateerde berichten de huidige documentatie tegenspreken.
- Marketingpagina's, die niets beantwoorden van wat een klant met een probleem vraagt.
- Archieven en oude versies, de schadelijkste van de drie omdat ze er gezaghebbend uitzien.
Kijk wat er terugkwam
Bekijk na de eerste run wat er is geïndexeerd, in plaats van aan te nemen dat de filters deden wat je bedoelde. Een verkeerd patroon laat zich meestal zien als veel meer pagina's dan verwacht, of als vrijwel geen.
Kijk ze na als de site verandert
Filters zijn tegen een structuur geschreven. Een herontwerp dat paden verplaatst maakt van een juist filter een filter dat stilletjes de verkeerde helft van de site indexeert.
Opmerkingen
0 opmerkingen
Artikel is gesloten voor opmerkingen.