Wat zijn spiders van zoekmachines?
Zoekmachine spiders zijn softwareprogramma's die door inhoud op webpagina's bladeren en lijsten met woorden samenstellen die op die pagina's verschijnen. Dit proces wordt webcrawling genoemd. Het programma bezoekt pagina na pagina, volgt elke link en registreert de inhoud van elke pagina terwijl deze doorgaat als een spin die door de pagina's kruipt. Deze inhoud wordt vervolgens toegevoegd aan de index van de zoekmachine.
Verschillende zoekmachines gebruiken verschillende benaderingen bij het verzenden van hun spiders van zoekmachines. Sommigen houden elk woord op een pagina bij. Anderen registreren metatags, titels en ondertitelwoorden. Het indexeren van de 100 meest voorkomende woorden op een pagina is een andere tactiek die wordt gebruikt door een spider van zoekmachines.
Links naar websites zijn wat feed spiders van zoekmachines. Hoe vaker spinnen links naar een website zien, hoe vaker ze bezoeken. Dit geeft de spiders meer informatie om een site te indexeren en zorgt ervoor dat de site hoger in de zoekresultaten van de zoekmachine verschijnt voor een zoekterm die verband houdt met die site.
Zoekmachineoptimalisatie (SEO) omvat het gebruik van specifieke tactieken om spiders van zoekmachines naar een site te lokken. Verschillende manieren om SEO te gebruiken zijn om een site handmatig in te dienen voor opname in een zoekmachine, te linken, trefwoordtermen te gebruiken en metatags te gebruiken. Dit helpt verkeer en spinnen naar een site te leiden.
Het is ook mogelijk om handmatig een spiderbezoek aan de zoekmachine aan te vragen. Dit houdt in dat een site ter beoordeling wordt voorgelegd aan een zoekmachine en dit kan gratis of via betaalde indiening worden gedaan, afhankelijk van de zoekmachine. De zoekmachine stuurt vervolgens zijn spin naar de site. Dit helpt misschien niet bij de paginarangschikking, maar het zal de site in de lijsten van de engine opnemen.
Crosslinking omvat het linken naar pagina's binnen een website. Dit zal ervoor zorgen dat spiders van zoekmachines door dezelfde pagina's van dezelfde site blijven bladeren, terwijl ze indexeren. Spammen via links wordt ook gebruikt, maar dit kan schadelijk zijn voor de paginarangschikking en SEO van een site.
Het gebruik van zoekwoordzinnen betekent dat in de tekst van een website enkele zinsdelen moeten worden opgenomen waarnaar een gebruiker waarschijnlijk in een zoekmachine zal zoeken. De spiders van zoekmachines zien deze, zien hoe vaak ze op een pagina verschijnen en indexeren ze. Als er genoeg mensen naar deze zoekwoorden zoeken, worden ze uiteindelijk naar de site geleid.
Metatags zijn speciale codes die op een website worden geplaatst en waarmee wordt aangegeven wat de spiders van zoekmachines indexeren. Het is belangrijk om te onthouden dat spinnen de metatags zullen vergelijken met de pagina-inhoud, en als ze niet samenvallen, zal de spin ze weigeren. Metatags zijn niet zichtbaar op een website tenzij iemand de broncode van de website bekijkt.