Vad är Deep Web?
Den djupa webben är den del av Internet som ligger utanför vanliga sökmetoder. En vanlig sökmotor hittar webbsidor genom att ta upp en enda sida och klicka på alla länkar. Detta gör att de kan sträcka sig från en enda sida som ett jättespindelnät och hitta sida efter sida genom att länka. Denna process fångar bara en bråkdel av de sidor som finns på Internet; enorma mängder data är helt oklassificerade av ett av många skäl. Dessa sidor kommer aldrig upp i en vanlig sökmotor och är därför osynliga för de flesta webbanvändare.
Ytbanan är den del av Internet som de flesta användare känner till. Den här delen innehåller de vanliga webbsidorna och webbtjänster som de flesta användare vet om. Den djupa webben består av information som bara specifika delar av Internetanvändare är medvetna om eller har tillgång till. Den djupa banan är enorm jämfört med ytbanan; år 2000 var den nästan 50 gånger större än ytbanan.
Anledningen till att den djupa webben finns beror främst på begränsningar i sökmotorerna. När sökmotorer tittar genom länkar kan de inte komma åt vissa typer av webbsidor. Dessa sidor kommer aldrig in i systemet och indexeras därför aldrig. När en användare söker efter en av dessa sidor kommer han eller hon aldrig att hitta den, eftersom sökmotorn inte registrerar sin existens eller att den inte har åtkomst till den.
Det finns ett antal olika sidtyper som är svåra eller omöjliga för en sökmotor att indexera. Dynamiska och databasbaserade webbsidor är praktiskt taget omöjliga, eftersom de kräver specifik input för att existera. Dessa webbsidor består av på plats, ofta genom användarinmatning. Eftersom en dynamisk sida inte finns förrän den behövs hoppar sökmotorer över dem eftersom de inte vet vad de ska be om.
Privata eller grindade webbsidor utgör en annan stor del av den djupa webben. Eftersom dessa sidor kräver referenser eller inloggningsinformation och sökmotorn inte har någon, blockeras den från att få åtkomst till information på andra sidan inloggningen. Även med det här problemet är vissa inloggningsbaserade webbplatser en del av ytan. Webbplatsen innehåller särskilda bestämmelser för att motorerna ska kunna söka på sina sidor. Detta är vanligt bland sidor som har öppen registrering och vill generera ytterligare trafik.
En annan stor del av den djupa webben är gjord av olänkade eller begränsade webbplatser. Dessa sidor har inga länkar till externa resurser eller blockerar aktivt befintliga länkar. Detta förhindrar att sökmotorerna någonsin snubblar på sidan, så den läggs aldrig till i några listor. Det brukade vara vanligt bland personliga webbsidor, men förändringar i modern webbanvändning har gjort att de flesta personliga sidor har länkats och indexerats.