Þótt enginn veit fyrir víst, að djúp Vefurinn getur verið 400 til 500 sinnum stærri að yfirborð vefur [Heimild: BrightPlanet]. Og bæði yfirborð og djúp Web vaxa stærri og stærri á hverjum degi.
Til að skilja hvers vegna svo mikið af upplýsingum er út af augum leitarvélum, hjálpar það til að hafa smá bakgrunn á að leita tækni. Þú getur lesið allt um það með hvernig Internet leitarvélar vinna, en við munum gefa þér fljótur samdráttur hér.
Leitarvélar almennt búa til yfirlit gagna með því að finna upplýsingar sem geymdur á vefsíðum og öðrum auðlindum netinu . Þetta ferli þýðir með sjálfvirkum köngulær eða crawlers, sem finna lén og þá fylgja tengla á öðrum lénum, eins og Arachnid eftir Silky tendrils af vefnum, í vissum skilningi að búa flatmaga kort af vefnum.
Þetta vísitölu eða kort er lykillinn að því að finna ákveðin gögn sem hafa þýðingu við þarfir þínar. Hvert sinn sem þú slærð inn leitarorð birtast niðurstöður næstum samstundis þökk vísitölu. Án þess að leita vél myndi bókstaflega að byrja að leita milljörðum síðna frá grunni í hvert skipti sem einhver vildi upplýsingar, ferli sem væri bæði ómeðfærilegur og exasperating.
En leitarvélar geta ekki séð gögn sem eru geymd við djúpur vefur. Það eru gögn ósamrýmanleika og tæknilegar hindranir sem flækja flokkun viðleitni. Það eru einkaaðilar Vefsetur sem krefjast notandanafn lykilorð áður en þú getur fengið aðgang að efni. Crawlers getur ekki komast gögn sem krefst leit leitarorð á einni, á vefsvæði þeirra. Það eru tímasettar-aðgangur síður sem ekki er lengur leyfa opinberum útsýni þegar ákveðin frestur er liðinn.
Allar þessar áskoranir, og a heild einhver fjöldi af öðrum, gera gögn miklu erfiðara fyrir leitarvélum til að finna og vísitölu. Halda lestur til að sjá meira um hvað skilur yfirborðið og Deep Web.
Undir yfirborðinu
Eins og við höfum þegar bent á, það eru milljónir á milljónir undir-síður strá allan milljóna lén. Það eru innri síður og engin ytri tengla, ss internal.howstuffworks.com, sem eru notuð til tilgangi síða viðhald. Það eru óbirt eða óskráð bloggfærslum, mynd gallerí, skrá framkvæmdarstjóra, og gífurlegur magn af efni sem leitarvélar bara ekki hægt að sjá.
Hér er bara eitt dæmi. There ert margir sjálfstætt dagblað Vefsetur netinu, og stundum, leitarvélar vísitölu nokkrar af þeim greinum á þessum vefsvæðum. Það er sérstaklega satt fyrir helstu fréttir sem fá mikla athygli fjölmiðla. A fljótur Google leit
