Web argiewe: Web argiefdienste soos die Wayback-masjien stel gebruikers in staat om argiefweergawes van webblaaie oor tyd te sien, insluitende webwerwe wat ontoeganklik geword het en nie deur soekenjins soos Google geïndekseer word nie.
Om inhoud op die web te ontdek, gebruik soekenjins webkruipers wat hiperskakels volg deur bekende protokol virtuele poortnommers. Hierdie tegniek is ideaal vir die ontdekking van inhoud op die oppervlakweb, maar is dikwels ondoeltreffend om diep webinhoud te vind. Hierdie kruipers probeer byvoorbeeld nie dinamiese bladsye te vind wat die gevolg is van databasisnavrae as gevolg van die onbepaalde aantal navrae wat moontlik is nie. Daar is opgemerk dat dit gedeeltelik oorkom kan word deur skakels te verskaf om resultate te vra, maar dit kan die gewildheid van 'n webwerf van die diep web onopopsetlik vergroot.
DeepPeep, Intute, Deep Web Technologies, Scirus en Ahmia.fi is ’n paar soekenjins wat toegang tot die diep web het. Intute het sy finansiering verloor en is sedert Julie 2011 ’n tydelike statiese argief. Scirus het aan die einde van Januarie 2013 opgehou funksioneer.
Navorsers het ondersoek ingestel na hoe die diep web outomaties ondersoek kan word, insluitend inhoud wat slegs deur spesiale sagteware soos Tor verkry kan word. In 2001 het Sriram Raghavan en Hector Garcia-Molina van Stanford-universiteit se Departement Rekenaarwetenskap ’n argitektoniese model voorgestel vir ’n versteekte webkruiper wat sleutelterme wat deur gebruikers verskaf is of versamel is van die navraagkoppelvlakke om navraag te doen ’n webform en die diep webinhoud te ondersoek. Verskeie vormnavraagtale (soos byvoorbeeld, DEQUEL) is voorgestel waar, buiten die uitreiki van ’n navraag, ook die uitruil van gestruktureerde data uit die resultaatbladsye toegelaat word. Nog ’n poging is DeepPeep, ’n projek van die Universiteit van Utah wat deur die National Science Foundation geborg is, wat verborge webbronne (webvorms) in verskillende domeine versamel het gebaseer op ’n gefokusde kruiper.
Kommersiële soekenjins het begin met die ondersoek van alternatiewe metodes om die diep web te ondersoek. Die sitemap-protokol (wat in 2005 deur Google ontwikkel) en OAI-PMH, is meganismes waarmee soekenjins en ander belanghebbende webwerwe op sekere webbedieners kan ontdek. Beide meganismes laat webbedieners toe om die URL’s wat op hulle toeganklik is, te adverteer en sodoende outomatiese ontdekking van hulpbronne wat nie direk aan die oppervlakweb gekoppel is nie, toe te laat. Google se webwerwe vir diep webwerwe bereken voorleggings vir elke HTML-vorm en voeg die gevolglike HTML-bladsye by die Google-soekenjin-indeks. Die opgedateerde resultate is verantwoordelik vir ’n duisend navrae per sekonde op die diep webinhoud. In hierdie stelsel word die voorberekening van voorleggings gedoen met behulp van drie algoritmes:
Om gebruikers van Tor-verborge-dienste in hul toegang en soektog na ’n verborge .onion-agtervoegsel te fasiliteer, het Aaron Swartz in 2008 Tor2web ontwerp - ’n proxy-aansoek wat toegang verleen deur middel van algemene webblaaiers. Deur hierdie toepassing te gebruik, verskyn diep webskakels as ’n ewekansige string van letters, gevolg deur die .onion TLD.
↑ "Surface Web". Computer Hope. Besoek op 20 Junie 2018.
↑ Beckett, Andy (26 November 2009). "The dark side of the internet". Besoek op 9 Augustus 2015.
↑ Daily Mail Reporter (11 Oktober 2013). "The disturbing world of the Deep Web, where contract killers and drug dealers ply their trade on the internet". Besoek op 25 Mei 2015.
↑ "Clearing Up Confusion – Deep Web vs. Dark Web". BrightPlanet. 27 Maart 2014.
↑ Solomon, Jane (6 Mei 2015). "The Deep Web vs. The Dark Web". Besoek op 26 Mei 2015.
↑ NPR Staff (25 Mei 2014). "Going Dark: The Internet Behind The Internet". Besoek op 29 Mei 2015.
↑ Greenberg, Andy (19 November, 2014). "Hacker Lexicon: What Is the Dark Web?". Besoek op 6 Junie 2015. Gaan datum na in: |date= (help)
↑ "What is the dark web and who uses it?". The Globe and Mail. Besoek op 15 Januarie 2017.
↑ "Hypertext Transfer Protocol (HTTP/1.1): Caching". Internet Engineering Task Force. 2014. Besoek op 30 Julie 2014.
↑ Wiener-Bronner, Danielle (10 Junie 2015). "NASA is indexing the 'Deep Web' to show mankind what Google won't". Fusion. Besoek op 27 Junie 2015. There are other simpler versions of Memex already available. “If you’ve ever used the Internet Archive’s Wayback Machine”, which gives you past versions of a website not accessible through Google, then you’ve technically searched the Deep Web, said Chris Mattmann.
↑ "Intute FAQ". Besoek op 13 Oktober 2012.
↑ "Elsevier to Retire Popular Science Search Engine". library.bldrdoc.gov. Desember 2013. Besoek op 22 Junie 2015. by end of January 2014, Elsevier will be discontinuing Scirus, its free science search engine. Scirus has been a wide-ranging research tool, with over 575 million items indexed for searching, including webpages, pre-print articles, patents, and repositories.
↑ Aaron, Swartz. "In Defense of Anonymity". Besoek op 4 Februarie 2014.
Ontsluit van "https://af.wikipedia.org/w/index.php?title=Diep_web&oldid=2069456"