Motoarele de cautare construiesc o baza de date a Web-ului folosind programe numite spiders sau web crawlers care incep explorarea cu o lista cunoscuta de pagini web. Spider-ul face o copie a paginii web accesate si o indexeaza, stocand informatiile necesare pentru ca acea pagina sa poate fi accesata rapid data viitoare.

Toate link-urile din cadrul paginii indexate vor fi explorate si indexate la randul lor. Intr-un final, toate paginile web functionale vor fi explorate, daca nu cumva spider-ul nu mai are timp sau ramane fara spatiu pe disc. Toate paginile care au fost explorate si indexate, puse la un loc, formeaza ceea ce numim Surface Web (internetul asa cum il stim noi).

Pe langa acest Surface Web exista Deep Web (numit si Deep Net, Invisible Web, Dark Web sau Hidden Web) care nu este indexat si se estimeaza a fi de cateva zeci de ori mai "mare" decat internetul cunoscut noua. Resursele Deep Web-ului pot fi clasificate in cateva categorii generale:
- pagini cu continut dinamic: pagini dinamice care apar ca raspuns la un anumit tip de cautare sau care sunt accesate prin formulare web (campuri de text). Explorarea acestor pagini e dificila, daca nu suntem familirizati cu continutul domeniului.
- pagini care nu sunt legate de altele prin link-uri, acest lucru impiedica programele de tip spider sa le acceseze continutul.
- web privat: pagini care necesita un nume de utilizator si o parola. Aici, la adăpostul anonimităţii, se fac tranzacţii cu droguri, activiştii politici hăituiţi îşi caută informaţiile, iar pedofilia este o normalitate.
- web contextual: pagini ale caror continut variaza in functie contextul in care sunt accesate (clasa de I.P.-uri a clientului sau secventa de navigare precedenta).
- pagini cu continut limitat: pagini cu acces limitat tehnic ( folosesc programe care exclud accesul robotilor si impiedica motoarele de cautare sa le indexeze si sa creeze copii cache ).
- continut scriptat: pagini ce sunt accesibile doar prin link-uri de JavaScript, dar si alte continuturi dinamice descarcate de pe serverele web via Flash sau AJAX.
- continut non-HTML/text: continut textual codat in fisiere multimedia sau alte formate specifice ce nu sunt suportate de motoarele de cautare.

Cu siguranta nu veti putea intra in Dark Web folosind un browser conventional cum ar fi Firefox, Chrome sau IE majoritatea adreselor de pe Dark Web sunt de forma 1i2u4y12t412y4.onion iar browserele normale va spun ca nu exista asa ceva. Pe internetul ascuns toti utilizatorii sunt anonimi si se folosesc de programe speciale pentru a realiza acest lucru.

Cel mai usor este sa intrati cu TOR care este un program usor de instalat si utilizat. Tor se foloseste de o retea internationala bazata pe voluntari care isi pun o parte din banda lor de internet la dispozitia tuturor. Cand accesezi un link prin tor informatia criptata circula din nod in nod ( nodurile fiind voluntarii ) si nu pastreaza loguri. Dupa ce ati instalat Tor el se va conecta la reteaua internationala si veti primi un alt IP apoi se va deschide browserul vostru ( ex Firefox ) cu pluginurile si scripturile Tor. Acum ca sunteti anonimi puteti accesa Dark Webul.

Cel mai bun punct de plecare in navigarea internetului invizibil este pagina The Hidden Wiki care are linkul de forma http://kpvz7ki2v5agwt35.onion. Ca si pe Surface Web avem nevoie de un motor de cautare. Mai  jos aveti o lista cu unele motoare care va vor fi de folos in functie de ce vreti sa cautati ( este posibil ca unele din linkuri sa nu mai fie valabile cand veti citi acest articol ).

Infomine: a fost realizat de mai multe biblioteci din Statele Unite. Unele dintre ele apartin Universitatii din California, Universitatii din Detroit, Universitatii Wake Forest si a Universitatii de Stat California. Infomine extrage informatii din baze de date, jurnale electronice, carti electronice, buletine de stiri, liste de mail, cataloage online, articole si alte resurse. Se poate cauta dupa categorii de subiect, dar si mai in detaliu folosind optiunile de cautare. Infomine nu e doar un motor de cautare Deep Web, e o baza de date pentru multe informatii de referinta. Treceti in revista link-urile din josul paginii sale, Other Search Tools si General Reference.

The WWW Virtual Library: aceasta pagina e considerata a fi cel mai vechi catalog de pe web si a fost creat de catre Tim Berners-Lee, creatorul web-ului. Acest motor listeaza o multime de resurse relevante despre o multime de subiecte. Se poate folosi bara de cautare sau se pot explora directoarele verticale a subiectelor asezate in ordine alfabetica.

Intute: motor de cautare axat pe Anglia, dar care indexeaza si site-urile unor universitati prestigioase din zona, ce ofera resurse pentru studiu si cercetare. Poate fi explorat pe subiecte sau pe termeni de cautare. Mai beneficiaza si de ajutorul unor specialisti care indexeaza si alte site-uri care au legatura cu subiectul de studiu si cercetare.

Complete Planet: aceasta pagina se auto-intituleaza “usa din fata a Deep Web-ului”. Indexeaza o masa dinamica de baze de date ce sunt ascunse unei cautari conventionale. Sunt in jur de 70.000 de baze de date al caror continut variaza de la agricultura la domeniul militar. Are si o optiune de cautare ce tine cont de data calendaristica.

Infoplease: portal de informatii ce contine enciclopedii, almanahuri, atlase si biografii.

DeepPeep: motor de cautare ce acceseaza Deep Web-ul prin formulare de cautare ce inspecteaza bazele de date si serviciile web in cautare de informatii. Cautarile manuale au ca rezultat rezultate dinamice, dar cu viata scurta, ce nu pot fi indexate de motoarele standard. Prin indexarea bazelor de date, DeepPeep incearca sa tina evidenta a 45.000 de cautari in interiorul a 7 domenii. Domenii respective sunt Auto, Aviatie, Carti, Biologie, Hotel, Munca si Inchirieri.

IncyWincy: se comporta asemenea unui meta-motor de cautare deoarece se foloseste de alte motoare de cautare si apoi filtreaza rezultatele.

DeepWebTech: pagina ce ofera 5 motoare de cautare pentru anumite subiecte. Domeniile acoperite sunt din stiinta, medicina si afaceri.

Scirus: e axat doar pe stiinta. E un motor de cautare puternic ce indexeaza jurnale, site-uri personale ale savantilor, materiale de curs si retele institutionale.

TechXtra: motor de cautare ce e axat pe inginerie, matematica si I.T. Indexeaza stirile din aceste domenii, oferte de munca, rapoarte tehnice, documente electronice, resurse de studiu si cercetare si alte article si informatii relevante. Partea întunecată a internetului a fost folosită de activiştii Primăverii Arabe de anul trecut pentru a comunica între ei fără a putea fi interceptaţi.

Anonimitatea este un lucru esenţial în acest spaţiu. De asemenea, mai mulţi disidenţi din China folosesc acest proces pentru a scăpa de cenzură şi ulterioarele represiuni. John Carr, un consultant pentru securitate pe internet al guvernului Marii Britanii, a declarat că „nu avem destule tribunale, destui procurori şi destui ofiţeri de poliţie pentru a începe să atingem adevărata mărime a comportamentului ilegal de pe internet".

Cu toate acestea, pentru cei care folosesc acest sector al internetului, anonimitatea este o virtute. Ei vorbesc despre protecţia pe care le-a oferit-o bloggerilor care au scris împotriva guvernelor din ţările arabe. Pentru studentul american David, pe dark web este vorba despre „libertatea de a alege".