La prima mappa del darkweb, il lato 'oscuro' di internet

Alcune pagine, o addirittura interi siti, possono non essere presenti negli indici dei motori di ricerca per via delle impostazioni​del sito web.
I 'programmi' che indicizzano le pagine seguono, se presenti, le istruzioni lasciate in dei file specifici del sito, in quelle istruzioni si può anche indicare di non indicizzare

All'interno di queste pagine non indicizzate, ci sono anche quelle del dark web, una parte del web solitamente accessibile solo con protocolli o software dedicati (es TOR)