Deep Web, темная материя Интернета

Deep Web – теневой интернет, в основе которого лежит максимальная анонимность, полный отказ от провайдерских серверов, что делает невозможным определить кто, куда и что отправляет. Прежде чем попасть на какой-либо сайт через deep web, ваши данные в зашифрованном виде передаются через таких же участников сети как и вы, что делает передачу данных максимально анонимной, но довольно медленной. Deep Web сейчас напоминает по скорости тот самый, первый интернет с помощью dialup модемов.Понятие глубокий интернет (Deep Web) приобрело популярность совсем недавно и до сих пор не имеет четкого значения. В широком смысле это словосочетание обозначает информацию, скрытую от индексации поисковыми системами, и включает закрытые сообщества и форумы, запрещенные к индексации отдельные страницы сайтов, базы данных, а также зашифрованные сети для анонимного серфинга (под последними чае всего понимаются TOR и i2p). В более узком смысле глубокий интернет – это псевдодоменные пространства, созданные при помощи зашифрованных соединений , обеспечивающие анонимность пользователя, благодаря сокрытию выданного ему провайдером IP адреса.
Обычно интерес к глубокому интернету связан с желанием более-менее опытных пользователей найти в Сети что-нибудь тайное, скрытое от глаз большинства. Начинающие internet-сталкеры уверены в том, что глубокий интернет включает в себя массу интересной информации, которая лишь по недоразумению оказалась скрытой от глаз большинства. На самом деле, это мнение верно лишь отчасти, а так называемый Deep Web включает в себя как информацию, не нужную большинству законопослушных граждан (подавляющее большинство сайтов сети TOR и i2p), так и весьма интересные обсуждения и мнения людей, объединившихся в закрытое сообщество, чтобы отгородиться от людей с чуждыми им взглядами и мнениями или малоопытных новичков в их области деятельности (типичный пример – закрытые SMO или SEO форумы). Кроме того, закрытость некоторых сообществ делает их элитными в глазах других пользователей (яркий пример - закрытый коллективный блог Лепрозорий).

Размер глубокой паутины неизвестен. Существуют относительно достоверные оценки общего числа сайтов, ведущих к онлайн базам данных: около 600 тысяч таких сайтов во всём Вебе и около 30 тысяч в Рунете. Самое интересное что объём информации сосредоточенный в deep web в десятки раз превышает объём информации в обычном интернет пространстве.

Ниже приведу несколько ссылок на интересные (на мой взгляд ресурсы)

https://onion.cab/ – поисковик по сети Тор и шлюз с интернетом.
http://www.deepweb.us/ – коллекция ресурсов М.Зиллмана п глубокому вебу.
https://www.wilsoncenter.org/sites/default/files/stip_dark_web.pdf – учебный материал с выверенными кликабельными ссылками на поисковые ресурсы Deep и Dark Web.
https://www.deepdyve.com/ - платный поисковик по глубокому вебу.
http://www.hozint.com/ - платформа для сбора информации о политической стабильности, безопасности стран, различных инцидентах и волнениях, собирающая и сканирующая информацию в глубоком вебе.
http://www.gwu.edu/~nsarchiv/search.html – архив национальной безопасности США при Университете Джорджа Вашингтона.
http://www.base-search.net/ – поисковик в невидимом вебе для открытых академических веб-ресурсов, принадлежащих лучшим университетам и исследовательским центрам США и Великобритании.
http://citeseer.ist.psu.edu/index – поисковик в невидимом вебе по различным публикациям, книгам, статьям в области компьютерных решений и информационных наук на английском языке.
http://www.findthatfile.com/ – наиболее полный поиск файлов в интернете. Позволяет искать файлы 47 форматов. Поиск можно вести по автору файла, его названию, фрагменту содержания. Поддерживает не только основные виды текстовых и табличных файлов, но и сжатые файлы, аудио- видео файлы и многое другое.
http://www.deepwebtech.com/ – ведущий производитель «глубоких веб технологий», реализующих подход федеративного поиска, создатель ряда поисковиков в «глубоком вебе», решений для интернета и интранета.
http://www.ipl.org/ – поисковик по коллекциям, содержащим наиболее релевантные и интересные информационные ресурсы, созданные в результате добровольного объединения усилий тысяч студентов, добровольцев каталогизации и классификации информации и ведущих специалистов в области информационных технологий.
http://publicrecords.searchsystems.net/ – бесплатный поиск по более чем 50 000 самым обширным открытым базам данных. Например, может дать информацию о бизнес-заявках, имеющихся лицензиях и даже об участии в уголовных процессах, банкротствах и многом-многом другом интересном.
http://www.resourceshelf.com/ – является поддерживаемой сообществом исследователей и специалистов по сбору и каталогизации информации коллекцией по наиболее востребованным вопросам бизнеса и науки.
http://vlib.org/ – крупнейшая мировая виртуальная библиотека, объединяющая цифровые ресурсы многих стран, учебных центров, коммерческих организаций и т.п.
http://biznar.com/biznar/ – является наиболее современной системой использования федеративной технологии поиска в «глубоком вебе» в сфере бизнеса.
http://lookahead.surfwax.com/index-2011.html – первая система поиска в режиме реального времени в «глубоком вебе» с элементами семантического анализа. Позволяет схватывать новости и факты, недоступные другим системам. Интегрируется в браузеры.
http://infomine.ucr.edu/ – виртуальная библиотека интернет-ресурсов, содержит данные библиотек многих наиболее богатых и преуспевающих американских университетов.

Ни конечно множество сайтов недоступных в обычной сети например WikiLeaks, Piratebay, The Hidden Wiki и куча других сайтов, ка говорится: каждому найдется...

Тor-пользователи используют эту сеть путем подключения через серию виртуальных туннелей, а не прямого соединения, таким образом позволяя организациям и лицам обмениваться информацией через публичные сети, не раскрывая при этом свою приватность. Тor является эффективным для обхода цензуры в интернете, позволяя пользователям просматривать сайты, которые в обычном Интернете были бы запрещены.

Уголовники различных мастей, террористы, наркоторговцы, наёмные убийцы чувствуют себя вольготно на этих просторах, хотя время от времени информация и просачивается в СМИ.

Тor может также использоваться разработчиками программного обеспечения для создания новых и усовершенствования старых инструментов коммуникаций со встроенной защитой приватности.

Скрытые сервисы разрешают частным лицам создавать веб-сайты, не раскрывая IP-адрес и истинное местоположение вебмастера. Например, Тor используется для обсуждения социально-проблемных тем: формируются чат-комнаты и веб-форумы для жертв домашнего насилия или людей с определёнными заболеваниями.

Журналисты могут вольно и безопасно переписываться с диссидентами и обличителями режимов. Сотрудники неправительственных организаций (НПО) получают доступ к переписке с семьями, когда они находятся вне пределов своей страны, не оглашая широкой публике, что они работают с данной организацией.

Понятно, что такое место не могут обойти военные, спецслужбы, правоохранители для обеспечения секретности своих сообщений и задач. Они же и используют Deep Web при поиске террористов, прочих уголовных элементов и их противоправных действий.

Часто используемой валютой в глубокой паутине черных рынков является биткоин, причём в физическом виде они не существуют, а для их приобретения используются компьютеры, а иногда и целые вычислительные центры.
От обычных валют биткойны отличает тот факт, что отследить их обладателей и цепочку транзакций нереально, что и делает их наиболее предпочитаемой формой расчетов для незаконных дел.

Скорее всего данное пространство в ближайшем времени будет подконтрольно надзорным органам, но время не стоит на месте и наверняка следует ожидать появления новых программ и браузеров, так как тайный Интернет позволяет обналичивать огромные деньги.


P. S. это мой первый пост, если что - извините...