Не все в Интернете будет отображаться в списке результатов поиска в Google или Bing; Есть много мест, к которым их веб-сканеры не могут получить доступ.
Чтобы исследовать невидимую сеть, вам нужно использовать специальные поисковые системы. Вот наши лучшие 12 услуг для глубокого поиска в Интернете.
Что такое невидимая сеть?
Прежде чем мы начнем, давайте выясним, что означает термин «невидимая сеть»?
Проще говоря, это универсальный термин для онлайн-контента, который не будет отображаться в результатах поиска или веб-каталогах.
Официальных данных нет, но большинство экспертов сходятся во мнении, что невидимая сеть в несколько раз больше видимой сети. Учитывая, что Google, Amazon, Microsoft и Facebook хранят примерно 1200 петабайт между ними, цифры быстро становятся ошеломляющими.
Содержимое в невидимой сети можно условно разделить на глубокую сеть и темную сеть.
Глубокая паутина
Глубокая сеть, состоящая из контента, для доступа к которому обычно требуется какая-то форма аккредитации. Например, библиотечные базы данных, почтовые ящики электронной почты, личные записи (финансовые, академические, медицинские и юридические), накопители для облачных хранилищ, корпоративные сети и т. Д.
Если у вас есть правильные данные, вы можете получить доступ к контенту через обычный веб-браузер.
Темная Паутина
Темная паутина является подразделом глубокой паутины. Вам нужно использовать выделенный темный веб-браузер (например, Tor), чтобы увидеть содержимое. Он более анонимный, чем обычная сеть, и поэтому часто является домом нелегальной деятельности, такой как продажа наркотиков и оружия.
Лучшие невидимые веб-поисковые системы
1. Пипл
Pipl позиционирует себя как крупнейшая поисковая система в мире. В отличие от Google и др., Pipl может взаимодействовать с базами данных с возможностью поиска, каталогами участников, судебными записями и другим контентом для глубокого поиска в Интернете, чтобы предложить вам подробный снимок человека.
2. Машина обратного хода
Обычные поисковые системы предоставляют результаты только из самой последней версии веб-сайта, которая доступна.
Машина Wayback отличается. Он имеет копии более 361 миллиарда веб-страниц на своих серверах, что позволяет вам искать контент, который больше не доступен в видимой сети.
3. Виртуальная библиотека WWW
Виртуальная библиотека WWW — самый старый каталог в Интернете. Он был начат Тимом Бернерсом-Ли, создателем интернета, еще в 1991 году.
Волонтеры вручную составляют список ссылок, создавая высококачественный индекс глубокого веб-контента по десяткам категорий.
4. DuckDuckGo
DuckDuckGo хорошо известен как частный поисковик для видимой сети, но знаете ли вы, что компания также предлагает луковый сайт, который позволяет вам исследовать темную сеть?
Даже обычная поисковая система предлагает более глубокий веб-контент, чем Google. Он объединяет результаты из более чем 500 автономных инструментов поиска и находит его результаты. Если вы соедините обычный движок DuckDuckGo с версией .onion, вы сможете выполнить весь поиск в Интернете.
Сайт с луком можно найти по адресу http://3g2upl4pq6kufc4m.onion/ .
5. USA.gov
Количество контента USA.gov серьезно впечатляет. Это портал для всех общедоступных материалов, необходимых для каждого федерального агентства и правительства штата, местного или племенного управления.
Вы также найдете информацию о государственных должностях, кредитах, грантах, налогах и многом другом. Большая часть информации на сайте не будет отображаться в Google.
6. Каталог журналов открытого доступа
Каталог журналов открытого доступа — это глубокая поисковая система в Интернете, которая предоставляет доступ к академическим работам. Документы доступны всем бесплатно.
Текущий репозиторий насчитывает почти 10 000 журналов с 2,5 миллионами статей по всем предметам. Google Scholar может получить доступ к некоторой информации, но мы считаем, что DOAJ — лучший инструмент для исследований.
7. Скрытая вики [больше не доступно]
The Hidden Wiki — это темная поисковая система. У него есть доменное имя .onion, поэтому он недоступен через стандартный веб-браузер.
Сама страница представляет собой отредактированный сообществом каталог темных веб-сайтов. Вы найдете ссылки на темные социальные сети, коммерческие сервисы, форумы, информаторов, книги, фильмы и телевидение и многое другое.
8. Слон
Elephind стремится предоставить единый портал для всех исторических газет мира. Это фантастический ресурс для исследователей, особенно семейных историков, генеалогистов и студентов.
Многие из газет на сайте находятся исключительно в глубокой сети; они не будут отображаться в Google. На момент написания статьи доступно 3,6 миллиона газет.
9. Голос Шаттла
Для всех, кто интересуется гуманитарными науками, «Голос Шаттла» является важным ресурсом. Сайт заработал в 1994 году и сегодня может похвастаться одной из самых впечатляющих коллекций глубокого веб-контента.
Есть более 70 страниц аннотированных ссылок, охватывающих все, от архитектуры до философии.
10. Ахмия
Ahmia — темная поисковая система. Но есть изюминка — это одна из немногих темных поисковых систем, доступных в обычной сети.
Конечно, любые ссылки и результаты не будут открыты, если на вашем компьютере не установлен браузер Tor. Тем не менее, это все еще отличный способ получить представление о том, что доступно в темной паутине, не подвергая себя риску использования темной паутины
11. WorldCat
Как вы узнаете, какие книги хранятся в разных местных библиотеках в вашем районе? Просмотр каждого сайта библиотеки в отдельности отнимает много времени и потенциально подвержен ошибкам.
Вместо этого проверьте WorldCat. Эта глубокая поисковая система в Интернете имеет два миллиарда проиндексированных элементов из библиотек по всему миру, включая множество ссылок, которые обычно доступны только при поиске в базе данных.
12. Проект Гутенберг
Если вы ищете в Google малоизвестные книги без авторских прав, вам придется пролистать несколько страниц, чтобы найти результат, содержащий ссылку для загрузки.
Project Gutenberg предлагает более 58 000 бесплатных электронных книг для вас, чтобы проверить и скачать.
12 поисковых систем, которые мы вам представили, должны обеспечить надежную базу для начала поиска контента.
Если вы хотите узнать больше о невидимой сети, ознакомьтесь с нашей статьей о лучших темных веб-сайтах, которые вы не найдете в Google темных сетей, которые вы не найдете в Google темной сети, которых вы не найдете. и наш список малоизвестных уголков глубокой сети. малоизвестных уголков глубокой сети, которые малоизвестных уголков глубокой сети, которые