目录
1。什么是Deep Web?
1.1用于人员研究的数据库
1.2其他类型的Deep Web研究
1.3 Tor网站
2 。资源
2.1统计
2.2人员研究
3。 Tor –黑暗网
1。什么是深层网络?
有很多词语来描述深层网络,包括不可见的网络,隐藏的网络,甚至是Deepnet。
之所以存在,是因为互联网已经变得非常依赖搜索引擎,搜索引擎的性能仅与为结果提供内容的网络搜寻器一样好。一些研究人员认为,可搜索的网络仅占Internet上实际可用网络的1%。
爬网程序非常擅长在静态网页中进行爬网,提取这些网页上的信息并将其提供给搜索结果的形式。但是,在这些搜索结果的表面之下隐藏着一些有价值的信息-信息隐藏在在线数据库和搜索蜘蛛能够抓取的动态生成的页面中。
这些巨大数据库的几个示例包括诸如专利,人口普查数据,太空任务收集的数据,气候数据和学术数据库之类的信息充斥着充斥着有趣而有价值的信息的科学论文。
所有这些甚至都没有包括地球最深和最黑暗的角落。存在秘密洋葱网站的Internet,只能通过特殊的Tor软件访问。外观的基本布局如下所示。
访问深度Web的这些不同部分的方法由您要获取的数据确定。此处概述了用于浏览深层网络的工具。
本手册将带您深入了解深层网络的各个层次,从数据库开始,在数据库中您可以找到只有知道秘密的人才能访问的信息。然后,我们将继续探讨学术期刊和书籍中提供的各种信息,您可以在其中浏览有关学术主题的大量著作。最后,我们到达Tor的大门,整个互联网深深地笼罩着黑暗。
1.1用于人员研究的数据库
如果您是房东或您曾经在大多数学校系统中任教过,那么您可能不仅仅了解周围最常见的深度网络数据库之一-背景搜索。
大多数企业或像学校这样的公共机构都将为您支付一笔费用。背景检查,但整个Internet上都有一些数据库,您可以查询这些数据库以了解有关人员的更多信息。
免费提供的数据库包括公共记录,犯罪数据库,数字化法院记录以及各种提供基本识别信息,实际住址和家庭详细信息的“人员搜索"网站。
使用深层网络进行人员研究的原因很多,从寻找失踪亲属到家谱研究的一切。 /p>
1.1.1收养研究
人员搜索的常见用法d atabases是由收养的孩子试图寻找他们的亲生父母。
可以使用常规的人员搜索网站和服务进行收养研究,但是由于大多数免费服务,这种研究通常都是碰碰运气的。仅提供有关人的肤浅信息,付费网站要求研究人员知道出生日期和当前居住地等信息。在大多数情况下,被收养的孩子或父母可能对出生日期有一些模糊的概念,但对这个人目前的位置却一无所知。
这种研究非常普遍,以至于现在涌入了专门为收养孩子与想要找到的亲生父母配对而专门设计的新网站。
这些是非营利的“注册表",收养孩子和放弃孩子的父母可以进行注册
无法从搜索引擎访问这些数据库,但是知道正确的注册表数据库,父母或孩子都有机会发现并与家人团聚。
1.1.2失去亲戚
人们搜索网站的另一种常见用法是当孩子离家出走,一名父母离开家或大家庭成员随时间失去联系。在这种情况下,家庭成员可能会在Internet上寻找资源以追踪那些亲戚。这类研究的典型工具包括:
失物招领除非您掌握有关此人的大量详细信息,否则亲戚可能是深层网络上最难的研究活动之一。通常,只要有生日,现在的住所,现在的年龄,全名或直系亲属的名字,您就可以几乎确定地找到任何人。
1.1.3 Veteran Research
大多数退伍军人都为国家政府工作,并且由于大多数公开信息的政府都提供了许多有价值的有用的研究工具,因此Web上的退伍军人研究实际上是非常富有成果的。
例如,英国国防部提供了“主题访问请求"表格,退伍军人可以从政府那里请求他们自己的服务记录。
该表格可以在英国国家档案馆找到。 ,并且世界上大多数国家/地区的政府也在线拥有自己的国家档案馆,您还可以为您所在国家/地区的服务成员进行退伍军人研究。
除了国家档案馆之外,您还可以使用以下方法在线进行退伍军人研究无法通过任何搜索引擎搜索深层Web资源ne。
由于退伍军人的记录由政府维护,并且由于它们通常存储在易于访问的位置,因此查找特定退伍军人的记录通常非常容易。当这些记录已经数字化时,尤其如此,这几天比以往任何时候都更为普遍。 Deep Web充满了宝贵的退伍军人信息。
1.1.4族谱
PCPC.me族谱手册始终是一个很好的起点。
其中之一
大多数主要国家/地区都有自己的GenWeb网站分支,每个国家/地区都致力于提供有关以下内容的数据库:
您将在该主题上找到的其他Deep Web数据库是:
1.1.5背景调查
是否是一个房东,试图验证您的新租户没有犯罪记录,或者您要查找新男友是否有一些他没有告诉您的深层秘密,所以有很多合法的理由
您在线进行的任何深度背景检查都可能需要支付少量费用。但是,许多人没有意识到,有合法的方法可以在网上免费查找有关人员的背景信息。您无法获取所有详细信息,但可以提取诸如家庭成员,电子邮件地址,电话号码甚至犯罪记录之类的信息。
如果您不想立即花费任何现金对于付费的在线背景数据库信息,您始终可以通过Internet来获取信息。通过Google搜索或在社交网络上进行搜索,您可以学到很多关于人的知识,但是当您开始深入研究Deep Web时,发现的知识却远远不够。
即使付费服务也只能提供免费的“入门"搜索中有足够的信息,可让您在其他站点(例如公共记录数据库)上挖掘更多的污垢。
自行查找背景数据的选项包括:
使用付费数据库搜索的好处是,它可以节省大量时间和精力来查找有关个人的信息。但是,您可以花时间访问网络上的各种公共记录网站,这些网站提供了包含任何人都可以免费公共访问的记录的数据库,从而发现了付费后台报告中显示的许多信息。
有时,当您研究Internet时,您的需求可能会比仅仅研究人员更深入。它可能涉及挖掘有关某个位置或事件的历史记录。这种研究可以跨越深层网络的多个领域,这些领域包括学术资源,政府和法律案件数据库,当然还有遍布整个网络的许多历史资源,大多数爬网者都无法触及。
无论您生活在世界哪个地方,都有一个历史社会,或者至少有一些组织致力于维护和保护历史的可能性非常大。
该本地历史学会实际上可能拥有自己的在线研究数据库,您可以在其中搜索数字化的历史记录。
这些数据库(搜索引擎无法访问)包含照片,扫描过的历史文档以及其他记录,这些都构成了您可以通过互联网访问的信息的宝库。
除了历史记录之外,您当地的图书馆实际上还可以提供类似的数据库搜索公用事业在他们的网站上,您可以查找涵盖该地区历史的数字化文档或报纸扫描。
本地历史也与家谱相关。研究人员几乎使用Internet上的每个记录数据库(公共记录,历史社会,图书馆等)来追踪家庭的血统。
最著名的Deep Web数据库之一
这是一个历史研究的一部分。
考虑到该服务完全免费提供的事实,该网站拥有丰富的信息和资源可供您进行家谱研究,
它当然不是唯一的家谱数据库网站,但它是规模最大的网站之一。
1.2.2法律研究
您是否在法律上遇到麻烦都没关系–当涉及对公共政策或任何涉及法律问题的问题采取立场时,可以访问为以后的法院判决设定优先次序的法院案件和法院判决。
实际上,如果如果您遇到法律问题,您的律师将希望有一个法律研究人员,他对深层网络非常了解,并能够利用埋藏在深层网络中的所有资源。
一些法律研究示例您将在深层网络中找到的网站包括:
当今互联网上确实有成千上万个高质量的法律研究数据库,令人惊讶的是,没有那么多案件文件和法院判决能够进入搜索引擎结果。基本上,这是关于人,公司,组织和历史事件的大量数据,如果您知道去哪里可以访问。
1.2.3学术研究
学术研究仍在继续世界各地的每一天。通常,调查结果会在新闻中报道,而其他时候却没有引起注意。但是,您可以在各种大学服务器上存储的数据库中找到所有隐藏在深层网络内部的研究。
通常,这些学术数据库可供公众访问和搜索,但是有一些系统
但是,在深层网络上查找学术研究和研究结果的数据时,最好的选择是提供的免费搜索工具。
这些是大型组织,由Google(Google Scholar)和Microsoft(Microsoft Academic Research)等大型组织提供。这些搜索表单将深入到学术研究数据库中,并提取出最重要的研究和发现给你。您不会通过搜索引擎找到这些,而只能通过这些学术研究数据库搜索工具找到这些数据,这些工具会为您从深层网络中提取数据。
1.3 Tor网站
信息数据库和各个组织的私人搜索工具仅构成深层网络的一小部分,然后Tor代表了秘密的黑暗角落,很少有受人尊敬的人敢去。
将Tor视为另一种网络。从字面上看,这是它自己的网络,网站没有任何域或IP地址。因此,搜索引擎完全无法访问它们。您需要一个特殊的浏览器-这些天被称为“ Tor浏览器捆绑包",以访问那些难以找到的网站。
Tor浏览器是您进入Tor网站的门户,您可以在其中下载盗版电影和音乐,访问可疑的色情内容或密谋犯罪。
好的-因此,这不仅仅涉及坏东西。 Tor网络也是记者,抗议者和其他人士的所在地,他们对政府或官员试图跟踪其在线活动保持警惕。 Tor网络是从Internet本身删除的一个级别,可提供一定程度的隐私和安全性。
Tor网络上的网站被称为“洋葱"网站,因为大多数网站都位于
1.3.1秘密网站
Tor浏览器可让您匿名访问普通的Internet(使用伪IP地址),扩展名为.onion。 。但是,要访问隐藏的网站,您需要找到洋葱目录。您可以浏览常规Internet,以找到列出活动的Onion网站的目录。
其中一些网站可能还包括“深度搜索"网站,这些网站充当Tor网络的搜索引擎。大多数Onion网站来来往往,因此在这里列出任何活动的站点并没有用,因为它们很可能很快就会消失。
找到这些站点的最佳方法是从标准的Internet搜索引擎开始搜索“洋葱站点",然后在Tor网络中查找搜索引擎或目录。通过Tor浏览器访问这些网站,您便会发现分散在整个深层网络中的许多秘密洋葱站点。
1.3.2非法网站和内容
通过这些目录和搜索引擎开始探索Tor网络,您很快就会意识到Deep Web的这一部分确实是多么令人惊讶。您会发现很难在开放的Web上找到各种各样的可下载内容,例如书籍,杂志和各种其他媒体。
其中大部分都是公开免费提供给公众,没有任何使用费问题,但是Tor网络中也有内容已获得完全许可,并且所有者应在此合法地收取特许权使用费。通过下载内容(例如音乐,电影等),您实际上是在从创作者那里窃取已发布的作品。
但是,这种道德问题并不能阻止Tor网络被用作Tor网络的发行中心。非法,盗版的电影,音乐和印刷出版物。
实际上,Tor浏览器提供的匿名性与创建如此多的“秘密"网站相结合,可以提供您可能希望找到的任何内容还导致非法色情,恐怖主义和犯罪手册,信用卡号码被盗等事件的扩散。
这是网络上最黑暗的部分,因此,这种内容和人们存在,应该不会令您感到惊讶–因此,如果您决定去那里,请务必小心行事。
2。深度网络研究资源
在下一章中,我们将为您提供有关如何在深度网络中查找信息,数据或其他内容的具体说明。此外。您将在每个部分中找到许多有用的资源,这将为您在无形Internet的那部分旅程中提供一个良好的起点。
2.1统计信息
想知道有多少男女使用社交网络?您是否正在为学校撰写研究论文,并且需要了解有关疾病的最新研究结果?
在搜索引擎无法访问的范围内,Internet上的可用数据量非常大,并且当涉及在线统计研究时,尤其如此。造成这种情况的原因是,通常有两种类型的组织可以使他们的业务向公众分发非常详细的统计信息:政府和教育组织。
通过利用提供的免费数据库通过这些组织,您可以发现大多数人会感到惊讶的信息。试图通过Googling来查找数据的其他人都找不到,因为要访问该数据,您需要知道这些数据库的搜索形式的URL。
以下是一些
2.1.1政府数据库
世界各地的政府为公民提供了一个虚拟仓库,上面充斥着令人印象深刻的数据。地区和人民。以下是世界各地政府数据库的一些示例。
2.1.1.1美国
美国政府内部几乎每个机构都进行某种形式的研究。因此,作为集体实体的美国政府包含了不可思议的数据量。为了向公众提供筛选所有信息的服务,政府提供了一个名为FedStats的网站,该网站可以将政府创建的统计数据集中在一个地方。
“主题链接"部分允许访问者进行筛选美国有关收养,州和国家历史数据,疾病发生率,教育统计等主题的统计数据清单。 FedStats可能是针对深层网络研究人员的最全面的统计数据库研究工具。此处找到的大多数数据都可以PDF格式或通过数据库搜索表获得。
加利福尼亚富勒顿大学的Pollak图书馆已积累了自己令人印象深刻的免费政府数据库,供您浏览信息。
有趣的数据库包括国土安全数字图书馆,儿童福利信息门户和教育工作者咨询台[ERIC]。
另一个有价值的资源政府深层网络数据库是一个称为GODORT的Wiki,即美国图书馆协会的政府文件圆桌会议。 GODORT提供了美国各州机构的清单。在该Wiki中,您可以找到美国每个州的法院案卷记录,政治信息,财产数据库等。
其他为您提供搜索引擎无法访问的信息的政府数据库,包括以下所有内容:
2.1.1.2欧洲
如果您居住在欧洲,并且正在在线寻找深层的政府网络数据库,则有很多选择。在欧洲,有很多(如果不是更多的话)部门和组织可以找到对您来说很重要的数据,但是您需要知道在哪里查找。
因为列表太长了,实际上,欧盟提供了按主题组织的政府数据库目录。
In the EU directory, you’ll find sections for Agriculture, Environment, Public Health and even local development databases like EURYDICE, the Educational system and policies in Europe where you can find facts, figures and reports about the educational systems in Europe, all buried deep inside the website as a collection of PDF reports and data.
就像美国的FedStats一样,欧洲统计的相应起点是一个名为Eurostat的网站。
在这里,您可以查找有关政府支出,政府债务和季度财务报表的数据库信息。
这是都非常适合财务信息,但是在美国国家档案馆等地方可以找到什么样的数据源呢?好吧,杨百翰大学的Harold B. Lee图书馆提供了一个名为Euro Docs的系统,它是一个庞大的目录,可将您链接到欧洲国家的历史文献。
您永远都不知道浏览时会发现什么通过这些资源。虽然其中许多只是与其他信息网站的简单链接,但许多外部网站却是数据库或大量信息的文档。
例如,在一个链接上,我偶然发现了罗马数字和罗马数字互动地图。欧洲中世纪文明。
您可以用来有效地可视化来自世界各地的公共数据的最酷的工具之一是Google Public Data Explorer,它是我们之前在PCPC.me上介绍的一种在线数据可视化工具。 。
这是一个了不起的工具,可以从上述许多相同的政府数据源中提取数据,但以可视格式显示,可以让您比较和预测世界范围内诸如国内问题之类的数据趋势,经济因素,教育和农业。
您可以从世界上任何国家的列表中进行选择,甚至可以按性别进行过滤,也可以将预测范围从50年缩小到很少。
2.1.2学术数据库
在世界范围内,有数以千计的正在进行的科学研究和研究,涉及当今世界面临的一些最重要的问题。这些研究中的许多发现都有可能影响到整个人的健康,社会信仰或法律的分支。
学术数据库可能是看不见的互联网的最深部分,因此这并非易事。涵盖所有内容,但是有一个非常明确的资源清单,可以访问Internet上最大数量的学术期刊和书籍。这些是Google搜索引擎无法访问的搜索引擎或数据库。一旦开始使用这些资源来研究统计数据,研究数据和其他数据,您会想知道如果没有这些资源,您将如何过日子。
对于学术期刊和书籍来说,最全面的搜索引擎之一是JSTOR,一个拥有1,500多种期刊,书籍和其他资源的数字图书馆。
这个非营利组织的目标是帮助研究人员,学生和其他人建立和使用“广泛的学术内容"。
即使您不打算投资获取研究材料,大多数研究和其他资源也会在引言中提供发现,因此即使您需要进行研究,也至少可以获得最终的结论。付费阅读整个报告。
使用此数据库搜索工具进行的大多数搜索结果通常会返回数百甚至数千个结果。具有讽刺意味的是,期刊和其他可用资源以示例形式显示-但是要下载完整的研究或书籍,您需要付费。
另一个颇受欢迎的资源可用于深入研究学术作品的网络Google本身拥有称为Google Scholar的资源。
Google Scholar将筛选主要期刊上发表的文章-利用与JSTOR这样的组织相同的搜索技术,并经常提供相同的结果。 Google学术搜索可让您访问美国联邦或州法院的期刊出版物,专利,甚至判例法结果(仅限于美国)。
此搜索工具的专利搜索功能值得称赞。专利数据库中隐藏着一些惊人的发现。
最著名的学术研究工具之一是教育科学研究所(ERIC)。长期以来,由美国政府教育部门运行的此系统一直是图书馆员和教育工作者进行学术研究并帮助学生找到对其工作的引用的一种工具。
ERIC可能是其中一种对学生来说是有用的资源,因为结果中提供的许多论文和研究都可以从教育机构或非营利研究组织那里获得。摘录始终可用,并且每个结果都提供指向源的直接链接。
您只能搜索经过同行评审的已发表作品,或者仅搜索直接提供全文下载的结果来自ERIC系统。易用性和许多结果的低成本使它成为深层网络上学术信息的首选研究工具。
Microsoft永远不会与众不同,以Microsoft的形式提供与Google Scholar的对等产品学术搜索。
像Google学术搜索一样,许多结果是免费提供的,但其中许多结果都包含指向付费学术期刊或期刊发行者的链接。但是可以选择摘录,因此,如果只需要论文的结果或发现,这是一种快速便捷的搜索工具,可以查找到这些内容。
如果您仅在寻找免费的论文和期刊,那么您将需要探索Genamics期刊数据库。此搜索工具和日记目录仅针对“免费提供的日记信息",允许您按标题/ ISSN进行搜索,或在感兴趣的学术领域内使用“类别浏览器"进行浏览。
该网站的外观并不是很专业,但是该网站的面容却表明该数据库包含超过101794种免费期刊,而且该清单还在不断增长。
如果是学术性的会议是您的事,那么您肯定要访问Conference Alerts网站。会议是学术界人士讨论和分享研究成果,与学术界其他专业人士会面的绝佳方式。 Conal是一个使您可以按主题,国家或城市搜索会议的网站。
该网站不仅仅是一些难以更新的死清单。该网站并不完全是一个深层的Web搜索工具,因为列表本身是基于HTML的,因此搜索引擎可以抓取这些结果。
但是,Conal高级搜索工具可让您通过以下方式搜索整个数据库:日期,您可以订阅自动警报,使您了解符合搜索条件的即将举行的会议。
如果您是学术研究人员,则需要在深层网络中寻找信息,其他有价值的资源:
2.2人员研究
人们深入研究的深层网络最常见的领域之一就是可用于查看其他人背景的资源。这可能是记者试图审查消息来源,地主正在调查潜在租户的背景,或者是其他原因来研究另一个人的原因。
在线研究人员涵盖了广泛的不同领域和资源,主要取决于您要查找的信息类型,使用方式以及与研究对象的联系或关系。
在以下各节中,您将将学习您可以对人们进行背景研究的许多不同方式。在大多数情况下,这些服务是免费的,但是在需要付费的情况下,这将被清楚地指出。
2.2.1采用研究
标签: