被墙不是使用百度的理由
百度上充斥各种垃圾广告,魏则西等事件害死了一些年轻鲜活的生命。为了良知和避免误导,常规搜索请远离百度。除了google,还有一些可以直接访问的,相对较良心的搜索引擎存在的。
- oscobo
页面简洁,提供的内容则较丰富。
- bing
微软bing是世界第2大搜索引擎,本身做得并不差。但是首页的导航图片都晃得人眼花,所以我一般都直接让它默认进site:china-testing.github.io以避免图片出现。另外bing和病是一个音,有人说是微软有病。不过客观的说,bing的搜索结果通常还是强过国内这些引擎的。
- 搜索引擎切换
google,bing, oscobo等之间切换的感觉并不太好,可以使用收藏或者自己搞个网址导航.比如个人的网址导航:
找书
通用搜索引擎
通用搜索引擎能找到一些书,但是有时没有专用的书籍搜索网站精准。
比如:在bing上搜索The Basics of Process Mapping PDF文档,该模式尽量不要在百度上用,百度弹出 一堆大多没用的文库内容。
新浪微盘上面有大量的书籍下载:在360搜索手诊书籍
更多示例
site:docs.google.com 武冈
site:drive.google.com pandas
site:s3.amazonaws.com python
site:dropbox.com python filetype:pdf
site:vdisk.weibo.com 武冈州志
文档搜索引擎
- 全球最大的电子书库 b-ok
以下载 The Basics of Process Mapping 2nd - 2011 为例:
这本国内很难找到,国外多数网站要信用卡注册的书就这样轻易地下载了。
新浪爱问共享资料
鸠摩捜书
https://www.jiumodiary.com
- Library Genesis
http://gen.lib.rus.ec/
- faganfinder
http://www.faganfinder.com/filetype/
比较老,实际是调通用搜索引擎的结果
- general-search
http://www.general-search.com
在https://cse.google.com/cse/,我们还可以自定义搜索引擎
更多参考:
ws:
• [300+ Social Networking Sites] (https://cse.google.com/cse/publicurl?key=AIzaSyB2lwQuNzUsRTH-49FA7od4dB_Xvu5DCvg&cx=001794496531944888666:iyxger-cwug&q=%22%22)
• [250+ Video Sharing Sites] (https://cse.google.com/cse/publicurl?key=AIzaSyB2lwQuNzUsRTH-49FA7od4dB_Xvu5DCvg&cx=001794496531944888666:ctbnemd5u7s&q=%22%22)
• [File Sharing Sites Search] (https://cse.google.com/cse/publicurl?key=AIzaSyB2lwQuNzUsRTH-49FA7od4dB_Xvu5DCvg&cx=001794496531944888666:hn5bcrszfhe&q=%22%22)
• [Torrent Search] (https://cse.google.com/cse/publicurl?key=AIzaSyB2lwQuNzUsRTH-49FA7od4dB_Xvu5DCvg&cx=001794496531944888666:ixpabzzplzy&q="")
IT类书籍
- smtebooks 强烈推荐,书籍多,页脚页眉没有打广告标签,直接下载,可能要翻墙。
- IT类书籍汇总 强烈推荐 直接下载
- 2018最佳机器学习工具书及下载(持续更新) 强烈推荐 直接下载
- allitebooks IT英文书籍 - 推荐
- 爱知客 IT资料
- panuso 百度、新浪网盘下载 - 推荐 左下角的弹出广告比较烦人
- finelybook IT英文书籍
- 炼数成金 IT书籍,需要注册,经常需要积分
- csdn IT类书籍和文档,需要注册,经常需要积分
- 经管之家经济IT类文档,需要注册,经常需要积分
- 大家网 IT英文等文档,需要注册,经常需要积分
- 更多参考
- http://www.gutenberg.org/
- 电驴
文档类型介绍
doc Microsoft Word <=2003
docx Microsoft Word >=2007
ODT: OASIS OpenDocument XML-based standard。可用Apache OpenOffice、NeoOffice (Mac), AbiWord (Mac and Windows), and KWord (Unix)等打开编辑。也可用Word查看。
网页:.html和.htm
xls Microsoft Excel<=2003
xlsx Microsoft Excel>=2007
ODT: OpenDocument Spreadsheet。可用Apache OpenOffice、NeoOffice (Mac), LibreOffice (Mac and Windows)等打开编辑。也可用Excel查看。
ppt: Microsoft PowerPoint<=2003
pptx: Microsoft PowerPoint>=2007
ODP:OpenDocument Presentation。可用Apache OpenOffice、NeoOffice (Mac), LibreOffice (Mac and Windows)等打开编辑。也可用PowerPoint查看。
txt
pdf阅读工具
https://get.adobe.com/reader
https://www.openoffice.org
https://www.libreoffice.org
https://www.sumatrapdfreader.org/free-pdf-reader.html --推荐
福昕pdf阅读器等。
数据泄漏信息
数据泄漏可能包括信用卡信息,PII,患者的健康信息,财务信息,电子邮件/社交网站用户名和密码,商业秘密,公司计划,知识产权信息和属于政府的军事信息等。
• WikiLeaks (https://wikileaks.org)
• Cryptome (https://cryptome.org)
• Offshore Leaks (https://offshoreleaks.icij.org
灰色文献
灰色文献是世界商业出版系统产生的资料,主要有两种类型。
•灰色文献
•灰色信息
灰色文献包括书籍,期刊,杂志和任何可能通过传统书店或学术出版物公开获得。
用户通常支付订阅费以获得对这些资源的访问权或购买。springer,提供对数百万科学文档的访问.诸如期刊,书籍,系列,协议和参考作品。
灰色信息有一些专门的渠道,包括以下内容:
•学术论文
•预印本
•会议录
•会议和讨论文件
•研究报告
•营销报告
•技术规范和标准
•论文
•贸易出版物
•备忘录
•政府报告和未商业出版的文件
•翻译
•时事新闻
•市场调查
•书籍和文章的草稿
•Academia(https://www.academia.edu)是学术界的平台分享研究论文 - 目前有超过1900万篇论文,涵盖所有学术科目。
•学术指数(www.academicindex.net)搜索引擎,基于一组优质网站(包含学者,图书管理员,教育工作者和图书馆联盟)。
•Academic Torrents(http://academictorrents.com)社区维护的数据集和分布式存储库。它主持学术研究,课程,数据集,论文和使用Torrent技术的集合,每个用户可以存储研究论文并提供下载。
•美国博士论文(www.opendissertations.com)免费提供超过172,000篇论文和论文。
•ArchiveGrid(https://beta.worldcat.org/archivegrid)从档案馆汇总的500多万件档案资料,图书馆,博物馆和历史社团。主要议题包括历史文件,个人和家庭论文和历史。
•Google学术搜索(https://scholar.google.com/schhp?hl=en)谷歌搜索引擎找到学术研究。结果排名
根据引用次数(根据引用次数计算)引用研究的人和出版物的可信度。您也可以创建提醒(例如已经涵盖的Google提醒)在发表新的符合您的搜索条件学术研究论文时获得通知。
•比勒费尔德学术搜索引擎(https://www.base-search.net/Search/Advanced)包含超过1亿个文档。
•Archive Portal Europe(www.archivesportaleurope.net)提供
获取来自不同欧洲的档案材料的信息。涵盖众多主题的国家(如农业,卫生,正义,政治和科学)。
•社会科学研究网(https://www.ssrn.com/en)提供超过50万份研究论文,涵盖30个主题。
•澳大利亚国家图书馆(http://trove.nla.gov.au)有超过5亿澳大利亚和在线资源。覆盖书籍,期刊,年度报告,图像,历史报纸,地图,音乐,档案等。
•ScienceDirect(www.sciencedirect.com)包含超过250,000个开放获取(免费阅读和下载)科学文章,涵盖技术和医学研究。
•PQDT Open(https://pqdtopen.proquest.com/search.html)免费提供对学位论文和论文的开放访问。
•英国国家档案馆(http://discovery.nationalarchives.gov.uk)拥有超过3200万条描述
国家档案馆拥有的记录和2,500多个档案在英国各地,其中许多都可以下载。
•牛津学术(https://academic.oup.com/journals)包含法律,商业,科学,社会科学,艺术和医学期刊。
•Page Press(www.pagepress.org)包含学术上的开放访问期刊。
•CERN文件服务器(https://cdsweb.cern.ch)免费提供访问成千上万的文章,书籍,重印,演示和
谈话,多媒体和外展主要涉及物理科学。
•High Wire(http://highwire.stanford.edu/lists/freeart.dtl)有免费的在线全文文章。
•灰色指南(http://greyguide.isti.cnr.it)的资源为灰色文件。
•Beyond Citation(www.beyondcitation.org)提供有关不同的学术数据库和其他数字研究馆藏。
•Crossref(https://search.crossref.org)搜索元数据(标题,作者,DOI,ORCID ID,ISSN)超过9200万期刊文章,书籍,标准和数据集。
•数据库(https://databases.today)是公开的目录可用数据库下载免费资源以确保安全
研究人员和记者。音乐,档案等。
电影下载
高清片源网
电影天堂
BT天堂
美剧天堂
动漫花园资源网
嘀哩嘀哩
搜索引擎概述
互联网用户的数量正在稳步增长,活跃网站的数量也在增加。根据Netcraft 2018年1月的Web服务器调查,有1,805,260,010网站。谷歌内部搜索估计有超过130万亿网页,截至2017年10月其中约有500亿已被纳入谷歌搜索索引。
参考资料
Bing和Google等典型搜索引擎免费提供服务。google为最专业的提供者。
关键字发现可帮助搜索者扩大搜索范围,包括相同关键字的不同变体和揭示同义词和语义相关的术语和短语。
以下是最受欢迎的关键字研究工具:
Google关键字建议工具:GoogleBing、亚马逊和YouTube关键字。
Google AdWords和Google趋势
One Look: 查找关键字。
Google可以使用语音输入搜索查询,单击麦克风图标即可。 Google还支持搜索图片,视频,新闻组和地图以及Google翻译服务。
1.社交媒体网站搜索,比如:@facebook:nihad hassan
2.搜索主题标签,#USAelection。
3.完全匹配,"python自动化测试人工智能"
4.会搜索同义词。例如,pythonguide将返回python tutorials, tips, helper, video trainings等。
5.或:Apress OR springer 或 Apress|Springer
6.排除:lacoste -animal
7.模糊匹配:data hiding in *
8.区间:USA earthquake 1980..2000
9.类似网站:related:so.com
10.查看信息:info:so.com
11.关键字的定义 define:information
12.cache:cache:apress.com
13.歌曲:Music:云海林飞 电影:Movie:上帝也疯狂
14.天气:weather:武冈
15.股票:stocks:MSFT,更多股票信息:https://www.marketwatch.com/tools/quotes/lookup.asp。
16.地图:map:武冈
17.时间:time: 武冈 参考:http://localtimes.info http://www.thetimenow.com
18.货币和度量转换:1000 dollars in yen
19.航班:america flight 10
谷歌也因其图像搜索而闻名: https://www.google.com/advanced_image_search
Google Advanced Operators
高级选项(Google Advanced Operators)也称为Google hacking或Google dorks。当用户将搜索关键字与高级Google搜索结合时,就会发生黑客攻击,例如易受攻击的Web服务器或特定公司中员工/客户的个人识别信息(PII personally identifying information)文件列表。
站点搜索:pepxect site:china-testing.github.io computer forensics site:gov
全文包含搜索:allintext: python 每周 一练 测试
标题包含搜索:allintitle: python 自动化测试 人工智能。对图片搜索,则匹配图片名。
url包含搜索:allinurl:python pandas
文档搜索:武冈 机场 filetype:pdf。多种类型:武冈 机场 filetype:pdf OR filetype:doc
由Johnny Long创建的谷歌黑客数据库(Google Hacking Database)包含数以百计的即用型高级Google搜索字词。 它可以帮助您找到以下内容:
•易受攻击的Web服务器
•包含敏感信息的文件,例如usernames /密码以及包含设置和其他重要信息的配置文件
•没有保护的敏感目录
•可以被利用来入侵信息系统服务器,数据库和其他软件生成的错误消息
•有关网络设备的信息,例如防火墙,IDS日志和配置
•不同的物联网设备和未受保护的设备的控制面板
•隐藏页面,如Intranet,VPN服务等
https://www.exploit-db.com/google-hacking-database/
一些示例:
Index of /backup
“robots.txt” “Disallow:” filetype:txt:
budget site:gov filetype:xls
更多参考:
allintext:Google Dorks filetype:pdf
allintitle:Google hacking
一些基于google的匿名搜索引擎
• StartPage (https://www.startpage.com)
• Lukol (https://www.lukol.com)
• Mozbot (https://www.mozbot.com )
bing技巧
- 精确匹配:“” “French food”
- 排除:NOT或- Virus -computer
- 或:Nokia OR Apple
- 定义:define:computer
- 站内搜索:pepxect site:china-testing.github.io
- 文件:武冈 机场 filetype:pdf
- inbody: inbody:digital privacy
- IP:ip:193.70.110.132
- 语言:unicef language:ar 参考
- Feed: feed:computer security
- 优先: computer hacking prefer:tutorials
bing和google搜索结果的比较:http://bvsg.org/index.html
一些不跟踪隐私的搜索引擎:
https://www.oscobo.com
https://duckduckgo.com
https://www.qwant.combased
https://swisscows.com
https://privatelee.com
https://www.gigablast.com
http://www.gibiru.com
其他搜索引擎
1 Yahoo! Advanced web search
https://search.yahoo.com/web/advanced
2 Yandex https://www.yandex.com
3 AOL http://search.aol.com
4 Dothop http://dothop.com/home
5 Excite www.excite.com
6 Goodsearch https://www.goodsearch.com
7 Factbites www.factbites.com
8 Infospace http://infospace.com
9 Lycos www.lycos.com/
10 Exalead www.exalead.com/search/web/
11 Search https://www.search.com/
12 Search Engine Colossus http://searchenginecolossus.com (contains a directory of search engines from 317 countries and territories worldwide, covering all spoken world languages)
13 Search Engines Directory www.searchengineguide.com/searchengines.html
14 The Ultimate Search Engine Links Page http://www.searchenginelinks.co.uk
国家相关的搜索引擎
1 Yandex https://www.yandex.com russia
2 Search https://www.search.ch/ Switzerland
3 alleba www.alleba.com/ philippines
4 Baidu https://www.baidu.com China
5 eniro https://www.eniro.se Sweden
6 Daum https://www.daum.net (www.naver.com) South Korea
7 goo www.goo.ne.jp Japan
8 Onet https://www.onet.pl poland
9 parseek www.parseek.com iran
10 SapO https://www.sapo.pt portugal
11 aOnDe www.aonde.com Brazil
12 Lableb https://www.lableb.com arabic-based search engine
参考资料
- 讨论qq群144081101 591302926 567351477 钉钉免费群21745728
- 本文涉及的python测试开发库 谢谢点赞!
- 本文相关海量书籍下载