E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
JKPacket权威指南
Hadoop
权威指南
-ch3 HDFS(4)
注:本文涉及书中3.6小结数据流1.文件读取客户端读取文件时,HDFS、namenode和datanode之间的数据流结合上图,客户端通过调用FileSystem对象的open()方法来打开希望读取的文件step1.DistributedFileSystem通过使用RPC来调用namenode,以确定文件的起始块的位置。注:RPC是远程过程调用(RemoteProcedureCall)是一个计算机
元素周期表的十七君
·
2020-01-05 02:49
k8s之pod调度亲和性和反亲和性
nodeSelector亲和性和反亲和性调度nodeAffinity节点亲和性podAffinitypod亲和性podAntiAffinitypod反亲和性欢迎关注壹家大数据,后台回复“k8s”,获取k8s
权威指南
下载链接
冻梨不是梨
·
2020-01-04 23:36
《JavaScript
权威指南
》阅读笔记(二)
对象创建对象的方式对象直接量:varo={x:1,y:2,f:function(){...}}对象直接量new关键字:newDate(),newArray()Object.create()方法:varo1=Object.create({x:1,y:2});//o1集成了属性x和y;还可以传入null来创建一个没有原型的对象,varo2=Object.create(null);//o2不集成了任何属
zhangivon
·
2020-01-04 22:26
Hadoop
权威指南
-ch3 HDFS(5)
注:本文涉及书中3.7~3.8小结使用现成的工具将数据导入HDFS中可以使用现成的工具,如Flume和Sqoop,而非写程序来将数据导入HDFS中。1.ApacheFlume典型应用场景:从另外一个系统中收集日志数据2.ApacheSqoop将数据从结构化存储设备批量导入HDFS中多个HDFS之间的并行复制1.在两个运行着相同HDFS版本的集群之间复制数据通过distcp来实现2.在两个运行着不同
元素周期表的十七君
·
2020-01-04 21:47
《Android编程
权威指南
》之Android开发初体验
本书籍的第一章,最简单的一章内容,入门此书的开始,哈哈~~~关于《Android编程
权威指南
》的学习总结,就是这么任性,不按章节套路来做笔记。
夜远曦白
·
2020-01-04 20:29
MongoDB
权威指南
学习笔记(2)--设计应用
Mongo设计应用索引使用ensureIndex()创建索引db.users.ensureIndex({"username:1})简介通常。在一个特定的集合,不应该拥有两个以上的索引复合索引索引的值是按照一定顺序排列的,因此,使用索引键对文档进行排序非常快。然而,只有在首先使用索引键进行排序时,索引才有用。复合索引就是建立在多个字段上的索引db.users.ensureIndex({"age":1
EarthChen
·
2020-01-04 13:17
8月,推荐给程序员们的技术书
八月,好书来袭,在Swift刚刚发布不久之后,即将出版《Swift
权威指南
》一书,预计8月下旬上市,敬请关注,据说是国内第一本含金量超过Swift官方文档的原创图书,到时等你们来评分。
出版圈郭志敏
·
2020-01-04 09:40
Hadoop
权威指南
示例代码运行一:Resource request:
exceeds maximum AM resource allowed
在尝试Hadoop
权威指南
(第四版)6.5.2在集群上运行mapreduce任务时出现错误:,错误原因比较明显,是因为申请的资源超出限制,解决方式就是配置任务申请的内存.尝试了两种方法都可以.1.在手动指定的配置文件
_呆瓜_
·
2020-01-04 08:25
Hadoop
权威指南
-ch5 MapReduce应用开发
注:本文涉及书中5.1~5.7小结MapReduce编程流程step1.首先写map函数和reduce函数,并使用单元测试来确保函数的运行符合预期。step2.写一个驱动程序来运行作业。先从本地IDE中用一个小的数据集来运行它,从而改进mapper和reducer,使其能够正确处理类似输入。step3.当程序能够预期通过小型数据集,将其部署到集群中运行,不断通过扩展测试用例来改进mapper和re
元素周期表的十七君
·
2020-01-03 13:26
Hadoop
权威指南
第三版-中文-ch3 (6)Hadoop存档
注:本文涉及书中3.9小结Hadoop存档1.综述Hadoop存档文件或HAR文件,是一个高效的文件存档工具,它将文件存入HDFS块,在减少namenode内存使用的同时,允许对文件进行透明地访问。具体来说,Hadoop存档文件可以用作MapReduce的输入。个人理解:为什么需要Hadoop存档文件?Hadoop存档文件的出现,可以解决HDFS的小文件处理问题。某博客对Hadoop存档的详细解释
元素周期表的十七君
·
2020-01-03 12:07
《AngularJs
权威指南
》读书笔记---指令
《AngularJs
权威指南
》记得最开始学习ionic混合开发的时候,朋友们都推荐我先学学angular.js,然后再看ionic框架的东西;现在想来也确实,ionic框架基本都是UI相关的知识,并不难
火之玉
·
2020-01-03 03:43
Java垃圾回收基础知识
事后通过加大堆内存暂时先优化了一下,顺便买了一本《Java性能
权威指南
》,研究了一下,发现其中的垃圾收集章节基本上能够解释所有的问题了。
何约什
·
2020-01-03 03:42
我只是想弄懂缓存而已~
关于HTTP缓存,一直都想好好了解一下,之前也在掘金上搜过一些文章,也看过《HTTP
权威指南
》缓存那一章,可无奈的是,总是无法形成一个系统的联结,只是知道有这么些HTTP定义的字段跟缓存相关,但是具体这些字段之间的关系啊
一个笑点低的妹纸
·
2020-01-03 01:39
《Hadoop
权威指南
第4版》 - 第四章 关于YARN - hadoop的集群资源管理系统
简介YARN提供请求和使用hadoop集群资源的API向上隐藏细节提供更高层的API4.1YARN应用运行机制-资源请求-应用生命周期-构建yarn应用4.2YARN与MapReduce1相比(MapReduce特指hadoop1的版本,2/3依次对应)-4.3YARN中的调度调度选项FIFO调度器容量调度器(多个请求队列调用一个hadoop集群,每个队列请求量上限不可逾越)公平调度器(动态平衡资
山枫叶纷飞
·
2020-01-02 20:00
MongoDB 参考手册
学习《MongoDB
权威指南
·第2版》的笔记,结合MongoDB官方最新文档(v3.6),简单记录一些概念、注意点、语法糖,方便使用的时候快速查阅、参考。
小鱼爱小虾
·
2020-01-02 17:56
《Hadoop
权威指南
第4版》 - 第三章 Hadoop分布式文件系统 - 设计概念/数据流/Java接口
3.1HDFS的设计概念HDFS以流式数据访问模式来存储超大的文件HDFS延时较高,HBASE到可以是较好的选择.大量的小文件,namenode(命名结点/空间)将文件系统的元数据存储在内存中,每个大概占150Bytes,上百万/千万时需要考虑物理机的内存大小HDFS只支持单用户在"文件末尾"的追加的方式写入数据3.2HDFS的概念数据块:数倍于磁盘的数据块,通常MapReduce中的map任务一
山枫叶纷飞
·
2020-01-02 15:00
《Kuberbetes
权威指南
》笔记:Kubernetes基础
《kubernetes
权威指南
》是本不可多得的好书,这里记录一下自己的读书笔记以及按照书中搭建的源代码。
行书以鉴
·
2020-01-02 12:33
Hadoop
权威指南
-ch4 Hadoop的I/O(4)文件的数据结构
注:本文涉及书中4.5小结基于文件的数据结构有两种文件格式:1.SequenceFile2.MapFile·SequenceFileSequenceFile为二进制键/值提供了一个持久数据结构,适合日志文件。可以把SequenceFile当做一个容器,把所有文件打包到SequenceFile类中可以高效的对小文件进行存储和处理。1.SequenceFile的写操作通过createWriter()静
元素周期表的十七君
·
2020-01-02 02:32
程序员专题书籍分享
1)计算机基础网络书籍HTTP
权威指南
(Davi
程序员小哥哥
·
2020-01-02 01:47
全栈工程师
权威指南
根据StackOverflow2016年开发者调查显示,全栈工程师是最受的开发者职业。毫无疑问现在有许多在线或个人课程来帮助程序员成为全栈开发者,甚至帮助这些开发者找到高薪的开发工作。一些流行的在线课程,例如:Lynda,Udacity,Coursera,Thinkful,GeneralAssembly。除了这些在线课程,还有好多个人的新手训练营来提供给web开发者必须的技能。在这篇文章中我不会讨
前端黑板报
·
2020-01-01 22:48
Web性能
权威指南
PDF扫描版
Web性能
权威指南
是谷歌公司高性能团队核心成员的权威之作,堪称实战经验与规范解读完美结合的产物。《Web性能
权威指南
》目标是涵盖Web开发者技术体系中应该掌握的所有网络及性能优化知识。
cad教程分享
·
2020-01-01 16:14
完整的HTTP通信步骤(7步)
学了这么就才发现,HTTP对于前端有多重要,所以一边写着爬虫用着flask,一边又回来翻看HTTP
权威指南
了:简单说几个要点吧,这些是经常用到的HTTP通信机制是在一次完整的HTTP通信过程中客户端(web
莫莫33
·
2020-01-01 16:12
hadoop 学习笔记(1) -- 一个例子解释 MapReduce
map-reduce是hadoop的核心概念之一,hadoop
权威指南
中以一个天气数据处理的例子说明了map-reduce的好处:map阶段将工作划分为可以并行的部分并进行调度;在reduce阶段提供了方便的数据整合方式可以将任务分散到多个机器上并行执行
millions_chan
·
2020-01-01 12:07
http
权威指南
第四章
连接管理重点http是如何使用tcp连接的;tcp连接的时延、瓶颈以及存在的障碍http的优化包括并行连接、keep-alive(持久连接)和管道化管理管理连接是应该以及不应该做的事情4.1tcp连接世界上几乎所有的http通信都是由tcp承载的,tcp是全球计算机及网络设备都在是用的一种常用的分组交换网络分层协议集。客户端可以打开一条tcp连接,连接到服务器,一旦连接建立,客户如和服务器的交换报
shenyifu
·
2020-01-01 11:43
《HTTPS
权威指南
》-公钥基础设施(PKI)学习笔记
握手中的身份验证的流程:由《HTTPS
权威指南
》-协议学习笔记知道了握手协议中身份验证流程,这里再摘出一遍:1、Client向Serversayhello2、Server将明文信息(包含publicKey_server
羽纱
·
2020-01-01 04:09
A Year Of Books - 2016 Javaer书单
隐匿在计算机软硬件背后的语言》《Linux内核设计与实现第3版》《WireShark网络分析就这么简单》TCP《WireShark网络分析的艺术》TCP《TCP/IP指南》卷1卷2TCP/HTTP值得看《HTTP
权威指南
BYSocket泥瓦匠
·
2019-12-31 21:15
《Hadoop
权威指南
第4版》 - 第二章:关于MapReduce -一种可用于Hadoop数据处理的编程模型
1.实现一个简单的MapReducemap函数进行准备数据,reduce函数进行处理引入pom依赖org.apache.hadoophadoop-mapreduce-client-core2.7.1org.apache.hadoophadoop-common2.7.1input.txt简化后的数据源195001950221950-11194911119497818982222MaxTemperat
山枫叶纷飞
·
2019-12-31 19:00
《Hadoop
权威指南
第4版》 - 第一章:初识Hadoop
1.HDFS是Hadoop的文件管理体系,全称为HadoopDistributeFileSystem2.MapReduce适用于处理整个数据集或者大多数数据集MapReduce的优势离线计算,等待较长时间一个基本的批处理系统3.YARN(Yetanotherresourcenegotiator)是Hadoop的新的处理模型,集群资源管理系统作用允许任何一个分布式程序基于Hadoop集群的数据来运行
山枫叶纷飞
·
2019-12-31 17:00
Hadoop
权威指南
-ch4 Hadoop的I/O(3) 序列化
注:本文涉及书中4.3小结序列化与反序列化1.定义序列化(serialization):将结构化对象转化为字节流。反序列化(deserialization):将字节流转回结构化对象的逆过程。2.应用场景序列化在分布式数据处理的两大领域经常出现:进程间通信和永久存储。在Hadoop中,多个节点上的进程间通信是通过RPC(远程过程调用)实现的。RPC协议将消息序列化成二进制流后发送到远程节点,远程节点
元素周期表的十七君
·
2019-12-31 16:43
我是如何学习编程的
朋友说到自己最近在看《http
权威指南
》但是全都是概念性的知识,看着就困,问我是如何学习的。我说,看这类说我也会睡着。
程序员Hani
·
2019-12-31 13:20
《DAX
权威指南
》简体版 (第三章)02
《DAX
权威指南
》简体版(第三章)02了解ALL,ALLEXCEPT和ALLNOBLANKROWALL系列函数包括ALL、ALLEXCEPT以及ALLNOBLANKROW。
PowerBI非官方
·
2019-12-31 11:32
Android编程
权威指南
(第2版)—第15章挑战练习
15.5挑战练习:ShareCompatmReportButton.setOnClickListener(newView.OnClickListener(){@OverridepublicvoidonClick(Viewview){/*Intenti=newIntent(Intent.ACTION_SEND);i.setType("text/plain");i.putExtra(Intent.EX
17浩浩
·
2019-12-31 07:49
JS—鼠标滚轮
自从12月20日考完六级(丢人),又和闺蜜过了两天圣诞,中间还投了几份简历,学了学jquery
权威指南
,期望年前可以在北京找到一份工作。今天周五啦,知道今天写的笔记,周六日肯定又会沉啦。
Miss____Du
·
2019-12-30 02:21
《Android编程
权威指南
》之使用 fragment argument 篇
本章要实现从fragment中启动CrimeActivity截图取自此书从fragment中启动activity类似于从activity中启动activity。照着敲一遍代码,此小结无非就是启动下activity,在fragment中直接getActivity()得到activity,然后调用activity中的方法来拿到activity中的数据,但是这样做就破坏了fragment的封装,它不再是
夜远曦白
·
2019-12-30 00:20
Netty源码学习(2)--服务器启动
使用版本为:Netty服务端创建的时序图,如下(摘自《Netty
权威指南
(第二版)》)举例:服务端启动代码:开启一个服务端
未名枯草
·
2019-12-29 21:01
book_01
1集群管理:1Kubernetes
权威指南
:从Docker到Kubernetes实践全接触(纪念版)3每天5分钟玩转Kubernetes2docker:29每天5分钟玩转Docker容器技术30Docker
Kate_Blog
·
2019-12-28 15:38
环游JQ历险记:锋利与权威笔记(一)
本文以JQ来简写JQuery,锋利的jqv1.3jq
权威指南
v1.8主要是由于现在更新太快,这两个结合讲2.0以下的jq应该还算ok,把这两本经典柔和一下,就我而言觉得初学者学习锋利的jq是个很好的选择
coderLfy
·
2019-12-28 13:39
《DAX
权威指南
》简体版 (前言)
《DAX
权威指南
》简体笔记01《TheDefinitiveGuidetoDAX》(俗称紫皮书。
PowerBI非官方
·
2019-12-28 05:47
JS 中的 apply
遇到了一个非常有意思的问题,这里专门讨论一下请看以下代码functionSet(){this.values={};this.n=0;this.add.apply(this,arguments);}摘录自《javascript
权威指南
YXCoder
·
2019-12-28 02:36
Netty 原理
为了不被误导,我专门买了本《Netty
权威指南
》,仔细阅读了一遍,而且微信请教了锋哥(李林锋),遂整理出这篇分享。本人一直秉承原则:宁愿不写、少写,也尽量不写错的知识!以免误人子弟!
CleverApe
·
2019-12-27 16:03
git 整理笔记
git学习廖雪峰的Git教程git中文手册、比较适合新手视频教程:Git零基础实战视频教程(共49课时)git
权威指南
比较全面和深入的分布式git集中式svn分布式不用联网,第一步涉及到的不熟悉操作mkdirgitinitlsls-ah
孙小二wuk
·
2019-12-27 15:18
读《图解HTTP》
信息绝对不等于认知,互联网碎片化信息究竟有多少价值需要认真筛选之前就想了解一下关于计算机网络方面的知识,网上搜来搜去就是那两本书,一本是《HTTP
权威指南
》,这本书的厚度快赶上新华字典了;另一本是《TCP
只敲代码不偷桃
·
2019-12-27 09:44
Java性能优化
权威指南
第三章JVM概览第一部分
内建的JIT编译器、日渐成熟的垃圾收集器(多线程化)、不断改进的运行时环境(JVMRuntimeEnvironment)。HotSpotVM组件VM运行时(Runtime)、JIT编译器(JITCompiler)、内存管理器(MemoryManager)。HotSpotVM的基本架构HotSpotVM架构功能强大,可以满足高性能和高扩展性。支持HotSpotVMJIT编译器的动态优化,可以在Jav
每天学点编程
·
2019-12-26 23:34
互联网图书总结
2.Flex4
权威指南
(JeffTapper)RIA技术类图书,入门学习也挺不错的!3.PhoneGap实战(董霙)感觉phonegap的书不多,网上教程倒是挺多的,而且更新也快。
依米花1993
·
2019-12-26 20:27
Swift编程
权威指南
(第2版)第 11 章 集合笔记
//1.集合是一组不相同的实例的无序组合正好和数组相反//2.跟字典一样,集合内的值是无序的//3.字典的键必须唯一,集合也不允许有重复值//4.为了确保元素单一,就要符合Hashable协议,类似就跟字典的键一样(一键多值但不可以一值多键)?//5.集合存储单个元素//6.创建Set集合实例vargroceryBag=Set(["Apples","Oranges","Pineapple"])//
AryaYang
·
2019-12-26 16:04
程序员9月书讯
《HTTPS
权威指南
:在服务器和Web应用上部署SSL/TLS和PKI》【含社区电子版】2.《挑战程序设计竞赛2:算法和数据结构》3.《魔力Haskell》4.《SpringBoot实战》【含社区
图灵教育
·
2019-12-26 06:57
伪类
CSS
权威指南
定义:a(锚)元素分为两种类型,已访问的和未访问的。这些类型称为伪类。伪类一开始单单只是用来表示一些元素的动态状态,典型的就是链接的各个状态。
小金鱼要努力
·
2019-12-26 02:40
推荐给Android开发者的七本图灵书
Android编程
权威指南
作者:BrianHardyBillPhillips译者:王明
图灵教育
·
2019-12-25 14:20
Netty
权威指南
笔记(二):Java NIO 和 Netty 对比
Netty
权威指南
笔记(二):JavaNIO和Netty对比Netty是业界流行的NIO框架之一,它的健壮性、功能、性能、可定制性和可扩展性在同类框架中都说首屈一指的,也已经得到了成百上千商用项目的验证
albon
·
2019-12-25 08:25
《Netty学习笔记》:Http+Xml协议栈,Jibx自动绑定使用排坑
最近在学习《netty
权威指南
》,在第十章搭建http+xml服务器中,使用到了Jibx绑定对象和ant配置。书中对这一部分描述太少,同时我的为maven项目,在代码过程中遇到一些坑。
icecrea
·
2019-12-24 01:48
上一页
47
48
49
50
51
52
53
54
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他