E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据工具
分享两个值得收藏的网站
1.199IT
大数据工具
导航(http://hao.199it.com/)与其说这是一个神器,倒不如说这是一个数据采集的神器合集。
哭泣的红羊
·
2017-07-12 11:34
【大数据江湖】全球100款
大数据工具
汇总,入行必备
导读:为方便从事大数据相关工作的朋友使用,最新汇总了全球100款
大数据工具
,可帮助大家在不同的工作场景下更方便、快捷地处理数据,赶快收藏起来,以备不时之需哦!
IT大佬
·
2017-07-11 00:00
速度收藏 | 100+大数据开源处理工具汇总
本文除了一些常用的
大数据工具
,还总结汇总了其他
大数据工具
,几乎是最全的
大数据工具
的总结。如果你想入门大数据,可以对他们进行简单的了解。如果你想学习自己熟悉意外的
大数据工具
,可以看这篇文章。
数控小J
·
2017-07-10 10:51
大数据
大数据开源工具
数据分析
大数据平台搭建
大数据应用
大数据处理
各种
大数据工具
架构
大数据的概念大数据的特点可以用4个V来描述:Volume(大)、Variety(多)、Velocity(快)、Value(低)大数据管理:Hadoop是GoogleGFS以及MapReducc系统的开源实现,用户可以在不了解分布式底层细节的情况下开发分布式程序,但是无法做到动态和实时的分析。流计算系统能够处理实时的数据流,实时分析系统主要采用传统的MPP技术从海量数据中实时提取有价值的汇总信息::
ChenVast
·
2017-06-05 14:09
各种
大数据工具
架构
大数据的概念大数据的特点可以用4个V来描述:Volume(大)、Variety(多)、Velocity(快)、Value(低)大数据管理:Hadoop是GoogleGFS以及MapReducc系统的开源实现,用户可以在不了解分布式底层细节的情况下开发分布式程序,但是无法做到动态和实时的分析。流计算系统能够处理实时的数据流,实时分析系统主要采用传统的MPP技术从海量数据中实时提取有价值的汇总信息::
ChenVast
·
2017-06-05 14:09
活用
大数据工具
,让数据也能说话
大数据日益成为研究行业的重要研究目标,面对其高数据量、多维度与异构化的特点,以及分析方法思路的扩展,传统统计工具已经难以应对。工欲善其事,必先利其器。众多新的软件分析工具作为深入大数据洞察研究的重要助力,也成为数据科学家所必须掌握的知识技能。为了帮你节省时间并且让你第一次使用就能挑选出正确的工具,我们搜集和整理了数据提取、数据存储、数据清洗、数据挖掘、数据分析和数据集成方面的我们最爱用的工具。传统
西线学院
·
2017-06-01 15:55
Java开发者必备10
大数据工具
和框架
当今IT开发人员面对的最大挑战就是复杂性,硬件越来越复杂,OS越来越复杂,编程语言和API越来越复杂,我们构建的应用也越来越复杂。根据外媒的一项调查报告,中软卓越专家列出了Java程序员在过去12个月内一直使用的一些工具或框架,或许会对你有意义。先来看看大数据的概念。根据维基百科,大数据是庞大或复杂的数据集的广义术语,因此传统的数据处理程序不足以支持如此庞大的体量。在许多情况下,使用SQL数据库存
广信软件_吴文烈
·
2017-06-01 11:41
工业大数据漫谈9:开源工业大数据软件简介(上)
下面就简单介绍一些开源的
大数据工具
软件,看看有哪些能够应用到工业大数据领域。
君子藏器
·
2017-05-12 16:24
大数据及云计算
2017年2月大数据精华文章集锦
快讯ApacheBeam的前世今生:谷歌已经不再使用MapReduce了在新的一年里,选个关注热度上升的
大数据工具
学习下吧下一代大数据处理平台ApacheBeam成为Apache顶级项目大中型企业的天网
BlackEnn
·
2017-04-10 15:00
数据分析
spark
大数据
产品
Flink
HDFS跨外部存储系统的多层级存储
前言目前大数据和云计算是当下讨论非常火热的2个词,笔者也非常相信在未来的时间内,以Hadoop系统生态圈为代表的
大数据工具
,将会被更多的企业所使用。
Android路上的人
·
2017-04-03 15:06
Hadoop
HDFS
2015 Bossie评选:最佳开源
大数据工具
//2015Bossie评选:最佳开源
大数据工具
-CSDN.NEThttp://www.csdn.net/article/2015-10-20/2825959ddply摘要:Bossie奖是知名英文IT
葡萄喃喃呓语
·
2017-02-19 12:50
60款顶级大数据开源工具
IBM更是非常看好开源
大数据工具
,派出了3500名研究人员开发ApacheSpark,这个工具是Hadoop生态系统的一部分。这回我们推出了最新的顶级开源
大数据工具
排行榜。
cocacola456
·
2017-02-10 14:11
这12款开源数据分析应用软件值得关注
据NewVantagePartners公司对《财富》1000强公司的高层主管开展的调查显示,如今62.5%的企业在生产环境中至少运行一种
大数据工具
或应用软件。
linuxnews
·
2016-11-09 22:00
Hadoop和大数据:60款顶级开源工具
IBM更是非常看好开源
大数据工具
,派出
数控小J
·
2016-11-07 10:00
hadoop
数据分析
大数据
人工智能
数据可视化
60款顶级大数据开源工具
IBM更是非常看好开源
大数据工具
,派出
iamonlyme
·
2016-11-07 10:00
大数据
这12款开源数据分析应用软件值得关注
据NewVantagePartners公司对《财富》1000强公司的高层主管开展的调查显示,如今62.5%的企业在生产环境中至少运行一种
大数据工具
或应用软件。
Jack__CJ
·
2016-11-06 13:40
Linux
Bossie Awards 开源
大数据工具
最佳列表
在最佳开源
大数据工具
奖中,Google的TensorFlow和Beam无可置疑的入选,同时也有Spark,Elasticsearch,Impala,Kylin,Kafka,Zeppelin等市场热点,同时有很多新兴的项目入选
ejinxian
·
2016-09-23 09:29
大数据
Bossie Awards:开源
大数据工具
最佳列表
一年一度由世界知名科技媒体InfoWorld评选的BossieAwards于2016年9月21日公布,评选了最佳
大数据工具
奖,最佳大数据应用奖,最佳网络与安全奖等多个奖项。文章转载自开源中国社区。
csdn郭芮
·
2016-09-22 22:12
大数据工具
,在数据科学家眼中是怎样的存在?
随着
大数据工具
数量的增长和计算能力的飞跃,数据科学家越来越多地发现,如果他们想从自己的模型中获得最佳性能,那就必须考虑所使用的数据管道。数据科学工具的功能通常围绕着预测建模,机器学习和数据可视化。
DinK
·
2016-08-11 03:00
大数据
工具
大数据工具
大数据工具
:Spark配置遇到的坑
遇到的问题:在配置spark的时候,启动spark-shell正常启动和使用,但是使用脚本start-all.sh启动所有的服务时遇到问题,抛出Java异常:Unsupportedmajor.minorversion51.0原因分析看了sprak启动脚本代码,基本上就是config加载相关环境变量(Hadoop相关以及$SPARK_HOME等的需要配置好,其他spark相关的配置在conf/spa
Utopi_a
·
2016-08-04 18:43
HBase入门精要-百闻不如一Run
Hadoop,也是Hadoop生态的重要一环,如今作为一个Apache顶级项目,早已经不能将其仅仅看作Hadoop的一部分,基于Storm,Spark等框架的数据处理方案中,都有它的身影,可以说它已经成为
大数据工具
箱中非常重要的一种数据存储工具
阿羅
·
2016-07-25 07:24
在Windows和Rstudio下本地安装SparkR
www.r-bloggers.com/installing-and-starting-sparkr-locally-on-windows-os-and-rstudio/毋庸置疑,Spark已经成为最火的
大数据工具
JLOGAN
·
2016-06-08 11:10
大数据工具
大数据工具
清单
•MongoDB-一种非常流行的、跨平台、面向document的数据库。•Elasticsearch-专为云计算设计的分布式REST风格的搜索引擎。•Cassandra-一个开源的分布式数据库管理系统。最初是Facebook设计和开发的,部署在大量商用服务器上来处理大量的数据。高可用,无单点故障。•Redis-开源的(BSD)内存数据结构存储、内存库、缓存、消息代理。•Hazelcast-基于Ja
tongsh6
·
2016-05-23 11:00
java
大数据
linux下安装scala, scala IDE过程总结
hadoop与spark这两个
大数据工具
都是针对linux开发的.如果想要进行大数据开发,使用这两个工具.就不得不在使用linux系统,学会在linux下安装各种软件和开发语言.我的linux系统是ubuntu14
qq_23617681
·
2016-04-15 23:00
scala
linux
推广 | IBM在中国的大数据业务怎么玩?
从免费数据服务到数据服务超市到数据服务注入行业,IBM终于从数据工具商真正转型为数据工具+数据服务提供商,和其他
大数据工具
IT供应商拉开“鸿沟”。准入零门槛从这
财新网
·
2016-03-30 00:00
欧盟报告:
大数据工具
成网络风险重灾区
随着大数据时代的到来,数据分析类的工具也变得越来越简单化、傻瓜化。数据分析所在从原来IT部门的任务开始转向业务部门,人人使用大数据和人人分析大数据成为时代潮流。一系列方便易用的数据分析工具应运而生。方便快捷的工具降低了数据分析的门槛,却也提高了受网络攻击的风险等级。根据隶属欧盟的欧洲网络信息安全机构(TheEuropeanNetworkandInformationSecurityAgency,简称
数据分析师
·
2016-03-22 14:00
[杂记]国内某知名电商数据研发面试题
(3)你有用过什么开源的
大数据工具
吗?用过,用过Had
u010536377
·
2016-03-15 09:00
数据
数据挖掘
面试题
电商
研发
大数据工具
——Splunk
Splunk是机器数据的引擎。使用Splunk可收集、索引和利用所有应用程序、服务器和设备(物理、虚拟和云中)生成的快速移动型计算机数据。从一个位置搜索并分析所有实时和历史数据。使用Splunking处理计算机数据,可让您在几分钟内(而不是几个小时或几天)解决问题和调查安全事件。监视您的端对端基础结构,避免服务性能降低或中断。以较低成本满足合规性要求。关联并分析跨越多个系统的复杂事件。获取新层次的
carsonzhu
·
2016-02-21 15:00
Java程序员使用哪些大数据开发工具?
本次调查中覆盖了
大数据工具
。以下是调查所覆盖的主题:1、语言2、Web框架3、应用服务器4、SQL数据访问工具5、SQL数据库6、大数据7、构建工具8、云提供商今天让我们来看看大数据。
数据分析师
·
2016-02-19 15:00
阿里音乐打算用大数据发掘下一个TFboys
昨天,记者从阿里音乐得到证实,阿里音乐正在开展一项尝试:将阿里音乐平台上的用户行为数据与社交网络数据、新闻资讯数据等结合,借助阿里云“数加”上的
大数据工具
,预测哪些音乐人会成为下一个音乐巨星。
数据分析师
·
2016-02-18 19:00
2016年最新Java相关调查结果
调查显示编程语言、编程框架、数据库、
大数据工具
等受欢迎程度。个人觉得可以理解为最热排名,但不定代表使用量最多。
ranyut
·
2016-02-14 12:58
Java排行
2016年最新Java相关调查结果
阅读更多调查显示编程语言、编程框架、数据库、
大数据工具
等受欢迎程度。个人觉得可以理解为最热排名,但不定代表使用量最多。
ranyut
·
2016-02-14 10:00
Java排行
大数据工具
集详
查询引擎一、Phoenix贡献者::Salesforce简介:这是一个Java中间层,可以让开发者在ApacheHBase上执行SQL查询。Phoenix完全使用Java编写,代码位于GitHub上,并且提供了一个客户端可嵌入的JDBC驱动。Phoenix查询引擎会将SQL查询转换为一个或多个HBasescan,并编排执行以生成标准的JDBC结果集。直接使用HBaseAPI、协同处理器与自定义过滤
淘气小男孩
·
2016-02-12 11:00
大数据工具
集
类别名称官网备注查询引擎Phoenixhttp://phoenix.incubator.apache.org/Salesforce公司出品,ApacheHBase之上的一个SQL中间层,完全使用Java编写Stingerhttp://hortonworks.com/labs/stinger/原叫Tez,下一代Hive,Hortonworks主导开发,运行在YARN上的DAG计算框架http://t
淘气小男孩
·
2016-02-12 11:00
Java程序员常用的10大构建工具
Java程序员常用的10大构建工具近期,我做了一个程序员开发的调查,关于Java程序员使用的20几个
大数据工具
。
gcq123456789
·
2016-01-31 23:43
PHP
php视频
php资料
兄弟连
php开发
大数据工具
大数据处理分析的六大最好工具一、HadoopHadoop是一个能够对大量数据进行分布式处理的软件框架。但是Hadoop是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop是可靠的,因为它假设计算元素和存储会失败,因此它维护多个工作数据副本,确保能够针对Hadoop失败的节点重新分布处理。Hadoop是高效的,因为它以并行的方式工作,通过并行处理加快处理速度。Hadoop还是可伸缩的,能够处理P
java web
·
2015-12-30 23:56
技术
大数据
大数据工具
大数据处理分析的六大最好工具一、Hadoop Hadoop是一个能够对大量数据进行分布式处理的软件框架。但是Hadoop是以一种可靠、高效、可伸缩的方式进行处理的。Hadoop是可靠的,因为它假设计算元素和存储会失败,因此它维护多个工作数据副本,确保能够针对Hadoop失败的节点重新分布处理。Hadoop是高效的,因为它以并行的方式工作,通过并行处理加快处理速度。Hadoop还是可伸缩的,能够处理
lurao
·
2015-12-30 23:00
hadoop
大数据
Airbnb开源的三个
大数据工具
今天Airbnb召开了第一次开放技术大会OpenAir,重点是数据驱动在airbnb开发过程中的实践,作为内部人士,我来给大家分享、总结一下3个airbnb开源大数据神器Airpal第一个神器叫Airpal,是airbnb内部最炙手可热的数据分析工具,目前在github上面有900多个star。Airpal是建立在Facebook的Prestodb上的一个可视化分布式SQL查询引擎。Airbnb现
ronon77
·
2015-11-17 17:50
Airbnb开源的三个
大数据工具
今天Airbnb召开了第一次开放技术大会OpenAir,重点是数据驱动在airbnb开发过程中的实践,作为内部人士,我来给大家分享、总结一下3个airbnb开源大数据神器Airpal第一个神器叫Airpal,是airbnb内部最炙手可热的数据分析工具,目前在github上面有900多个star。Airpal是建立在Facebook的Prestodb上的一个可视化分布式SQL查询引擎。Airbnb现
ronin47
·
2015-11-17 17:00
presto
大数据三大神器
airpal
大数据工具
篇之Hive与HBase整合完整教程
大数据工具
篇之Hive与HBase整合完整教程 一、引言 最近的一次培训,用户特意提到Hadoop环境下HDFS中存储的文件如何才能导入到HBase,关于这部分基于HBase Java API的写入方式
·
2015-11-13 20:26
hbase
大数据工具
篇之Hive与MySQL整合完整教程
大数据工具
篇之Hive与MySQL整合完整教程 一、引言 Hive元数据存储可以放到RDBMS数据库中,本文以Hive与MySQL数据库的整合为目标,详细说明Hive与MySQL的整合方法。
·
2015-11-13 20:18
mysql
13款开源Java
大数据工具
,从理论到实践的剖析
大数据几乎已成为所有商业领域共有的最新趋势,然而大数据究竟是什么?是噱头、泡沫,又或是真如传言一样的重要。 事实上,大数据是个非常简单的术语——就像它所说的一样,是非常大的数据集。那么究竟有大多?真实的答案就是“如你所想的那么大”! 那么为什么会产生如此之大的数据集?因为当今的数据已经无所不在并且存在着巨大的回报:收集通信数据的RFID传感器,收集天气信息的传感器,移动设备给社交网站发送的GP
·
2015-11-11 07:02
java
Hadoop——你不得不了解的
大数据工具
如今Apache Hadoop已成为大数据行业发展背后的驱动力。Hive和Pig等技术也经常被提到,但是他们都有什么功能,为什么会需要奇怪的名字(如Oozie,ZooKeeper、Flume)。 Hadoop带来了廉价的处理大数据(大数据的数据容量通常是10-100GB或更多,同时数据种类多种多样,包括结构化、非结构化等)的能力。但这与之前有什么不同? 现今企业数据仓库和关系型数据库擅长处
·
2015-11-02 15:58
hadoop
Hadoop——你不得不了解的
大数据工具
如今Apache Hadoop已成为大数据行业发展背后的驱动力。Hive和Pig等技术也经常被提到,但是他们都有什么功能,为什么会需要奇怪的名字(如Oozie,ZooKeeper、Flume)。 Hadoop带来了廉价的处理大数据(大数据的数据容量通常是10-100GB或更多,同时数据种类多种多样,包括结构化、非结构化等)的能力。但这与之前有什么不同? 现今企业数据仓库和关系型数据库擅长处
·
2015-11-01 12:36
hadoop
一网打尽13款开源Java
大数据工具
,从理论到实践的剖析
摘要:Java Code Geeks联合创始人Byron Kiourtzoglou近日发表文章,从理论到实践剖析了大数据的4个V,并于文章最后分享了Java工程师可能会需要的13个主流开源
大数据工具
。
·
2015-10-31 08:25
java
使用oracle的
大数据工具
ODCH访问HDFS数据文件
软件下载 Oracle Big Data Connectors:ODCH 下载地址: http://www.oracle.com/technetwork/bdc/big-data-connectors/downloads/index.html Jave SE 下载地址: http://www.oracle.com/technetwork/java/javase/downloads/j
·
2015-10-27 13:26
oracle
大数据工具
篇之flume1.4-安装部署指南
一、引言 flume-ng是一个分布式、高可靠和高效的日志收集系统,flume-ng是flume的新版本的意思,其中“ng”意为new generate(新一代),目前来说,flume-ng 1.4是最新的版本。flume-ng与flume相比,发生了很大的变化,因为之前一直在flume0.9的版本,一直没有升级到flume-ng,最近因为项目需要,做了一次升级,发现了一些问题,特记录下来,
·
2015-10-27 12:57
Flume
大数据工具
篇之Hive与HBase整合完整教程
一、引言 最近的一次培训,用户特意提到Hadoop环境下HDFS中存储的文件如何才能导入到HBase,关于这部分基于HBase Java API的写入方式,之前曾经有过技术文章共享,本文就不再说明。本文基于Hive执行HDFS批量向HBase导入数据,讲解Hive与HBase的整合问题。这方面的文章已经很多,但是由于版本差异,可操作性不大,本文采用的版本均基于以下版本说明中的版本。 二、版
·
2015-10-27 12:55
hbase
2015 Bossie评选:最佳开源
大数据工具
nfoWorld在分布式数据处理、流式数据分析、机器学习以及大规模数据分析领域精选出了2015年的开源工具获奖者,下面我们来简单介绍下这些获奖的技术工具。1.Spark在Apache的大数据[注]项目中,Spark是最火的一个,特别是像IBM这样的重量级贡献者的深入参与,使得Spark的发展和进步速度飞快。与Spark产生最甜蜜的火花点仍然是在机器学习领域。去年以来DataFramesAPI取代S
DinK
·
2015-10-22 08:00
大数据
工具
最佳开源
最佳开源大数据工具
菜鸟学
大数据工具
之git
Git是进来比较火的版本控制工具,大有取代svn的趋势。关于两种孰好孰坏我就不多费口舌了,网上关于二者的对比文章比比皆是。作为一个IT人员关注行业的发展动态是必须的,所以抽空研究了一下Git的使用。跟大家分享一下我的一些感受吧。首先,我们想要使用Git,得先安装一个软件,那就是msysgit。软件安装很简单,一路next即可,在设置行结束转换时,选择“Checkoutas-is,commitas-
xiaqian0917
·
2015-09-02 16:00
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他