bigData 第35页

大数据平台入门--hadoop虚拟机伪分布式安装

参考帖子：https://blog.csdn.net/hliq5399/article/details/78193113里面我遇到的几个问题：1、因为没有配置主机名，所以文中所有涉及到配置主机名的地方“bigdata-senior01

xiaokui9·2020-07-29 00:41

下一代数据湖技术：Tachyon + Spark将极为重要

文中表示，PivotalBigDataSuite一直以来的理念是将数据湖作为企业内所有数据的中心化仓库，这样的好处是可以对所有的数据——无论是内存数据还是磁盘数据——进行SQL级别的处理，同时具有将多种计算范式持久化的能力

湘西刀疤客·2020-07-29 00:33

centos7上安装mysql-5.7.27

mysql安装包链接：https://pan.baidu.com/s/1IOhXIqc6y7nY3ZZTxreeIw提取码：qds31.1解压mysql安装包[root@bigdata101usr]#cdlocal

数据涵·2020-07-29 00:28

Spark SQL 大数据处理

InfoQ上有学者对Spark的大数据处理，做了一些归纳演讲我尝试着对这些演讲做翻译，加入了一些自己的理解和实验理解是我自己的，有可能是错误的，实验是为了证明自己的理解是正确的BigDataProcessingwithApacheSpark-Part2

dbLenis·2020-07-28 23:15

Presto读取MySQL数据

环境Presto0.216配置文件[root@bigdata-003catalog]#vimysql.propertiesconnector.name=mysqlconnection-url=jdbc:

Time Woods·2020-07-28 23:49

spark-sql之 Caused by: MetaException(message:Version information not found in metastore. )

试着使用spark-sql访问hive表，启动后spark-sql--driver-class-path/home/hadoop/bigdata/hive/lib/mysql-connector-java.jar

Heavbird·2020-07-28 23:10

《大数据》杂志——大数据技术发展的十个前沿方向（中）

大数据技术发展的十个前沿方向（中）吴甘沙英特尔中国研究院doi:10.11959/j.issn.2096-0271.2015034TenFrontiesforBigDataTechnologies(PartB

唐名威·2020-07-28 23:27

【基于深度学习的脑电图识别】基于大数据和混合深度学习架构的 EEG 自动分析

AutomaticanalysisofEEGsusingbigdataandhybriddeeplearningarchitectures1.摘要：2.核心：3.数据集：4.网络结构：4.1预处理：特征提取

Memory逆光·2020-07-28 22:36

Hadoop--HDFS的安装及配置使用

http://hadoop.apache.org/releases.html](http://hadoop.apache.org/releases.html)上传：上传到master机器节点的目录~/bigdata

没有合适的昵称·2020-07-28 21:32

Hadoop的全分布模式

一、搭建Hadoop的全分布模式1、三台机器：bigdata12bigdata13bigdata142、每台机器准备工作：安装JDK、关闭防火墙、设置主机名systemctlstopfirewalld.servicesystemctldisablefirewalld.service

Casablanca_jhBi·2020-07-28 20:00

BigData NoSQL —— ApsaraDB HBase数据存储与分析平台概览

NoSQL正在解决BigData领域的问题。根据ForresterNoSQL的报告，BigDataNoS

weixin_34417200·2020-07-28 19:26

大数据和「数据挖掘」是何关系？---来自知乎

如果要描述数据非常多样，我们用HeterogeneousData（异构数据）如果要描述数据既多样，又量大，我们用MassiveHeterogeneousData（海量异构数据）……如果要申请基金忽悠一笔钱，我们用BigData

weixin_34334744·2020-07-28 19:39

大数据技术综述

2019独角兽企业重金招聘Python工程师标准>>>BigData（大数据技术）是近来的一个技术热点，但从名字就能判断它并不是什么新词。毕竟，大是一个相对概念。

weixin_34111819·2020-07-28 18:58

GoldenGate实时投递数据到大数据平台（6）– HDFS

GoldenGate可以实时将RDBMS的数据投递到HDFS中，在前面的文章中，已经配置过投递到kafka,mongodb等数据平台，本文通过OGGforbigdata的介质中自带的示例演示实时将数据写入到

weixin_34051201·2020-07-28 18:22

Spark入门之DataFrame/DataSet

目录PartI.GentleOverviewofBigDataandSparkOverview1.基本架构2.基本概念3.例子（可跳过）Spark工具箱1.Datasets:Type-SafeStructuredAPIs2

weixin_30558305·2020-07-28 16:40

[knowledge][bigdata] nosql

几款主流nosq数据库对比：http://www.cnblogs.com/vajoy/p/5471308.htmlRedisVSMongoDB：http://www.jianshu.com/p/249defad8592RacksDB/LevelDB:http://www.cnblogs.com/zoucaitou/p/4183468.htmlMongoDB/wiredtiger:https://d

weixin_30311605·2020-07-28 16:51

Hyperloglog与大数据统计

转自：https://chenjiehua.me/database/hyperloglog-bigdata.html这几天在做一些数据统计相关的工作，涉及的东西挺多的，在此顺便做一下笔记以备忘。

wankunde·2020-07-28 15:58

Spark DataFrame 多行转多列

电影ID,rating评分15,399,215,1401,515,1608,415,20,418,100,318,1401,318,399,1SparkDataFrame多行转多列packagecom.bigData.sparkimportorg.ap

wangpei1949·2020-07-28 15:52

SolrCloud(Solr云)搭建以及发布----分布式与集群

云架构,作者本人热爱文字,更热爱技术,所以写了这篇文章,希望给正在读这篇文章的你一些帮助,本人能力有限,如果有错误的地方,希望大家能够指正@所有人注:solrCloudde的主要适用对象还是偏大的公司（Bigdata

请叫我姜Xian生·2020-07-28 15:44

Hadoop的HDFS集群和YARN集群的搭建过程

安装Hadoop单机模式：1.在家目录下创建“bigdata”目录。2.将jdk.tar.gz和hadoop.tar.gz移动到家目录下的bigdata目录中。3.解压jdk.tar.gz。

SW_Pigzone·2020-07-28 15:30

2016全球大数据战略版图剖析（5）：应用篇

http://dataunion.org/wp-content/uploads/2016/02/2016BigDataLandScape.png上图是2016大数据版图英文完整版。

数据科学家联盟·2020-07-28 14:39

Java基础后端面试点大全（七）

公众号全网唯一一个从0开始帮助Java开发者转做大数据领域的公众号~大数据技术与架构或者搜索import_bigdata关注~海量【java和大数据的面试题+视频资料】整理在公众号，关注后可以下载~网络基础

大数据技术与架构·2020-07-28 14:46

大数据基准测试BigDataBench4.0安装及使用

前言BigDataBench已经升级到4.0版本，但是相对应的handbook还是3.x的，在安装配置以及运行实例的时候会遇到各种不可预测的问题。在这里记录下我在使用过程中踩到的雷区。

wychen_sunshine·2020-07-28 14:23

TensorFlow 官方文档中文版

http://bigdata.rzaixian.com/tensorflowzh/TensorFlow官方文档中文版R语言在线大数据文档集合ViewonGitHub起步介绍下载及安装基本用法教程总览MNIST

南山牧笛·2020-07-28 14:41

SparkSQL（3）：开启ThriftServer服务

二、配置1.修改hive-site.xml的hiveserver2的配置信息hive.server2.thrift.bind.hostbigdata.ibeifeng.com2.启动服务.

RayBreslin·2020-07-28 13:39

Ambari中Ranger安装

addservice26.4.3访问ApacheRanger(用户名，密码等)26.4.4启动Plugin26.4Ambari中Ranger安装26.4.1准备工作1.找到ambari-server所在的服务器（这里是bigdata1

to.to·2020-07-28 12:07

093-BigData-21Hive介绍和安装

上一篇：092-BigData-20Flume拦截器文末附mysql安装建议先装mysql再装Hive一、Hive基本概念1.1什么是HiveHive：由Facebook开源用于解决海量结构化日志的数据统计

AncientMing·2020-07-28 12:23

分布式数据库

1）华为FusionInsight,官网：http://developer.huawei.com/ict/cn/site-bigdata/solution/site-fusionInsightFusionInsightHD

tiantian1980·2020-07-28 12:09

大数据几大主流技术----HDFS操作原理

当前谷歌三大论文：GFS-------------------->HDDS分布式文件系统（分布式的存储）MapReduce------------>分布式的处理BigData--------------

十五亿少女的心·2020-07-28 11:28

大数据应用前景——Big Data+X模式

本文为一场名为《BigDataAnalysis:Practicsandapplications》的演讲笔记。演讲主要介绍了大数据处理面临的两大问题，以及大数据现阶段的应用情况。

陈以二·2020-07-28 11:33

线程池&CountDownLatch组合

packagecom.bosssoft.bigdata.admin.service.impl;importcom.alibaba.fastjson.JSONObject;importcom.baomidou.mybatisplus.core.conditions.query.QueryWrapper

从零学习大数据·2020-07-28 11:50

从零基础开始学习大数据对你来说意味着什么？

毋庸置疑，现如今是属于大数据（BigData）的，革命性的时代。从社交媒体到企业，每时每刻都在产生大量的数据。无所作为，从而把这样的宝藏白白浪费掉是及其愚蠢的。

大数据开发交流·2020-07-28 09:20

大数据Saprk----Spark基础--Scala的组合和继承

firstCodec**publicclassFriend{publicstaticvoidmain(String[]args){System.out.println("BigData加QQ群：947967114

爱码-947967114·2020-07-28 08:51

大数据入门之学习视频资料分享

关注作者：https://edu.csdn.net/course/detail/7978大数据（bigdata），或称巨量数据、海量数据；是由数量巨

大数据群722680258·2020-07-28 08:02

大数据时代可以预测未来么

深圳飞博远创科技旗下的数据讲师说在云计算、移动互联网等发展的推动下，每年环保部门产生了海量的数据，人们将这种海量数据称之为“大数据”（BigData）。

ppvkess·2020-07-28 04:42

华为内部一篇关于大数据的好文

阅读本文，大数据(BigData)会告诉你一个充满奇幻色彩的世界。一、详解时髦词汇：大数据似乎一夜之间，大数据(BigData)变成一个IT行业中最时髦的词汇。首先，大数据不是

marvel_cheng·2020-07-28 03:51

Oracle数据库索引培训——201609

1.数据库发展概要介绍http://www.cbdio.com/BigData/2016-02/24/content_4651751.htm观点：关系数据库在子应用中还是会继续存在，随着数据大爆炸的不断升级

大罗罗的马拉松·2020-07-28 03:21

Hibernate实现Oracle Blob/Clob类型数据读写

Hibernate2+Oracle10g说明:本例在使用Eclipse3.1通过一个Java项目来实现对Oracle中Blob/Clob类型数据的读写操作.1.在oracle数据库中新建一个表,取名:BIGDATA

「已注销」·2020-07-28 02:47

Hadoop 2.x 本地模式、伪分布模式、全分布模式的搭建

准备工作1、安装Linux、JDK、关闭防火墙、配置主机名配置主机名vi/etc/hosts本地模式和伪分布模式只需要添加一台主机名，全分布模式需要添加三台本地模式和伪分布模式192.168.100.11bigdata11

JustDoDT·2020-07-28 02:53

将hive中的数据导入MySQL

useUnicode=true&characterEncoding=utf-8'--usernamebigdatauser--passwordBigdata@321--tab

hello琳123·2020-07-28 01:40

「大数据学习」大数据精要（1）

何为大数据(BIGDATA)，是可以被记录、采集和开发利用的海量、实时、多样化的数据集、数据流和数据体。大数据的特点(4V)容量大:数据量大，包括采集、存储和计算的量都非常大。

juan11115·2020-07-28 01:21

2019最全的大数据技术解读，如何4个月掌握大数据核心技术？

第一：什么是大数据来看看维基百科的定义大数据（英语：Bigdata或Megadata），或称巨量数据、海量数据、大资料，指的是所涉及的数据量规模巨大到无法通过人工，在合理时间内达到截取、管理、处理、并整理成为人类所能解读的信息

小迪和夫人·2020-07-28 00:47

大数据业界最新动态（2016.07.26，第14期，不断更新中）

断剑走江湖·2020-07-27 23:06

什么是大数据随谈

呵呵，其实我想输入“什么是大数据”，一不小心大数据敲成了英文BigData，就成了上面的“什么是比高达他？”，你大概猜到了我用的是什么中文输入法，呵呵，兄弟姐妹大叔大婶们，我们有很多共同点啊。

hadoop17173·2020-07-27 23:34

aaaaaaaaaaaaa

QUESTION1YouareadataengineerimplementingalambdaarchitectureonMicrosoftAzure.Youuseanopen-sourcebigdatasolutiontocollect

diaogu7954·2020-07-27 21:55

HDFS的datanode端口占用

vimhadoop-hadoop-datanode-slave06.log出现异常，显示端口被占用解决办法（1）sudonetstat-antup|grep50075hadoop@slave06:~/bigdata

daiguagua1·2020-07-27 21:00

最全大数据学习资料，自取不谢！

实验楼大数据学习https://www.shiyanlou.com/paths/bigdata系统化的大数据课程学习，你值得拥有。

数据工程师陈晨·2020-07-27 20:21

大数据概念及作用！

01什么是大数据大数据（bigdata），又称巨量资料，指的是所涉及的数据资料量规模巨大到无法通过人脑甚至主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。

数据工程师陈晨·2020-07-27 20:49

Facebook Bigdata - Presto 0.80 版本说明

FacebookBigdata-Presto0.80版本说明新的HiveORC读取器我们增加了一个新的ORC读取器实现。新的读取器支持矢量读取，延迟加载，和谓语推理。

山水佳音·2020-07-27 20:17

ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpoint

grep-riException得到如下信息:/home/appleyuchi/bigdata/hadoop-3.2.1/logs/hadoop-appleyuchi-secondarynamenode-Desktop.log2020

Applied Sciences·2020-07-27 19:14

推荐频道

bigData