bigData

Apache Hadoop

作者：jiangzz电话：15652034180微信：jiangzz_wx微信公众账号：jiangzz_wy大数据(BigData)随着信息化互联网|物联网发展要求，万物互联趋势势在必行。
麦田里的守望者··2020-08-12 00:51

学习大数据，这10个问题是重点

大数据(bigdata)，是指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。
大数据开发交流·2020-08-11 22:11

Hadoop伪分布式集群搭建

wgethttp://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.6.5/hadoop-2.6.5.tar.gz2、解压Hadoop压缩包mkdir/bigdatatar-zxvfhadoop
陈贤靖·2020-08-11 22:52

Hive-创建表的几种方式

加载本地文件创建内部表hive-e"usetest_bigdata;droptabledata_result;CREATEtabledata_result(c1String)ROWFORMATDELIMITEDFIELDSTERMINATEDBY
chenlly99·2020-08-11 21:42

Exception in thread "main" java.lang.NoClassDefFoundError: scala/Function1

项目本地测试过程中报错Exceptioninthread"main"java.lang.NoClassDefFoundError:scala/Function1atcom.yoloho.bigdata.SparkStreamingrocketmq.main
时间_实践·2020-08-11 17:47

BigData：根据最新2018.07.19《财富》世界500强榜单进行大数据分析

BigData：根据最新2018.07.19《财富》世界500强榜单进行大数据分析目录一、2018《财富》世界500强榜单数据源二、根据大数据进行图表可视化1、数据图表统计2、绘制2018《财富》世界500
一个处女座的程序猿·2020-08-11 10:44

关于网络爬虫的资料整合

数据的爆炸式增长、规模庞大和广泛可用的数据，使得我们真正进入到了“大数据（BigData）时代”。我们急需功能强大的数据处理技术（DataTechnology
weixin_33877092·2020-08-11 04:29

JDBC连接mysql工具类Util供大家参考

一、JDBC连接工具类（MySQL为例）packagecom.aura.bigdata.spark.java.uitl;importjava.io.IOException;importjava.io.InputStream
蛋蛋淡淡定·2020-08-11 03:33

Hadoop---hu-hadoop1: mv: cannot stat `/home/bigdata/hadoop-2.6.0/logs/hadoop-root-datanode-hu-hadoop.

hu-hadoop1:mv:cannotstat`/home/bigdata/hadoop-2.6.0/logs/hadoop-root-datanode-hu-hadoop1.out.4':Nosuchfileordirectory
diyingshou8608·2020-08-11 03:40

深入理解hadoop之mapreduce

https://www.cnblogs.com/bigdata-stone/1.mapReduce简介MapReduce是面向大数据并行处理的计算模型、框架和平台。
aikunjiao3421·2020-08-11 02:13

Linux下的一些工具安装

/s/1zCpJTPRaofCvv__mqwO6UA提取码：ddpiJDK安装将相关压缩包拖入自己建好的文件夹中：解压tar-zxvfjdk-8u111-linux-x64.tar.gz-C/opt/bigdata
CZH.Lucky·2020-08-11 02:28

急性子的开源大数据，第 1 部分: Hadoop 教程

转载：http://www.ibm.com/developerworks/cn/data/library/techarticle/dm-1209hadoopbigdata/index.html关于大数据
「已注销」·2020-08-11 02:12

Centos安装JDK以及Tomcat

tar-zxvfjdk-8u111-linux-x64.tar.gz-C/opt/gibdata/java/配置环境变量vi/etc/profile在尾部插入如下三行代码exportJAVAHOME=/opt/bigdata
是菜鸟啊·2020-08-11 02:55

linux下 elasticsearch的安装和配置（一）

切记不要放在root目录下3.配置1）解压elasticsearch-5.6.1.tar.gz到/home/目录下[hfl@bigdata11software]$tar-zx
怒放de生命2010·2020-08-11 02:35

linux系统下安装jdk

首先，我们在opt这个目录下创建两个文件夹install以及bigdata，在opt/install这个目录下安装源文件，在opt/bigdata这个目录下安装目录。
ccsynl·2020-08-11 02:06

[bigdata-041] python3+re 正则表达式 手机号微信号qq号

importreREGEX_PHONE=re.compile(r'1\d{10}',re.IGNORECASE)REGEX_QQ=re.compile(r'[1-9]\d{4,10}',re.IGNORECASE)REGEX_WX1=re.compile(u'微信[\w,-]{1,20}'.encode('utf8'),re.IGNORECASE)#正则手机号码defget_all_phone_n
未济2019·2020-08-10 21:04

java 处理数字3位加逗号分隔 实例

packagecom.zhuoshi.jcbigdata.util;importjava.text.DecimalFormat;publicclassFormatNumUtil{//格式化数字表示publicstaticStringformatString
旋奘·2020-08-10 19:45

大数据相关资源网址

AwesomeBigDataAcuratedlistofawesomebigdataframeworks,resourcesandotherawesomeness.Inspiredbyawesome-php
陈小哥cw·2020-08-10 19:46

大数据

大数据（BigData）大数据，官方定义是指那些数据量特别大、数据类别特别复杂的数据集，这种数据集无法用传统的数据库进行存储，管理和处理。
雪刀浪子·2020-08-10 18:32

CDH环境快速恢复不同步的JournalNode

处理：1、停止bigdata168上不同步的JournalNode服务（在CM上操作角色）2、备份bigdata168服务器上JournalNode的数据目录（可跳过）cp-r/d
yukimojo·2020-08-10 16:20

使用python+机器学习方法进行情感分析(详细步骤)

转载自：http://bigdata.51cto.com/art/201801/562716.htm不是有词典匹配的方法了吗?怎么还搞多个机器学习方法。因为词典方法和机器学习方法各有千秋。
dengkane·2020-08-10 16:48

力促大数据产业发展

因应巨量资料(BigData)发展趋势，工研院耗时两年时间研发逾十种“多重分析演算法组合”，并导入线上、线下两阶段之使用情境侦测，开发电子商城与数位媒体的推荐技术，以及市场、广告的商业预测技术，可望创造台湾智慧商务另一波成长高峰
cheyan5318·2020-08-10 15:33

BigData————MapReduce案例（Hadoop序列化）

Flowbean实现writebale类封装上下行流量和总流量mapper逻辑读取一行数据切分数据取出手机号取出上下行流量封装到bean中将手机作为key（类型Text），bean（类型Flowbean）作为value输出reducer创建上下总流量的变量将同一个key的多个value（Flowbean）中上下总流量进行统计创建bean对象封装总上下行流量将手机作为key（类型Text），bean
cool_cool_coo1·2020-08-10 14:25

css之 8.面试题会考行内元素和块级元素的特点以及列举说明

8.面试题会考行内元素和块级元素的特点以及列举说明一、行内元素通常使用行内元素来进行文字、小图标（小结构）的搭建标签：abuttonbigdatalistemiinputmarkspanselectoptionsstrongbsmallsupsubtextareau
yun1129yan·2020-08-10 12:51

Apache Hadoop

一、大数据（BigData）引言1.什么是大数据体量很大的数据，起步存储当量为TB级或者日均数据增长GB级。在海量数据下，可以进行分析，挖掘，进而发现数据内在的规律，从而为企业或者国家创造价值。
[email protected]·2020-08-10 11:09

深入浅出大数据--课本学习 one

课本学习寒假期间完成学习此书大数据概述大数据关键技术基于Hadoop的生态系统分布式文件系统HDFS分布式计算框架MapReduce资源管理框架分布式存储数据库HBase数据仓库Hive数据分析与挖掘Mahout大数据应用大数据概述1.1大数据发展历程BigData
中关村一男子·2020-08-10 07:12

IDEA打包MapReduce程序，jar在hdfs集群运行

在本地IDEA执行MR【前言】IntellijIDEA打包MapReduce程序，并使用jar的方式在集群上运行1编写代码1.1创建Maven项目1.2添加依赖4.0.0com.shane.hadoopbigdata1
ShaneHolmes·2020-08-10 07:53

架构大数据分析应用

这是《ScalableBigDataArchitecture》一书的翻译笔记和读书札记，使用了原书中的大量图片，融入了自己的部分观点….典型使用场景….大数据生态系统……..数据管理比以往更加复杂，到处都是大数据
半吊子全栈工匠·2020-08-10 04:11

大数据处理技术之Hadoop——初识Hadoop

一、大数据的概论1.1大数据概念  大数据(BigData):指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产
许你常欢·2020-08-10 04:57

spark on yarn cluster模式，出现异常NoSuchMethodError: com.google.common.base.Stopwatch

异常出现调用的命令如下：spark2-submit\--masteryarn\--deploy-modecluster\--classcom.bigdata.PreWarningScalaAppV2\-
阿顾同学·2020-08-10 01:50

spark on yarn cluster模式，异常：no suitable driver

classpath下面其实只需要配置–jars，然后设置下driver配置即可然后执行脚本spark2-submit\--masteryarn\--deploy-modecluster\--classcom.bigdata.PreWarningScalaAppV2
阿顾同学·2020-08-10 01:50

Hive SQL 练习

前言本章主要,转载一篇HiveSQL的一些练习题.做一做,练习下做业务的能力.本文相关资源,可在我的Github项目https://github.com/SeanYanxml/bigdata/目录下可以找到
在风中的意志·2020-08-10 01:18

用spark streaming实时读取hdfs数据并写入elasticsearch中

代码如下------bigdata.project.spark----------packagebigdata.project.sparkimportorg.apache.spark.
数据僧人·2020-08-10 00:26

推荐BIG DATA Spark 的7本学习电子书籍（大牛专区）

LeanApacheSpark2ApacheSpark2.xCookbook，第2版LearningSparkStreamingApacheSpark2.xforJavaDevelopersScalaandSparkforBigDataAnalyticsHighPerformanceSpark
CoXie大数据·2020-08-09 21:00

PyCharm+PySpark远程调试的环境配置

Spark集群环境2.本地PyCharm配置前言：前两天准备用Python在Spark上处理量几十G的数据，熟料在利用PyCharm进行PySpark远程调试时掉入深坑，特写此博文以帮助同样深处坑中的bigdata
Mars_myCafe·2020-08-09 21:29

朱令被投毒案关键人物语料分析之孙维篇

灵玖软件：www.lingjoin.com大数据论坛：www.bigdatabbs.com本来手头还有几篇论文，只是想偶尔在回帖中发表一下个人看法，然而近几天一些混淆视听的说法充斥杂谈，正如某人所说，“
chuangquehua9049·2020-08-09 20:44

文本摘要与关键词提取

灵玖软件：www.lingjoin.com大数据论坛：www.bigdatabbs.com文章关键词提取中间件能够在全面把握文章的中心思想的基础上，提取出若干个代表文章语义内容的词汇或短语，相关结果可用于精化阅读
chuangquehua9049·2020-08-09 20:44

中国语料库研究的历史与现状-冯志伟教授

灵玖软件：www.lingjoin.com大数据论坛：www.bigdatabbs.com冯志伟、JournalofChineseLanguageandComputing,2002,Vol.12,No.1
chuangquehua9049·2020-08-09 20:44

99%的海量数据处理面试题

Hadoop实战高手速成宝典教你如何迅速秒杀掉：99%的海量数据处理面试题分类：22.BigDataProcessing05.MS100'original2012-03-2212:51348470人阅读评论
TT_LJM·2020-08-09 19:49

Spark Streaming + Kafka整合实例

摘要：本文主要讲了一个SparkStreaming+Kafka整合的实例本文工程下载：https://github.com/appleappleapple/BigDataLearning1、工程目录结构
Evankaka·2020-08-09 18:11

Kafka入门实例

摘要:本文主要讲了Kafka的一个简单入门实例源码下载：https://github.com/appleappleapple/BigDataLearningkafka安装过程看这里：Kafka在Windows
Evankaka·2020-08-09 18:11

spark 排序并添加编号添加行号和初始值

使用zipWithIndex进行行号添加通常可用于count或添加索引或计算当前值是第几大等用途Case1:全局排序，输出原始值和对应的行号索引启动spark-shell并使用yarn提交[kylin@bigdata-kylin-test01
nice to meet you2·2020-08-09 13:55

Java基础实战（二）

文章内容输出来源：拉勾教育大数据开发高薪训练营源代码：https://gitee.com/tommie523/lagou_bigdata_class/tree/master/task02Java基础实战
Tommie_tangh·2020-08-09 09:20

Java基础实战（三）

文章内容输出来源：拉勾教育大数据开发高薪训练营源代码：https://gitee.com/tommie523/lagou_bigdata_class/tree/master/task03Java基础实战
Tommie_tangh·2020-08-09 09:48

华为认证HCIP-Big Data Developer有什么用

华为认证HCIP-BigDataDeveloper大数据高级工程师认证，聚焦基于企业业务场景和业务目标，运用开源Hadoop生态系统和华为FusionInsightHD大数据平台的大数据平台应用开发、常用组件二次开发的高级人才
红松ICT·2020-08-09 08:13

百度智能云如何加速区块链技术落地应用实体经济

据现场介绍，百度智能云已经拥有最全面的区块链产品体系，无缝继承了百度智能云的ABC（AI、BigData、CloudComputing）领先能力，具有使用门槛低，技术超强等特点。
weixin_33717117·2020-08-09 05:03

Java基础实战（一）

文章内容输出来源：拉勾教育大数据开发高薪训练营源代码：https://gitee.com/tommie523/lagou_bigdata_class/tree/master/task01Java基础实战
Tommie_tangh·2020-08-09 05:06

当网络安全遇上大数据分析（9）

2012年3月份，Gartner发表过一篇报告——InformationSecurityIsBecomingaBigDataAnalyticsProblem。
weixin_34289454·2020-08-09 00:19

TimeoutException: Timeout expired while initializing transactional state in 60000ms

transaction_state为kafka内部主题,在首次触发事务时系统自动创建该主题在kafka中是无法通过命令删除__transaction_state的,但是通过Eagle监控界面可以删除例如如下操作:[root@bigdata131
江湖峰哥·2020-08-08 20:21

论文阅读笔记------Deep Video Inverse Tone Mapping

Lisong,RongXie,WenjunZhang.DeepVideoInverseToneMapping.2019IEEEFifthInternationalConferenceonMultimediaBigData
qq_25283239·2020-08-08 11:08
上一页 27 28 29 30 31 32 33 34 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他