BigDATA 第14页

Hadoop实战演练：搜索数据分析----数据去重（1）

转载请注明出处http://blog.csdn.net/evankaka摘要：本文讲了如何使用hadoop进行数据去重工程源码下载：https://github.com/appleappleapple/BigDataLearning

Evankaka·2023-03-21 19:56

1.Linux基础基本操作：

一共用到五台虚拟机bigdata111~bigdata115在vmware12下安装RedHat7.464位操作系统二、配置Linux和Linux目录远程工具：putty，Xshell1.关闭

君不见_c4ee·2023-03-21 16:16

Review on HIT summer school

ItookpartinthesummerschoolhostedbyHarbinInstituteofTechnology.TheTopicis“BigDataandBusinessAnalysis”.

王树义·2023-03-21 04:41

CDH6.3.1 hue 配置hbase

hue的了，刚好cdh自带了hue所以配置器来比较方便，这里记录一下配置步骤按照这篇文章的配置已经后还需要进行HBaseThriftServer的配置https://blog.csdn.net/jmx_bigdata

胖子捏肚子·2023-03-20 16:20

20190122成功日记

3.目前大势ABCD，AI，Bigdata，Cloud，Dialogue4.养成Datatalk的习惯，用数字汇报，呈现简历5.学会用Storytelling的逻辑来来书写简历。

爱吐槽的HR小姐姐·2023-03-20 13:32

dgraph安装

/dgraph/dgraph-ratel-port8050>ratel.log2>&1&一台nohup/opt/dgraph/dgraphzero--port_offset100--mydata10-bigdata.cmal.com.cn

后知不觉1·2023-03-20 10:17

老文新看：一口气说透中台--给你架构师的视角

编辑：彭文华来源：大数据架构师（ID：bigdata_arch）彭友们好，我是你的老彭友。因公众号迁移，老文章都搜索不到了。

大数据架构师Evan·2023-03-20 07:07

Flink 专题 -3窗口滚动和滑动操作

https://github.com/soniclavier/bigdata-notebook/tree/master/flink/src/main/scala/com/vishnu/flink/streaming

千狼·2023-03-19 11:19

Docker部署单节点ElasticSearch7+配置kibana7+X-Pack

部署ES7+配置X-Pack拉取ES和kibana镜像dockerpullelasticsearch:7.4.2dockerpullkibana:7.4.2配置ES挂载目录mkdir-p/mnt/bigdata

今年五年级·2023-03-18 22:57

0412自省

今天下午得以深度参观了我们虽熟悉而又最陌生的京东，陌生是因为APP背后的京东是我们所很少会去接触，收获的点非常多，单说五点：1.京东对于ABC（AI,BigData,CloudComputation)应用及其领先而又非常广泛

罗布泊没有眼泪·2023-03-18 15:05

拜托！这才是分布式系统CAP的正确打开方式！

一、前言上周我们完成了《路由分片篇》，也算我在《BigData之路》上里程碑的意义了。

BigData之路·2023-03-17 16:56

docker学习

Docker在分布式和大数据框架中的应用：www.ibm.com/developerworks/cn/opensource/os-cn-docker-distributed-bigdata/index.html10

刘嘻哈哈·2023-03-15 20:47

所以suoyi·2023-03-15 12:54

Scala的case class究竟默认实现了哪些方法？

首先写一个样例类Demopackagecom.ruozedata.bigdata.scala04.casepkgobjectCaseClassDemo01{defmain(args:Array[String

喵星人ZC·2023-03-14 10:57

ARST打卡第六周(6/521)

Yes,Ithinkthattheremustbeabigchanceinbigdata.Andweshoulduseitwel

单林敏·2023-03-10 22:16

MySQL数据库的编码

一、本机安装MySQL环境：windows10MySQL版本：5.7.18MySQLCommunityServer(GPL)解压缩免安装版将文件解压缩到某个文件目录，如我的路径为：E:\BigData\

响亮响亮·2023-03-09 22:16

Peter Thiel: Competition is for losers

商业回报：E=X*YE：商业回报(Earning)X：某种科技的潜在价值总量Y：商业变现能力例如，ABC(AI/BigData/Cloud），区块链，如果没有找到应用场景（PMF产品市场契合点），即Y=

吃得香睡得好胆子大·2023-03-09 16:19

HDFS(Hadoop Distributed File System) 常见Shell操作

操作格式:bin/hdfsdfs-xxxscheme://authority/path--lshdfsdfs-ls/#查看多级目录hdfsdfs-ls-R/hdfsdfs-lshdfs://bigdata01

梅村_9643·2023-03-09 08:56

Three_监督学习经典模型-回归预测

Author:龙箬DataScienceandBigDataTechnologyChangetheworldwithdata!CSDN@weixin_43975035敬那大争之世，敬这小酌之时。

龙箬·2023-03-08 22:59

大数据bigdata

前言：大数据就是互联网发展到现今阶段的一种表象或特征而已，没有必要神话它或对它保持敬畏之心，在以云计算为代表的技术创新大幕的衬托下，这些原本看起来很难收集和使用的数据开始容易被利用起来了，通过各行各业的不断创新，大数据会逐步为人类创造更多的价值。定义：是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率

20英里法则·2023-02-26 06:39

#第19篇分享：python初识大数据(1)-Hadoop开发环境搭建（Hadoop+jdk）

#走进数据的世界-----------------------大数据1.什么叫大数据（说白了就是超级多的数据）：大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合

天甜费，·2023-02-24 04:36

人人都可以创造自己的AI：深度学习的6大应用及3大成熟领域

作者：王健宗瞿晓阳来源：大数据DT（ID：bigdatadt）导读：深度学习，也称“阶层学习”或“分层学习”，是基于学习数据表征的更广泛的机器学习方法系列的一部分，而不是基于特定任务的算法。

hzbooks·2023-02-21 05:03

讲解：CSE 482、Data Analysis、java、 javaSPSS|Python

CSE482:BigDataAnalysis(Spring2020)Homework2Duedate:Monday,February19,2020PleasemakesureyousubmitaPDFversionofyourhomeworkviaD2L

fanzizhan·2023-02-18 22:41

ZooKeeper从入门到精通13：使用ZooKeeper实现Hadoop的HA

环境说明：bigdata131192.168.126.131bigdata132192.168.126.132bigdata133192.168.126.133bigd

金字塔下的小蜗牛·2023-02-18 18:51

大数据基本概念与应用场景

说起大数据，相比大家都比较熟悉了，但是真正了解大数据和大数据实现的概念的人却很少，下面将和大家分享一下这方便的基本概念以及现在大数据技术在传统行业的应用，enjoy~~~一、大数据的概念大数据(bigdata

晓之以理的喵~~·2023-02-18 07:28

【Introduction to Artificial Intelligence and Data Analytics】（TBC）

课件引用于香港理工大学comp1004课程ContentChapter1:DataAnalyticsandBigData1.1Fourdataanalyticcapabilities1.1.1DescriptiveAnalytics1.1.2DiagnosticAnalytics1.1.3

Haley Kwok·2023-02-16 22:49

数据挖掘流程-HCIE-BigData

机器学习流程机器学习流程1.了解需求，确认目标2.获取数据3.审阅数据4.数据分析4.1统计分析4.2相关性分析4.3图形分析1.散点图2.热力图3.直方图4.统计图5.柱状图6.饼图7.综合绘图5.数据处理5.1.数据类型处理5.2.缺失值分析5.3.缺失值处理5.4.异常值检测5.5.异常值处理6.特征编码6.1.独热编码6.2.类别编码7.特征构造与变换7.1特征构造7.2删除多余数据8.数

不会写作文的李华·2023-02-16 21:47

机器学习术语表

以下内容可下载:https://download.csdn.net/download/bigdata_wangzhe/15543442AA/B测试(A/Btesting)一种统计方法，用于将两种或多种技术进行比较

bigdata_wangzhe·2023-02-07 12:44

见证中国大数据技术与应用时代的到来

由中国计算机协会（CCF）主办，CCF大数据专家委员会协办，中科院计算所与CSDN共同承办的国内最具影响、规模最大的大数据领域盛会——第七届中国大数据技术大会（BigDataTechnologyConference2013

我爱吃烤鱼·2023-02-06 16:45

待整理

静态代码块https://www.cnblogs.com/bigdata-stone/p/10458380.htmlhttps://blog.csdn.net/qq_35868412/article/details

圣堂刺客_x·2023-02-06 15:47

工业制造中的大数据分析应用_工业大数据分析方案-美林数据

我们先看看维基百科的说法：“工业大数据（Industrialbigdata）是构成工业人工智能的重要元素，指由工业设备高速产生的大量数据，对应不同时间下的设备状态，是物联网中的讯息。

美林数据Tempodata·2023-02-06 11:07

大数据技术简介

所谓ABC是指以A（AI，人工智能）、B（BigData，大

预流·2023-02-06 11:43

【网站点击流数据分析】04-数据预处理

packagecom.learn.bigdata.hive.mr.pre;importjava.io.IOException;importjava.util.HashSet;importjava.util.Se

Aluha_f289·2023-02-06 06:09

文件传输

接收端：nc-l8888>mybigdata2.war发送端：nc-w3192.168.1.2068888testzhongguotelnet直接发送socket/****************

大海244·2023-02-05 21:46

大数据薪水大概多少_大数据就业岗位有哪些？薪资多少？

1什么是大数据大数据(BigData)，指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样

心理咨询师清晨·2023-02-05 03:26

安装运行在完全分布式hadoop集群的hive

www.jianshu.com/p/8a6a9a4fec4a下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/hive/解压到自己管理方便的目录下：[root@masterbigdatazips

臻霏·2023-02-04 20:38

转：趣谈大数据

一、大数据的初步理解似乎一夜之间，大数据（BigData）变成一个IT行业中最时髦的词汇。

weixin_34228387·2023-02-04 14:18

【华为内部狂转的想象力惊人的好文】趣谈大数据

趣谈大数据一、大数据的初步理解似乎一夜之间，大数据（BigData）变成一个IT行业中最时髦的词汇。

编程界康师傅·2023-02-04 14:47

趣谈大数据

一、大数据的初步理解似乎一夜之间，大数据（BigData）变成一个IT行业中最时髦的词汇。

char518·2023-02-04 14:09

2023年互联网技术发展趋势浅析

大前端私房菜2022年岁末将至，这一年的互联网技术也是甚是热闹，一方面人工智能（AI），5G（5GNETWORK），虚拟现实和增强现实（VR&AR），大数据分析（BigDataAnalysis）等等老热词的反复出现

大前端私房菜·2023-02-04 09:51

爬取公共交通的线路和站点

importjsonimportrequestsfromlxmlimportetreeimportpandasaspdimportgeopandasasgpdfromshapely.geometryimportPointimporttransbigdataastbdfromtqdm

爱吃面条的陈同学·2023-02-03 07:19

区块链时代的浏览器Pando：保障“绝对隐私”去中心化

谈到未来科技，大家的第一反应会是“ABCD”：A——人工智能（ArtificialIntelligence），B——区块链（Blockchain），C——云计算（CloudComputing），D——大数据（BigData

币须胜·2023-02-03 00:10

大数据基础入门一

大数据概述大数据（BigData）：无法用现有的软件工具提取、存储、处理的海量复杂的数据结合特点：4VVolume：数据量大，数据体量巨大TB->PBVariety：数据类型繁多Value：价值密度低。

只会摆烂的小亮·2023-02-02 14:56

多模态数据集论文阅读 | WRDI: A Multimodal Dataset of mmWave Radar Data and Image, 2021 IEEE Big Data

L.Sun,andY.Li,“WRDI:AMultimodalDatasetofmmWaveRadarDataandImage,”in2021IEEEInternationalConferenceonBigData

R.X. NLOS·2023-02-02 07:09

大数据集群监控框架

一、监控框架Bigdata1Bigdata2Bigdata3Zabbixzabbix-serverzabbix-agentzabbix-agentzabbix-agentGangliaganglia二、

CJ21·2023-02-02 05:29

kubernetes数据持久化PVC（动态）

原文：https://blog.csdn.net/BigData_Mining/article/details/88735987

我的喵叫初六·2023-01-31 13:15

垃圾收集

functionprocess(data){//在这里做点有趣的事情}varsomeReallyBigData={..}

Y_d4ea·2023-01-29 21:02

数睿数据首次亮相AI & BIG DATA EXPO

2022年国际人工智能和大数据会展AI&BigDataExpo，于12月1日至12月2日在伦敦奥林匹亚会展中心隆重举办。本次参展企业达450家，吸引超过1万名观众参加。

·2023-01-29 18:14

BigData-MySQL（入门）

1.数据库和数据库管理系统1.1数据库(DataBase)按照数据结构存储数据的仓库1.2数据库管理系统(DBMS)(DatabaseManagementSystem)是操纵和管理数据库的软件系统RDBMS建立在关系模型之上的数据库管理系统,主要实现对结构化数据的管理。1979年，Oracle2诞生，它是第一个商用的RDBMS（关系型数据库管理系统），随后被卖给了军方客户。随着Oracle软件的名

蜡笔小虎_007·2023-01-28 04:43

Scala的JDBC操作MySQL

packagecom.ruozedata.bigdata.scala03importjava.sql.DriverManagerobjectScalaJDBCApp{defmain(args:Array

喵星人ZC·2023-01-27 22:51

推荐频道

BigDATA

Hadoop实战演练：搜索数据分析----数据去重 （1）

1.Linux基础 基本操作：