【Bigdata】

大数据开发-Docker-使用Docker10分钟快速搭建大数据环境

立个坑，教程后续补上，当然这不是最重要的，如果你仅仅想有个环境可以测试，只需要下面三步1.gitclonehttps://github.com/hulichao/docker-bigdata`2.安装docker
Hoult丶吴邪·2021-01-12 04:24

大数据开发-Docker-使用Docker10分钟快速搭建大数据环境

立个坑，教程后续补上，当然这不是最重要的，如果你仅仅想有个环境可以测试，只需要下面三步1.gitclonehttps://github.com/hulichao/docker-bigdata`2.安装docker
Hoult丶吴邪·2021-01-12 04:15

Spring Security OAuth2.0_实现分布式认证授权_网关资源服务配置_Spring Security OAuth2.0认证授权---springcloud工作笔记152

技术交流QQ群【JAVA,C++,Python,.NET,BigData,AI】：170933152然后我们再继续看,因为我们说,我们的网关要进行认证对吧,对来的请求进行认证.然后我们这里把网关微服务,
credreamer·2021-01-11 17:16

DTCC 2020 | 阿里云吉剑南：在线分析进入Fast Data时代的关键技术解读

简介：如今，对于在线分析技术而言，正在从“BigData”时代向着“FastData”时代迈进，所面对的技术和市场环境发生了巨大变化，与此同时也需要面对全新的挑战。
阿里云开发者·2021-01-04 16:09

Hadoop大数据——用户行为分析Hive数据分析

1.本地数据集上传到数据仓库Hive1.1命令sudomkdir-R/usr/local/bigdatacase/dataset//这里会提示你输入当前用户（本教程是hadoop用户名）的密码//下面给
金皮癞蛤蟆·2020-12-31 08:22

hadoop学习-学习shell命令操作hdfs实现上传下载文件的功能getmerge指令

在根目录下面创建一个bigdata目录hadoopfs-mkdir/bigdata创建一个多级目录a/b/chadoopfs-mkdir-p/a/b/c使用s
有上进心的阿龙·2020-12-17 21:57

云计算与大数据技术应用 第二章

大数据（Bigdata或Megadata）：大数据，或称巨量数据、海量数据、大资料，指的是所涉及的数据量规模巨大到无法通过人工，在合理时间达到截取、管理、处理、并整理成为人类所能解读的形式的信息。
m0_53544880·2020-12-17 14:12

大数据架构流程图

大数据管理数据处理过程图大数据(bigdata),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察力。
摘下满天星·2020-12-12 20:45

大数据架构流程图

大数据管理数据处理过程图大数据(bigdata),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察力。
摘下满天星·2020-12-12 19:54

连接不上Docker-Kafka-broker及Kafka解决内网外网隔离的几个重要参数

背景像之前的大数据环境等都是通过Docker来搭建的，无论是在学习，测试，迁移时候无疑是最快的方式，尤其是在多个环境下还想使用同一套环境时候,https://github.com/hulichao/docker-bigdata
Hoult丶吴邪·2020-12-06 18:17

大数据开发环境搭建之Flink安装部署

一、Standalone模式安装1、下载Flink官网官网提供的压缩包下载地址flink-1.10.1-bin-scala_2.11.gz2、解压Flink在bigdata03服务器cd/home/bigdata
羋学僧·2020-12-06 11:46

揭秘GPS背后的“隐藏人物”！从小乡村到海军基地，这位女程序员把“地球”带进日常...

Python实战社群Java实战社群长按识别下方二维码，按需求添加扫码关注添加客服进Python社群▲扫码关注添加客服进Java社群▲来源丨theguardian来源公众号丨大数据文摘（ID：BigDataDigest
程序员大咖·2020-12-04 10:00

mongoDB4.2.8备份恢复与导出导入(推荐)

创建备份目录：mkdir-p/bigdata/mongodb-4.2.8/mongodump语法：mongodump-hlocalhost:27017-ddmp_phone-o/bigdata/mongodb
·2020-12-03 20:17

神经网络与深度学习实战:python+keras+tensorflow 资料_Colab 超火的 Keras/TPU 深度学习免费实战，有点 Python 基础就能看懂的快速课程...

新智元推荐来源：大数据文摘(ID:BigDataDigest)编译：曹培信、周素云、蒋宝尚【新智元导读】仅会一点点python也能自己搭建一个神经网络！
weixin_39731456·2020-11-29 00:22

springcloud gateway ribbon使用_闷棍暴打面试官 SpringCloud源码系列 : (一) SpringCloud的前世今生

如果你是一位软件行业从业者，尤其是从事服务器端或者后台系统软件开发，相信近年来一定被层出不穷的商业名词所包围：NoSQL、BigData、Web-scale、Sharding、Eventualconsistency
weixin_39545329·2020-11-22 22:14

连接不上Docker-Kafka-broker及Kafka解决内网外网隔离的几个重要参数

背景像之前的大数据环境等都是通过Docker来搭建的，无论是在学习，测试，迁移时候无疑是最快的方式，尤其是在多个环境下还想使用同一套环境时候,https://github.com/hulichao/docker-bigdata
hulichao·2020-11-18 17:01

微服务架构图

大数据管理数据处理过程图大数据(bigdata),指无法在一定时间范围内用常规软件工具进行捕捉
摘下满天星·2020-11-15 20:43

OpenSSL SSL_connect SSL_ERROR_SYSCALL in connection to github 与 Git 的代理配置

报错都是一样的：Pushfailed:Failedwitherror:unabletoaccess'https://github.com/weidongcao/bigdata/':OpenSSLSSL_connect
中v中·2020-11-15 17:16

解读：一种基于CNN-LSTM混合神经网络的股价预测模型

2019IEEEIntlConfonDependable,AutonomicandSecureComputing,IntlConfonPervasiveIntelligenceandComputing,IntlConfonCloudandBigDataComputing
Wang_AI·2020-11-15 09:00

Unit3：大数据技术进阶（Hadoop）

大数据（Bigdata）其实很简单，大数据其实就是海量资料巨量资料，这些巨量资料来源于世界各地随时产生的数据，在大数据时代，任何微小的数据都可能产生不可
爱笑的猿·2020-11-02 20:49

Hadoop三种模式的安装与配置

安装jdk（这里不展开）1、Hadoop的本地模式用户：root主机名：bigdata111特点：（1）没有HDFS、也没有Yarn（2）只能测试MapReduce程序，作为一个普通的Java程序（3）
大数据ZRL·2020-10-25 10:18

用spark中DataFrame对数据进行去重、缺失值处理、异常值处理

importosfrompysparkimportSparkContext,SparkConffrompyspark.sqlimportSparkSessionimportpyspark.sql.functionsasfnJAVA_HOME='/root/bigdata
jialun0116·2020-10-20 14:07

如何在算法比赛中获得出色的表现 :改善模型的5个重要技巧

例如，一些举办方每年都会针对同一主题提出定期的挑战(NFL’sBigDataBowl)，
deephub·2020-10-09 08:57

大数据介绍和集群安装--hadoop

（BigData）3、传统数据与大数据的对比4、大数据的特点5、大数据生态系统6、大数据技术为什么快？
bigdatahyy·2020-10-07 21:12

大数据简介

（BigData）是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
unclever_behurt·2020-10-07 20:16

3. Hadoop分布式集群部署

配置方案如下：bigdata1bigdata2bigdata3HDFSNameNodeSecondaryNameNodeDataNodeDataNodeDataNodeYARNnodeManagerResourceMangerNodeManagernodeManager
易成·2020-09-27 07:34

大数据开发环境搭建之Spark集群搭建

集群搭建需要四台机器spark-2.1.0下载地址1.集群规划:Spark没有对内存进行管理，内存的管理交给应用程序管理，容易出现：OOM（内存溢出）Worker的默认行为：占用该节点上的所有资源Master节点:bigdata02Worker
羋学僧·2020-09-21 18:37

手背变绘板！智能手表上也能画画做笔记，最大误差仅为6％

来源丨大数据文摘（ID：BigDataDigest）作者丨牛婉杨屏幕太小、打字不方便可能是智能手表最大bug。不过，最近有研究人员开发了一款“神器”，让你的手表分分钟替代手机！
果壳网·2020-09-18 00:00

Linux基本命令大全

一、Linux命令行[user@bigdata~]$[root@bigdata~]#1、user、root当前操作的用户；2、@bigdata当前的主机名；3、~当前用户主目录，如/home/user；
凌夺风·2020-09-17 07:23

Spark的开窗函数demo+解析：

源文件内容示例：http://bigdata.beiwang.cn/laolihttp://bigdata.beiwang.cn/laolihttp://bigdata.beiwang.cn/haiyuanhttp
Lyy1016·2020-09-17 05:03

日华媒：大数据让中日地方经济分出“明暗”

日本《新华侨报》6月6日文章，原题：大数据在让中日地方经济分出“明暗”第一次听到日文的“BigData”这个词时，为到底翻译成“海量数据”还是“大数据”，费了一些周折。
weixin_33888907·2020-09-17 05:24

Oralce GoldenGate与Kafka集群集成

本文介绍如何配置OracleGoldenGate同步数据到Kafka，包括OGG源端安装配置，OGGforBigDatareplication安装配置，以及如何与Kafka集群集成。
Warren·2020-09-17 05:01

oracle goldengate for bigdata

--安装需要的软件包：#yum-yinstallrlwrapunzip--解压软件：#unzipOGG_BigData_Linux_x64_12.3.2.1.1.zipArchive:OGG_BigData_Linux_x64
vkingnew·2020-09-17 05:57

OGG-03059 Operating system character set identified as UTF-8.

viewreportRITPUX01***********************************************************************OracleGoldenGateforBigDataVersion12.3.2.1.1
Pluto_W-J·2020-09-17 04:59

【Kafka】 kafka集群升级导致broker.id发生变动变动引起的问题

1.概述转载：http://791202.com/2020/02/01/bigdata/362/2.详情最近遇到一个问题，由于kafka集群升级导致每个broker.id出现了变动，但是topic的partition
九师兄·2020-09-17 02:18

hive安装配置

1、解压hive压缩包到/opt/bigdata/hadoop下2、把hive文件夹名修改成hive110方便阅读操作3、在hive110/conf下新增hive-site.xml文件4、将mysql-java
yu247809536·2020-09-17 02:04

ZooKeeper的安装详细图解

1、解压文件到/opt/bigdata/hadoop,照着图中代码修改文件名，创建软链接2、如果zookeeper中光标闪动则软链接创建成功3、修改配置文件4、在zkdata创建一个myid文件加1，2
yu247809536·2020-09-17 02:04

用Maven来开发Hadoop应用

4.0.0com.xxx.yyybigdata1.0-SNAPSHOTapachehttp://maven.apache.orgorg.apache.hadoophad
Herry_Lee·2020-09-17 01:40

继“ABC”之后，“ABCD”又是个什么“鬼”？

随着百度举办ABCSummit，“ABC”理论逐渐被大家所熟知，即人工智能（AI）+大数据（BigData）+云计算（Cloud），然而，在近日举办的销售易用户大会“Engage2017”上，销售易首席数据科学家赵宇辰又提出了
写bug的小妞儿·2020-09-16 18:22

hive导出csv文件

hive-e'sethive.execution.engine=tez;sethive.cli.print.header=true;sethive.resultset.use.unique.column.names=false;select*fromxyy_bigdata_ods.user_city_tag
时间_实践·2020-09-16 15:52

Linux_BigData常用配置/命令

文章目录Linux双网卡配置HadoopZookeeperHBase单机HiveHive表操作HiveSQL操作Hive函数FlumeKafkaKafkaStreamingSparkFlinkLinux双网卡配置vi/etc/sysconfig/network-scripts/ifcfg-eth0#配置网卡/更改IPrm-rf/etc/udev/rules.d/70-persistent-net.
HuiGe94v587·2020-09-16 12:23

Spark学习笔记一之为什么Spark这么牛逼

2015年6月，Spark最大的集群来自腾讯——8000个结点，单个Job最大来自阿里巴巴和Databricks——1PBUseofMapReduceengineforBigDataprojectswilledecline
Shockang·2020-09-16 11:06

java大数据最全课程学习笔记(1)--Hadoop简介和安装及伪分布式

目前CSDN,博客园,简书同步发表中,更多精彩欢迎访问我的giteepagesHadoop简介和安装及伪分布式大数据概念大数据概论大数据(BigData):指无法在一定时间范围内用常规软件工具进行捕捉,
假装文艺范儿·2020-09-16 11:08

Qt笔记-多线程检索数据库（单例多重锁，QtConcurrent::blockingMapped）

程序运行截图如下：这里有下面这个类BigDataTest对数据进行的类。MySQLInstance采用单例双重锁模式对数据库进行操作。
IT1995·2020-09-16 09:51

将一个js项目改造成vue项目

本地环境:node版本:8.11.4vue版本:3.4.1;开发工具vscode1、创建一个空的vue项目（vuecreatebigdata_reprot_web）2、找到项目的空白页,改造该页面改造思路
weixin_30344795·2020-09-16 08:19

大数据时代

一、大数据出现的背景进入2012年，大数据(bigdata)一词越来越多地被提及，人们用它来描述和定义信息爆炸时代产生的海量数据，并命名与之相关的技术发展与创新。
明耀先森·2020-09-16 07:08

maven-plugin集合

不多说，直接上pommaven-assembly-pluginfalsejar-with-dependenciescom.pack.bigdata.test.KafkaClientTestorg.apache.maven.pluginsmaven-war-plugin2.2UTF
小蜗牛也有梦想·2020-09-16 07:42

Hue遇到SASL报错

服务之后，连接Hive，运行Hql遇到这个错误：CouldnotstartSASL:Errorinsasl_client_start(-4)SASL(-4):nomechanism解决办法：[root@bigdatatest03
XK&RM·2020-09-16 06:53

Debezium for PostgreSQL to Kafka

wediscussthenecessityofsegregatedatamodelforreadandwriteanduseeventsourcingforcapturedetaileddatachanging.Thesetwoaspectsarecriticalfordataanalysisinbigdataworld.Wewillcomparesomecandida
weixin_30432007·2020-09-16 04:50

大数据学习笔记六（MapReduce）

的两大核心是HDFS和MapReduce，HDFS是分布式文件系统，而MappReduce的工作是进行数据处理推荐MapReduce学习链接：http://dblab.xmu.edu.cn/post/bigdata-online-course
绿洲守望者·2020-09-16 03:27
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他