BigDATA 第6页

HDFS API编程：第一个应用程序的开发：创建一个目录

使用javaapi操作HDFS文件系统创建一个目录:1）创建Configuration2）获取FileSystem3）一系列HDFSAPI操作packagecom.haglife.bigdata.hadoop.hdfs

糯米君_·2023-10-24 01:29

Scala入门案例

1:输入两个数，按从小到大排序后输出packagecom.qf.bigdataimportscala.collection.mutable.ArrayBufferimportscala.io.StdInobjectDemo02

南潇如梦·2023-10-21 13:55

大数据测试之大数据系统及特点

1、大数据系统定义比较官方的定义：大数据(BigData)是将包括结构化、非结构化、甚至多结构化海量数据进行整合，并通

千锋IT教育·2023-10-21 10:10

优化技巧

在我们遇到一些bigdata的业务场景，它就很有用了。尤其是做管理后台的时候，经常会有一些超大数据量的table，或者一个含有n多数据的图表，这种数据量很大的东西使用起来最明显的感受就是卡。

宋小菜_菜菜·2023-10-20 07:45

数字化转型是新瓶装旧酒吗？

编辑：彭文华来源：大数据架构师（ID：bigdata_arch）彭友萌好，我是你的老彭友。周四受51CTO邀请，给大家做了一个数字化转型的线上分享。

大数据架构师Evan·2023-10-20 05:08

Unbuntu使用手机热点创建两台电脑的集群（实现ssh免密通信）

创建用户bigdata3sudouseradd-mbigdata3-d/home/bigdata3-s/bin/bash为创建的用户设置密码sudopasswdbigdata3修改用户的权限：

Icy Hunter·2023-10-19 04:18

【EI会议征稿】第三届大数据、信息与计算机网络国际学术会议（BDICN 2024）

第三届大数据、信息与计算机网络国际学术会议（BDICN2024）20243rdInternationalConferenceonBigData,InformationandComputerNetwork

搞科研的小刘选手·2023-10-18 17:19

重磅！ | Flink1.14新特性预览

欢迎加博主微信：threeknowbigdata，拉你进大数据群、Flink流计算群大家好，我是土哥。目前在某互联网大厂担任大数据算法工程师。

3分钟秒懂大数据·2023-10-18 17:46

ElasticSearch集群安装配置详解一

ElasticSearch在/opt下新建两个文件夹一个是install另一个是bigdata把elasticsearch-6.2.2.tar.gz等文件通过xftp传入install文件夹将解压到/opt

数据孤岛·2023-10-17 18:02

2024山西智博会,山西国际人工智能,物联网,大数据展览会·招商启动

2024山西智博会,山西国际人工智能,物联网,大数据展会2024ShanxiInternationalAi,IOT,bigdataExpo时间:2024年6月3-5日地点:山西潇河国际会展中心政策指导:

高登先生·2023-10-17 01:15

[Zookeeper：基于容器化]：快速部署安装

dockerzookeeper镜像二：创建zookeeper宿主机data目录三：运行容器四：开放防火墙一：拉取dockerzookeeper镜像[root@vboxnode3ccccccttttttchenyangbigdata

凡解·2023-10-16 07:37

[BigData：Hadoop]：安装部署篇

文章目录一：机器103设置密钥对免密登录二：机器102设置密钥对免密登录三：机器103安装Hadoop安装包3.1：wget拉取安装Hadoop包3.2：解压移到指定目录3.2.1：解压移动路径异常信息3.2.2：切换指定目录，进行解压，因为上述还是不行，应该是根目录解压有限制3.2.3：安装成功，查看Hadoop版本3.2.3.1：显示JAVA_HOME未找到3.2.4：配置Hadoop的Jav

凡解·2023-10-16 07:37

2019-03-18

playECONPlayECONisanewwaytobehealthy,Healthscalecreatesabluetoothanditsbackgroundbigdataresearchhealthplatformforyou

来哈哈大笑来·2023-10-16 07:28

Hadoop 配置 Kerberos 认证

1、安装Kerberos服务器和客户端1.1规划服务端：bigdata3客户端（Hadoop集群）：bigdata0bigdata1bigdata2192.168.50.7bigdata0.example.combigdata0192.168.50.8bigdata1

非理性地界生物·2023-10-16 06:39

从 0 到 1 学习 elasticsearch

本文已收录github：https://github.com/BigDataScholar/TheKingOfBigData，里面有我准备的大数据高频考点，Java一线大厂面试题资源，上百本免费电子书籍

这个操蛋的人生！！！·2023-10-15 18:06

BigBench: Toward An Industry-Standard Benchmark for Big Data Analytics

LearnaboutBigBench,thenewindustrywideefforttocreateasorelyneededBigDatabenchmark.BenchmarkingBigDatasystemsisanopenproblem.Toaddressthisconcern

lanxing1251983·2023-10-15 16:52

(一) apache ignite-简介

主要有以下几点功能：Datagrid数据网格Computegrid计算网格Servicegrid服务网格Bigdataaccelerator大数据加数器Streaminggrid数据流网格apacheignite

席梦思·2023-10-15 16:24

数据湖和数据仓库的区别？

2011年DanWoods在福布斯发表“大数据需要更大的新架构”（BigDataRequiresaBigNewArchit

RonnieZhang1989·2023-10-15 03:25

linux搭建Kafka集群

node1,node3,node4安装Kafka1.下载地址：kafka下载此处使用的安装包是kafka_2.11-0.11.0.1.tgz2.上传安装包到服务器node1，解压到指定目录，如/opt/bigdata

人和心都在流浪·2023-10-14 17:40

Big Data Tools完整攻略，一键连接Hadoop

BigDataTools完整攻略安装BigDataTools连HDFS连Hadoop连Spark写HDFS程序安装BigDataTools打开idea选择插件在Marketplace里面输入BigDataTools

轻夏·2023-10-14 02:50

分布式NoSQL数据库HBase实践与原理剖析（一）

title:HBase系列第一章HBase基础理论1.1HBase简介ApacheHBase™istheHadoopdatabase,adistributed,scalable,bigdatastore.ApacheHBase

落叶飘雪2014·2023-10-13 23:51

06-Scala面向对象

虽然如此，但其面向对象思想和Java的面向对象思想还是一致的Scala包1）基本语法Scala中基本的package包语法和Java完全一致例如：packagecom.clear.bigdata.scala2

书香恋仁心·2023-10-13 11:32

2018年海外大数据和人工智能产业全景分析与趋势预测

1、全景概况Withoutbigdataanalytics,companiesareblindanddeaf,wanderingoutontotheWeblikedeeronafreeway.高科技营销魔法之父

yoku酱·2023-10-13 10:32

spark 读取hive事务表

参考链接：spark通过JDBC读取hive事务表https://github.com/Gowthamsb12/BigData-Blogs/blob/master/Spark_ACIDimportorg.apache.spark.sql.jdbc.JdbcDialectobjectHiveDialectextendsJdbcDialect

Java小田·2023-10-13 05:44

【EI会议征稿】第三届大数据、人工智能与风险管理国际学术会议 (ICBAR 2023)

第三届大数据、人工智能与风险管理国际学术会议(ICBAR2023)20233rdInternationalConferenceonBigData,ArtificialIntelligenceandRiskManagement

搞科研的小刘选手·2023-10-12 18:05

Scala的List

点击(此处)折叠或打开defmain(args:Array[String]){valbigData=List("Hadoop","Spark")valdata=List(1,2,3)valbigData_Core

cufu3352·2023-10-12 17:24

大数据导论习题_《大数据导论（通识课版）》.PDF

《大数据导论(通识课版)》教材官网：/post/bigdataintroduction/温馨提示：编辑幻灯片母版，可以修改每页PPT的厦大校徽和底部文字《大数据导论(通识课版)》课程介绍(PPT版本号：

weixin_39747075·2023-10-12 12:17

【EI检索征稿】第五届机器学习、大数据与商务智能国际会议（MLBDBI 2023）

第五届机器学习、大数据与商务智能国际会议（MLBDBI2023）20235thInternationalConferenceonMachineLearning,BigDataandBusinessIntelligence

搞科研的小刘选手·2023-10-12 11:22

开一门驳斥“狗屁”的课（多美）

今天要跟大家介绍的这门《CallingBullshitIntheAgeofBigData》——课名直译过来，大概是：“在这个大数据时代，分辨并驳斥狗屁”。

多美2018·2023-10-12 05:52

2018国内手机浏览器产品分析, UC、QQ占7成以上市场份额, UC用户满意度最高、粘性最强

市场上主流浏览器据比达咨询（BigData

黄大大么么哒·2023-10-11 07:20

Kerberos常用操作

Kerberos:kadmin.local使用kadmin.local命令登录[root@manager~]#kadmin.localAuthenticatingasprincipalroot/admin@BIGDATAwithpassword.kadmin.local

王羲之的之·2023-10-11 05:34

Flink各类运行环境介绍

java1.8maven工具开发工具：例如IntelliJIDEA，并配置环境具备了开发所依赖的各类环境后，即可进行Flink的开发工作创建一个maven工程pom.xml文件：4.0.0com.zenitera.bigdataflink

王亭_666·2023-10-10 23:54

python中TagMe包的token获取

1.注册Tagme，注册地址https://services.d4science.org/home（我用邮箱注册一直说验证码不对，最后用Google账号注册的）2.找sobigdata3.进入sobigdata

肉嘟嘟的zhu·2023-10-10 22:22

CC00011.spark——|Hadoop&Spark.V11|——|Spark.v11|sparkcore|开发环境搭建IDEA|

一、创建工程###---创建一个maven工程：~~~CreateNewProject——>Maven——>Next——>Name：SparkBigData——>Finish——>END###---安装

yanqi_vip·2023-10-10 18:48

大数据看广东高考

大数据看广东高考BigDataofCollegeEntranceExaminationinGuangdong小时候在幼儿园学习英文字母歌，小学背诵唐诗宋词三百首，初中接触牛顿第一定律，高中绞尽脑汁解几何函数题

CHANKAKIIII·2023-10-10 17:37

Flink同步Kafka数据到ClickHouse分布式表

gitee地址：https://gitee.com/ddxygq/bigdata-technical-pai业务需要一种OLAP引擎，可以做到实时写入存储和查询计算功能，提供高效、稳健的实时数据服务，最终决定

大数据技术派·2023-10-10 06:45

这是要被奖金给砸晕啊......

知识变现传送门：http://go.datafountain.cn/5526大赛介绍CCF大数据与计算智能大赛（CCFBigData&ComputingIntel

K同学啊·2023-10-09 22:25

2024上海智博会|上海国际智慧城市|物联网|大数据展览会

2024上海智博会|上海智慧城市|物联网|大数据展会2024ShanghaiInternationalSmartCity,IOT,bigdataExpo时间：2024年3月26-28日地点：上海跨国采购会展中心政策指导

高登先生·2023-10-09 17:05

Apache Doris 0.14.0部署HDFS Broker服务

目录1.编译2.HDFSBroker的部署1.编译官方提供Docker环境编译、Centos\Ubuntu环境编译、ARM64平台编译，我们这里采样Docker环境编译下载Docker镜像[root@bigdata001

Bulut0907·2023-10-09 10:46

【EI会议征稿】第三届公共管理与大数据分析国际学术会议（PMBDA 2023）

第三届公共管理与大数据分析国际学术会议（PMBDA2023）20233rdInternationalConferenceonPublicManagementandBigDataAnalysis第三届公共管理与大数据分析国际学术会议

搞科研的小刘选手·2023-10-09 08:42

Redis5.0.4集群模式搭建

6个文件夹，作为存放redis配置文件的目录cdredis-5.0.4mkdir800080018002800380048005将redis目录下的redis.conf复制到各个节点目录下[root@bigdata24redis

奥利奥_3357·2023-10-09 01:16

什么是大数据? 大数据的前景

大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

Alukar·2023-10-08 22:35

Hadoop之HDFS及MapReduce详解，以及HA集群搭建

一、概述大数据大数据（bigdata）是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产大数据的

Mayz梅子子子·2023-10-08 07:55

BigData5：Hadoop之HDFS的Edits和Fsimage文件

程序员大魔王·2023-10-08 07:23

Kafka学习，精炼总结

Kafka前言随着bigdata时代的到来，数据中蕴含的价值日益得到展现，仿佛一座待人挖掘的金矿，引来无数的掘金者。

yolee is zyl·2023-10-08 05:22

云原生开源工具、软件、教程大全。

目录AIAPIGatewayApplicationDeliveryBigDataDatabaseEdgeComputingKubernetesOperatorsLoggingMessageBrokerMiscellaneousNetworkObservabilityOrchestrationandSchedulerProxyRPCRuntimeSecurityandAuditServiceMesh

Sunday_ding·2023-10-07 08:25

spark集群搭建

spark集群搭建虚拟机配置bigdata-hmaster192.168.135.1124核心32GBbigdata-hnode1192.168.135.1134核心16GBbigdata-hnode2192.168.135.1144

！@123·2023-10-06 07:41

flink集群部署

虚拟机配置bigdata-hmaster192.168.135.1124核心32GBbigdata-hnode1192.168.135.1134核心16GBbigdata-hnode2192.168.135.1144

！@123·2023-10-06 07:38

BigData导论

发展历史2004年，Google三驾马车，分布式文件系统GFS、大数据分布式计算框架MapReduce、NoSQL数据库系统BigTable2006年，DougCutting（lucene的作者）根据论文原理初步实现了类似GFS和MapReduce的功能，开发出了Hadoop,包括分布式文件系统HDFS和大数据计算引擎MapReduce，Hadoop1.0大数据时代2008年，Hadoop正式成为

Youth_C&B·2023-10-04 14:41

CC00053.bigdatajava——|Java&static关键字继承.V13|——|Java.v13|IDEA.v02|初始化|

一、IDEA初始化###---案例题目~~~——>编程实现Animal类的封装，特征有：名字和毛色，要求提供打印所有特征的方法。~~~——>编程实现Dog类的封装并继承自Animal类，该类的特征有：牙齿数量，要求提供打印所有特征的方法。~~~——>编程实现DogTest类，在main方法中分别使用无参和有参方式构造Dog类型对象并打印特征。二、IDEA初始化###---IDEA初始化项目~~~—

yanqi_vip·2023-10-04 05:09

推荐频道

BigDATA