BigDATA 第8页

（本地安装clickhouse）执行 nstall/doinst.sh时报错： cp: 无法创建普通文件“/usr/bin/clickho

/module/再进入cdclickhouse-common-static-21.9.4.35/执行：install/doinst.sh报错报错信息和截图：root@bigdata1clickhouse-common-static

小辉懂编程·2023-09-23 15:58

社会化海量数据采集爬虫框架搭建

社会化海量数据采集爬虫框架搭建随着BIGDATA大数据概念逐渐升温，如何搭建一个能够采集海量数据的架构体系摆在大家眼前。

weixin_34381666·2023-09-23 04:53

大数据抓取采集框架

随着BIGDATA大数据概念逐渐升温，如何搭建一个能够采集海量数据的架构体系摆在大家眼前。

younger_z·2023-09-23 04:53

CDH重新初始化Hive元数据库

/schematool-initSchema-dbTypemysql--verbose执行报错：[root@prod-bigdata-pc7bin]#.

头顶榴莲树·2023-09-23 04:11

大数据之Hive初始化数据元

安装完hive后，需要配置好hive-site.xml配置如下：javax.jdo.option.ConnectionURLjdbc:mysql://bigdata113:3306/hivedb?

Java璐到底·2023-09-23 04:36

MySQL 两张表数据合并

有一个需求,需要从数据库中导出两张表的数据到同一个excel中鉴于是临时的业务需求,直接使用Navicat进行查询并导出数据.数据涉及到三张表CREATETABLE`bigdata_qiye`(`id`

Dylan Song·2023-09-22 14:04

LuatOS-SOC接口文档(air780E)-- fastlz - FastLZ压缩

示例--与miniz库的差异--内存需求量小很多,miniz库接近200k,fastlz只需要32k+原始数据大小--压缩比,miniz的压缩比要好于fastlz--准备好数据localbigdata=

l531798151·2023-09-22 05:29

启动spark历史服务失败问题处理

SPARK_HOME/sbin/start-history-server.shstartingorg.apache.spark.deploy.history.HistoryServer,loggingto/home/bigdata

泊涯·2023-09-21 23:52

rocketmq安装，内存配置，各种命令说明，windows下安装，控制台工具

1修改内存大小以下只是设置实例：cd/home/bigdata/installed/rocketmq-all-4.2.0（140机器）vimbin/runserver.sh（调整nameserver启动的内存

涂作权的博客·2023-09-20 23:17

大数据定义

大数据（bigdata），是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

一揽疯华·2023-09-20 12:07

spark-sql sql on yarn --deploy-mode cluster 改造

前言众所周知，spark-sql不能提交到远端并且使用cluster进行部署：huangyichun@bigdata130023:~#spark-sql--masteryarn--deploy-modeclusterExceptioninthread"main"org.apache.spark.SparkException

青冬·2023-09-19 12:09

flink1.13 table api 查询hive数据，及腾讯云cos存储

代码packagecom.bigdata.etlimportorg.apac

杜之心·2023-09-19 11:25

爱思唯尔云论坛：疫情挑战下的大数据与人工智能研究

值此疫情之际，由爱思唯尔旗下大数据期刊BigDataResearch发起的“爱思唯尔云论坛：疫情挑战下的大数据与人工智能研究”将于4月18日在线举办。

PaperWeekly·2023-09-18 22:17

大数据的概念

1、大数据定义对于“大数据”（Bigdata）研究机构Gartner给出了定义，“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

满龙林·2023-09-18 21:49

什么叫大数据大数据的概念

1、大数据定义对于“大数据”（Bigdata）研究机构Gartner给出了定义，“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

BLSPers·2023-09-18 21:16

使用Navicat premium同步表结构和表数据

同步"bigdata"数据库里的所有表和数据。1、在目标数据库创建跟源数据库相同的数据库：2、输入数据库名:我这里要同步的数据库名是“bigdata”,字符集和排序规则我用的是默认的。

fooke·2023-09-18 20:29

大数据知识点之什么是大数据

大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

猿界零零七·2023-09-18 18:54

阿里大数据架构师告诉你这些大数据面试题！你不看？

随着云时代的来临，大数据（Bigdata）也吸引了越来越多的关注。

大数据学习02·2023-09-18 09:15

Ubuntu 22.04 配置 JDK8

mirrors.tuna.tsinghua.edu.cn/Adoptium/8/jdk/x64/linux/OpenJDK8U-jdk_x64_linux_hotspot_8u372b07.tar.gz解压Jdk(在bigdata01

demodeom·2023-09-18 09:21

一个‘大数据’引发的商业模式推测

图片发自App大数据（BIGDATA）可能大家前面几年听这个词已经听的耳熟能详了，每个人都能说出一个一二三，但是大数据与我们生活息息相关吗？

A_VitoYang·2023-09-17 17:39

Apache Ignite 基本概念

简单说ApacheIgnite是为开发人员提供了实时处理大数据和内存计算的方便易用的解决方案：一个以内存为中心的数据平台可持久化、强一致和高可用强大的SQL、键-值存储及相关的APIBigdataaccelerator

wank1259162·2023-09-17 10:11

Apache Spark 2.2.0 官方文档中文版

原文链接:http://www.apachecn.org/bigdata/spark/268.htmlApacheSpark™是一个快速的,用于海量数据处理的通用引擎.官方网址:http://spark.apache.org

boonya·2023-09-17 10:40

先电2.4版本iaas搭建部分（vm中模拟，比赛使用服务器）

改革由于2020年云计算改革由团队比赛变成个人比赛，原本由三个人，iaas和pass，bigdata,云应用开发都变成一个人所有脚本都在/usr/local/bin/今天刚拿到镜像和文档，先进行搭建预先准备配置两个网卡的

黑白子2000·2023-09-17 01:01

1.spark读取数据与scala编程

以下是idea中用到的maven仓库版本说明：spark2.3.1scala2.11hadoop3.1.14.0.0com.attest.bigdataspark-2003291.0org.apache.sparkspark-core

一杭oneline·2023-09-16 10:59

启动hadoop服务报错

hadoop和spark后，启动hadoop集群报如下错误：上一次登录：五9月1515:32:56CST2023pts/0上[root@managerconf]#whichstart-all.sh/home/bigdata

泊涯·2023-09-16 10:04

Python：如何实现提取文本关键词、摘要、短语、无监督文本聚类

一、提取文本关键词frompyhanlpimport*content="随着云时代的来临，大数据（Bigdata）也吸引了越来越多的关注。分析师团队认为，大数据（Bigdata）

浩栋丶·2023-09-14 20:09

mvn install的时候出现的Please refer to dump files (if any exist) [date].dump

出现问题Pleasereferto/Users/wanghaohao/Downloads/workspace/BigDataOss/target/surefire-reportsfortheindividualtestresults.Pleaserefertodumpfiles

想用代码改变世界·2023-09-14 10:54

Faasm: Lightweight Isolation for Efficient Stateful Serverless Computing

AbstractServerlesscomputingisanexcellentfitforbigdataprocessingbecauseitcanscalequicklyandcheaplytothousandsofparallelfunctions.Existingserverlessplatformsisolatefunctionsinephemeral

蟹蟹宁·2023-09-13 18:29

[bigdata-078] python3 logging 的示例 TimedRotatingFileHandler和RotatingFileHandler 基于时间切分和基于文件大小切分

1.官网文档https://docs.python.org/3/library/logging.html2.logger不会直接实例化。而是以logging.getLogger(name)方式实例化，如果多次以同一个name获取logger，那么返回的都是同一个logger。name可以是形如foo.bar.baz，bar是foo的子logger，因此，建议以类似python包的结构，组织多种lo

未济2019·2023-09-12 18:29

EasyExcel导出Excel指定属性列

前端传递需要导出的字段，后端根据前端的字段导出对应字段列的值到Excel1.所需JAR包com.alibabaeasyexcel2.2.72.导出实体类packagecom.bulls.bigdataexport.controller

豆豆·丁·2023-09-11 20:52

3-2 元学习 Small Sample Learning in Big Data Era 笔记

一、基本信息题目：SmallSampleLearninginBigDataEra 期刊/会议：arXiv 发表时间：2018年引用次数：1二、论文总结2.1研究方向小样本学习综述2.2主要内容

Siberia_·2023-09-11 13:14

linux(centos7)配置SSH免密登录

给三台机器配置主机名映射在Windows系统中修改hosts文件，新增以下内容；192.168.xxx.xxxbigdata_node1192.168.xxx.xxxbigdata_node2192.168

新征程，再出发·2023-09-11 04:04

CoE 到底是啥？

老板一直嚷嚷着要建BigDataCoE.听的一脸不理解COE到底是啥？

对酒当歌今夕何夕·2023-09-10 06:42

一键启动hadoop集群

文章目录一键启动Hadoop集群一键启动Hadoop集群输入cd/home/atbigdata/bin，进入bin目录，进行查看是否有自己的编写好的群启动Hadoop集群脚本。

Cocobuhui·2023-09-09 13:49

BigData-MySQL（LeetCode）

第一题组合两个表表1:Person+-------------+---------+|列名|类型|+-------------+---------+|PersonId|int||FirstName|varchar||LastName|varchar|+-------------+---------+PersonId是上表主键表2:Address+-------------+---------+|列

蜡笔小虎_007·2023-09-09 01:34

论文笔记：一分类及其在大数据中的潜在应用综述

0概述论文：Aliteraturereviewonone‑classclassificationanditspotentialapplicationsinbigdata发表：JournalofBigData

HenrySmale·2023-09-08 06:36

信息化发展27

大数据概述大数据（BigData）指无法在

AbelZ_01·2023-09-08 02:57

大数据下的精准营销获客

2012年以后，大数据（bigdata）一词越来越多地被提及，人们用它来描述和定义信息爆炸时代产生的海量数据，并命名与之相关的技术发展与创新。

浪浪的数据侠客·2023-09-08 00:17

大数据技术之Hadoop：使用命令操作HDFS（四）

文件六、拷贝HDFS文件七、HDFS数据移动操作八、HDFS数据删除操作九、HDFS的其他命令十、hdfsweb查看目录十一、HDFS客户端工具11.1下载插件11.2本地安装Hadoop环境11.3配置BigDataTools

何苏三月·2023-09-07 05:58

MySQL——数据库以及数据表的创建

，如果不使用这个参数，则我们在重复创建一个已经存在的数据库的时候就会报错，中断我们的SQL语句的执行：这里我们看到我们同时执行了两条SQL语句，并且都执行成功了，我们的数据库中多出了一个我们自己创建的bigdata

Error_exception_worn·2023-09-06 20:33

什么是 TEE

SabtM,AchemlalM,BouabdallahA.Trustedexecutionenvironment:whatitis,andwhatitisnot[C]//2015IEEETrustcom/BigDataSE

山登绝顶我为峰 3(^v^)3·2023-09-06 14:58

storm+mysql集成

使用storm自带的JdbcInsertBolt插入数据maven4.0.0com.sid.bigdatastorm0.0.1jarstormhttp://maven.apache.orgUTF-81.1.1org.apache.stormstorm-core

数据萌新·2023-09-06 05:51

Prometheus + grafana 的监控平台部署

一、Prometheus安装tar-zxvfprometheus-2.44.0.linux-amd64.tar.gz-C/opt/module/sudochown-Rbigdata:bigdata/opt

bigdata-rookie·2023-09-05 20:47

4 | Java Spark实现 WordCount

代码packagecom.bigdata;importorg.apache.spark.SparkConf;importorg.apac

小森·2023-09-05 06:37

大数据技术原理与应用学习笔记第1章

《大数据技术原理与应用》教材官网：http://dblab.xmu.edu.cn/post/bigdata/2.大数据软件安装和编程实践指南官网林子雨编著《大数据技术原理与应用》教材配套大数据软件安装和编程实践指南

蔬菜院院长·2023-09-05 00:16

My Job

I'minvolvedinsomanyproject,andsomeofthemarenationalLevel.Forexample,NowIwasresponsibleforThecarnetworkingbigdataplatform

崴脚的小强·2023-09-04 17:04

做为一名大数据新手，应该通过这篇文章了解大数据

大数据，bigdata，《大数据》一书对大数据这么定义，大数据是指不能用随机分析法(抽样调查)这样捷径，而采用所有数据进行分析处理。

大数据小火老师·2023-09-04 05:40

python——spark入门

Hadoop是对大数据集进行分布式计算的标准工具，这也是为什么当你穿过机场时能看到”大数据(BigData)”广告的原因。

代码输入中...·2023-09-04 04:43

5 | Java Spark WordCount打成Jar 包测试

packagecom.bigdata;importorg.apache.spark.SparkConf;importorg.apache.spark.api.java.

小森·2023-09-02 07:11

当时不是寻常·2023-09-01 22:48

推荐频道

BigDATA