MR（Hadoop）

【 Vue 】自定义渲染器和异步渲染

本章我们将在上一章的基础上讲解更加高级的渲染器：自定义渲染器(Customrenderer)以及异步渲染。
fans小知·2024-03-24 04:51

【笔记】HDFS基础笔记

启动hadoop命令（未配环境变量）：进入hadoop安装目录输入.
哇咔咔哇咔·2024-03-20 04:12

【笔记】Linux常用命令

命令含义cd/home/hadoop#把/home/hadoop设置为当前目录cd..#返回上一级目录cd~#进入到当前Linux系统登录用户的主目录（或主文件夹）。
哇咔咔哇咔·2024-03-20 03:11

go的fasthttp学习

fasthttpwasdesignedforsomehighperformanceedgecases.Unlessyourserver/clientneedstohandlethousandsofsmalltomediumrequestspersecondandneedsaconsistentlowmillisecondresponsetimefasthttpmightnotbeforyo
~kiss~·2024-03-19 23:06

最强大脑是这样炼成的！不同年龄段孩子的全脑开发

大脑在不同的年龄阶段发育的位置不同，从美国国立精神健康研究所通过磁性共鸣成像(f－MRI)技术记录的脑部发育过程研
启智天下张老师·2024-03-19 14:39

linux安装单机版spark3.5.0

一、spark介绍是一种通用的大数据计算框架，正如传统大数据技术Hadoop的MapReduce、Hive引擎，以及Storm流式实时计算引擎等.Spark主要用于大数据的计算二、spark下载spark3.5.0
爱上雪茄·2024-03-17 18:57

四、linux常用命令

一、软件安装和卸载在centos7.3中使用软件相关命令：yuminstall软件名来安装软件yumremove软件名卸载软件yumsearch模糊名字搜索软件yumcleanpackages清理缓存yumlist
爱泡脚的CXY·2024-03-17 15:58

Java后端响应出来的图片流在HTML中显示

layer.msg("当前没有选择设置主图LOGO");returnfalse;}varimg='''';/***返回一个图片流到前端显示**@paramlogoName*@parammap*@paramresponse
Acmen-zym·2024-03-17 08:13

【vivado】fpga时钟信号引入

一、从专用的MRCC/SRCC时钟引脚引入对于XilinxFPGA来说必须使用片上的MRCC或者SRCC引脚来把外部时钟信号引入FPGA、添加相关的时钟约束，然后再在FPGA上使用这些引入的时钟。
刘小适·2024-03-16 12:18

Hadoop简介

简介大数据简介概述大数据的说法从出现到现在，也经历了十多年时间的发展。而在这十几年的发展过程中，非常多的机构、组织都试图对大数据做出过定义，例如：研究机构Gartner给出了这样的定义："大数据"是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。再例如根据维基百科的定义，大数据是指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。
程序员小郭同学·2024-03-16 07:10

数据库事务-如何防止幻读

幻读（PhantomRead）在数据库事务处理的概念中，是指在一个事务内多次执行相同的查询语句时，在不同的时间点看到了不同的行数，即出现了之前未读到的“幽灵”数据。
小王师傅66·2024-03-16 05:37

记录一次filebeat日志丢失的问题

起初怀疑是日志调用链改造导致的，也修复了一些问题，但没有解决根本问题问题表现日志搜集不够实时在k8s中执行kubectllogs--tail=500test-6bb5648c4c-4fmrr-ntestns
无聊的刀刀·2024-03-16 01:03

Hive中的NVL函数与COALESCE函数

ReturnsdefaultvalueifvalueisnullelsereturnsvalueExample:>SELECTnvl(null,'bla')FROMsrcLIMIT1;blaFunctionclass:org.apache.hadoop.hive.ql.udf.generic.GenericUDFNv
独影月下酌酒·2024-03-15 13:13

hive库表占用空间大小的命令

hdfsdfs-du-h/user/hive/warehouse2、按占用空间大小降序排列hdfsdfs-du/user/hive/warehouse/ipms.db|sort-nr3、查某一个分区占用空间大小（单位G)hadoopfs-ls
刀鋒偏冷·2024-03-15 13:13

【Java】读取手机文件名称

ProcessBuilder调用ADB命令来获取文件列表：importjava.io.BufferedReader;importjava.io.IOException;importjava.io.InputStreamRe
LI耳·2024-03-14 19:47

【LiveVideoStack】批量下载公众号文章

暂停商业运行官方建议关注文章保存，因此：y9000p上运行：xiaoguyu/wechatDownload大神太厉害了，工具软件很好很强大windows试试直接安装、编译、运行zhangbin@LAPTOP-DFV9CMRAMINGW64
等风来不如迎风去·2024-03-14 14:41

03hive数仓安装与基础使用

hiveHive概述Hive是基于Hadoop的一个数据仓库工具。
daydayup9527·2024-03-14 13:39

C#--StreamWriter和StreamReader对象及常用函数

目录StreamReaderReadLine()Split（）StreamWriterWriteLine（）Flush()Close()StreamReaderStreamReader是C#中用于从流（
海绵波波107·2024-03-14 07:29

docker chrome 镜像制作

1.构建基础镜像dockerbuild-fDockerfile-tmycentos:0.1.FROMcentos:[email protected]mRUNyuminstall-ywgetnet-toolsiproutebind-utilslrzsz
a cool fish(无名)·2024-03-14 00:21

Python经典基础习题（网络爬虫）

程序代码：fromurllib.requestimporturlopenfromreimportfindallimportrequestsurl='https://www.cae.cn/cae/html
是千可阿·2024-03-12 19:10

HDFS

（一）HDFS简介及其基本概念  HDFS（HadoopDistributedFileSystem）是hadoop生态系统的一个重要组成部分，是hadoop中的的存储组件，在整个Hadoop中的地位非同一般
weixin_51987187·2024-03-12 14:32

大数据开发（Hadoop面试真题-卷二）

大数据开发（Hadoop面试真题）1、在大规模数据处理过程中使用编写MapReduce程序存在什么缺点？如何解决这些问题？
Key-Key·2024-03-12 02:15

Nodejs运行vue项目时，报错：Error: error:0308010C:digital envelope routines::unsupported

前端项目使用(npmrundev)运行vue项目时，出现错误：Error:error:0308010C:digitalenveloperoutines::unsupported经过探索，发现问题所在，主要是
softshow1026·2024-03-11 14:43

LTE Network Quality Analysis Method Based on MR Data and XGBoost Algorithm

原文链接：LTENetworkQualityAnalysisMethodBasedonMRDataandXGBoostAlgorithm|IEEEConferencePublication|IEEEXploreBasicInformation
YZRuin·2024-03-10 21:20

zookeeper 使用

zookeeper介绍zookeeper是一个为分布式应用提供一致性服务的软件，它是开源的Hadoop项目中的一个子项目，并且根据google发表的论文来实现的，接下来我们首先来安装使用下这个软件，然后再来探索下其中比较重要一致性算法
SkTj·2024-03-10 02:15

Hive SQL 开发指南（三）优化及常见异常

在大数据领域，HiveSQL是一种常用的查询语言，用于在Hadoop上进行数据分析和处理。为了确保代码的可读性、维护性和性能，制定一套规范化的HiveSQL开发规范至关重要。
大数据_苡~·2024-03-09 14:13

本地nodejs和npm版本过高，无法正常使用npm下载低npm版本项目所需依赖，不降级解决办法

cnpminstallnode-sass4.继续安装：cnpminode-sass-D5.删除项目中出现的node_modules文件夹6.根据package.json重新安装依赖：cnpminstall7.在开发环境中启动项目：npmrundev
安迪·2024-03-09 13:11

管理npm源：如何使用nrm工具提升你的开发效率

幸运的是，有一些工具和技巧可以帮助开发者优化这一环节，其中nrm（npmregistrymanager）是一个非常高效的解决方案。什么是nrm？nrm是
迎风斯黄·2024-03-09 13:40

微信小程序 构建npm报错 没有生成miniprogram_npm目录

报错说找不到/miniprogram_npm基础库2.27.1解决方法一、先在project.config.json中检查配置{"setting":{"packNpmManually":true,"packNpmRelationList
MorrisGeek·2024-03-09 10:07

大数据开发（Hadoop面试真题-卷九）

大数据开发（Hadoop面试真题）1、Hivecount(distinct)有几个reduce，海量数据会有什么问题？
Key-Key·2024-03-09 10:06

微信小程序使用npm、miniprogram管理

在项目根目录打开终端执行npminit-y修改配置文件project.config.json{"miniprogramRoot":"miniprogram/","setting":{"packNpmManually
勿语&·2024-03-09 10:05

C# 自定义定时器的开启、暂停、继续

、创建定时器privateSystem.Windows.Forms.TimertimerGetTime=newSystem.Windows.Forms.Timer();//创建定时器publicenumRunState
它朝若是·2024-03-09 08:03

大数据开源框架技术汇总

目录系统平台（Hadoop、CDH、HDP）监控管理（CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle）文件系统（HDFS、GPFS、Ceph、Gluster
浪尖聊大数据-浪尖·2024-03-08 20:48

第五届核磁机器学习班（训练营：2023.6.5~6.17）

茗创科技专注于脑科学数据处理，涵盖（EEG/ERP,fMRI,结构像,DTI,ASL,FNIRS）等，欢迎留言讨论及转发推荐，也欢迎了解茗创科技的脑电课程，数据处理服务及脑科学工作站销售业务，可添加我们的工程师
茗创科技·2024-03-07 13:22

opencv之读写图像(imread)

1、读函数原型CV_EXPORTS_WMatimread(constString&filename,intflags=IMREAD_COLOR);第一个参数为图片的名称。
Luck-Dream·2024-03-05 16:40

Story(80 Years Old)

thewomanwasalertedbyastrangefeelingandshewenttoherdoctor'sclinic.Thedoctorexaminedandsaid,"Congratulations,Mrs.Jones
寻寻问问·2024-03-03 08:26

【Hadoop】在spark读取clickhouse中数据

读取clickhouse数据库数据importscala.collection.mutable.ArrayBufferimportjava.util.Propertiesimportorg.apache.spark.sql.SaveModeimportorg.apache.spark.sql.SparkSessiondefgetCKJdbcProperties(batchSize:String="
方大刚233·2024-03-03 06:54

【Hadoop】使用Metorikku框架读取hive数据统计分析写入mysql

一、定义作业文件作业文件该文件将包括输入源、输出目标和要执行的配置文件的位置，具体内容如下metrics:-/user/xrx/qdb.yaml#此位置为hdfs文件系统目录inputs:output:jdbc:connectionUrl:"jdbc:mysql://233.233.233.233:3306/sjjc"user:"root"password:"123456"driver:"com.
方大刚233·2024-03-03 06:23

Vue 起步

npminstall--globalvue-cli创建一个基于webpack模板的新项目$vueinitwebpackmy-project安装依赖，走你$cdmy-project$npminstall$npmrundev
Kathy丶Andy·2024-03-03 03:11

外面下雪了---Snowing outside

Nothing,justwatchingTV.I'mreallybored.Idon'thaveanythingtodo.Idon'tdoanythingeither.Ididn'tdoanythingtodayexceptcleanmyhouse.Iknow.Iwasplanningtogotothemalltodaywithoneof
快乐有你_1ec8·2024-03-03 02:35

【无标题】

1.IO进程线程之共享内存：shmrcv.c:#include#definePAGESIZE4096intmain(intargc,constchar*argv[]){key_tkey=-1;if((key
！燚㵘！·2024-03-02 19:08

Spark-sql Adaptive Execution动态调整分区数量，调整输出文件数

看看这个参数如何运用：我们的spark-sql版本：[hadoop@666~]$spark-sql--versionWelcometo______/__
不想起的昵称·2024-03-02 15:03

hadoop里需要的libhadoop.so版本不一致导致问题及解决办法

$HADOOP_HOME/lib/native/Linux-amd64-64(64位操作系统)$HADOOP_HOME/lib/native/Linux-i386-32（32位操作系统）文件夹中的libhadoop.so
weixin_34304013·2024-03-02 09:23

hadoop启动报错处理

1.hadoop启动报错1.1.问题1util.NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform...usingbuiltin-javaclasseswhereapplicable
akuibpt23191·2024-03-02 08:51

python opencv旋转图片90度_opencv图像镜像，转置达成图像旋转效果(python代码)

#作者千秋#QQ919825501importcv2image=cv2.imread('1.jpg')cv2.imshow("image",image)#镜像image1=cv2.flip(image,
weixin_39584571·2024-03-01 17:30

PythonOpenCV随机粘贴图像

importcv2importnumpyasnpimportrandom#读取两个图像image1=cv2.imread('image1.jpg')image2=cv2.imread('image2.jpg
小厂程序猿·2024-03-01 11:22

Spark整合hive（保姆级教程）

准备工作：1、需要安装配置好hive，如果不会安装可以跳转到Linux下编写脚本自动安装hive2、需要安装配置好spark，如果不会安装可以跳转到Spark安装与配置（单机版）3、需要安装配置好Hadoop
万家林·2024-02-29 09:47

primus

mrkrinkle大提琴的演奏是非常好的变化，在摇滚乐的曲风中这样的添加融合的非常好。作为节奏乐器，肥厚的“锯弦”声不断的重复，再加上滑弦的演奏方法，产生出了非常奇妙的音色，不需要效果器和音响模
老板阿修罗·2024-02-28 16:57

CSS2DRenderer的使用

具体参照https://github.com/mrdoob/three.js/blob/master/examples/css2d_label.html；CSS2DRenderer的使用import{CSS2DObject
qq_39672409·2024-02-28 09:20

EMR StarRocks实战——Mysql数据实时同步到SR

文章摘抄阿里云EMR上的StarRocks实践：《基于实时计算Flink使用CTAS&CDAS功能同步MySQL数据至StarRocks》前言CTAS可以实现单表的结构和数据同步，CDAS可以实现整库同步或者同一库中的多表结构和数据同步
爱吃辣条byte·2024-02-28 09:49
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他