Hadoop实操

Hadoop框架下MapReduce中的map个数如何控制

一个job的map阶段并行度由客户端在提交job时决定客户端对map阶段并行度的规划基本逻辑为：一、将待处理的文件进行逻辑切片（根据处理数据文件的大小，划分多个split），然后每一个split分配一个maptask并行处理实例二、具体切片规划是由FileInputFormat实现类的getSplits()方法完成切分规则如下：1.简单地按照文件的内容长度进行切片2.切片大小默认是datanode
数据萌新·2024-01-12 14:31

解决java连接Hbase程序卡住执行也不报错的问题

程序运行不知多久，就报错了（截取一行有用的）：java.net.UnknownHostException:cannotresolvehadoop01,1
向他一样rap·2024-01-12 14:37

查询速度提升15倍！银联商务基于 Apache Doris 的数据平台升级实践

为更好提供数据服务，银联商务实现了从Hadoop到ApacheDoris的架构升级，使数据导入性能提升2-5倍、ETL场景性能提升3-12倍、查询分析响应速度提升10-15倍，满足大规模数据导入和实时极速查询的业务需求
SelectDB技术团队·2024-01-12 13:28

AIGC内容分享(三十二)：营销场景下的AIGC实践经验分享

前言当今数字化时代，AIGC正以惊人的速度影响着设计行业，在这个背景下，饿了么设计中心的设计师们在去年开始接触AIGC，并逐步积累了实操及应用经验，以下是我们采访的设计师们对AIGC到来的一些看法。
之乎者也··2024-01-12 13:55

GBASE南大通用 GBase 8a 产品构建数仓系统架构

架构技术实现特点适用场景独立数据仓库（集市）系统架构一套GBase8a物理集群适用于数据规模较小的业务场景适用于各业务之间数据互访较频繁的业务场景适用于单一独立的业务场景企业级数仓系统架构多套GBase8a物理集群，根据需要搭配Hadoop
GBASE数据库·2024-01-12 12:04

#2019年读书笔记1: 《思考的要诀》

（为什么，是什么，到底是什么）2.思考的实操手册。a.一定坚持独立思考，杜绝搜索b.脑海中的东西视觉化，具体化c.养成思考2⃣️个点子的习惯➡️出发点：这
孙彤雯·2024-01-12 12:28

可配置化软件架构探析及实操秘诀

转载至：微信公众号待字闺中http://mp.weixin.qq.com/s?__biz=MjM5ODIzNDQ3Mw==&mid=2649965996&idx=1&sn=617c19cc1cfeb28ebd7aed1bbad0a7ff&scene=0#rd下一代软件架构是服务化、组件化、可配置化，可配置化成为了软件架构的最高级别。可配置化架构是软件架构努力的方向。可配置化架构是指利用可配置的方式
极永·2024-01-12 11:11

Hive安装与配置

注意：Hive的安装与配置建立在Hadoop已安装配置好的情况下。hadopp安装与配置Hive的基本安装从官网下载Hive二进制包，下载好放在/opt目录下。
qq_58647543·2024-01-12 11:50

关于hive在运行insert时失败原因刨析

yarn容器最大内存、容器最小内存等Theclasstouseastheresourcescheduler.yarn.resourcemanager.scheduler.classorg.apache.hadoop.yarn.server.resourcemanager.scheduler
Alonzo de blog·2024-01-12 08:57

hadoop分布式文件系统

Hadoop分布式文件系统分布式文件系统：管理网络中跨多台计算机存储的文件系统称为分布式文件系统。
Alonzo de blog·2024-01-12 08:27

你知道 Mybatis 框架如何实现级联关系吗？

##级联关系实现的方式-一对一-一对多##案例实操###一对一关系实现方式resultType/resultMap**接口方法**~~~java/***一对一关联查询resultType*@paramuserId
GikX·2024-01-12 08:15

【数据库学习】hive

1，HIVEHadoop的数据仓库处理工具，数据存储在Hadoop兼容的文件系统（例如，AmazonS3、HDFS）中。
兔兔西·2024-01-12 08:50

基于JavaWeb+BS架构+SpringBoot+Vue基于hive旅游数据的分析与应用系统的设计和实现

文目录前言主要技术系统设计功能截图订阅经典源码专栏Java项目精品实战案例《500套》源码获取文末获取源码Lun文目录1概述51.1研究背景51.2研究意义51.3研究内容52关键技术介绍72.1Java介绍72.2MySql数据库72.3Hadoop
FREE技术·2024-01-12 07:01

【10堂课】10-持续活在愿景中不断创造人生的价值

哈佛大学《幸福的方法》提供大家实操工
经营你的人生·2024-01-12 07:20

Spark基础

pipinstall-ihttps://pypi.tuna.tsinghua.edu.cn/simplepandas更新最新版本pippython-mpipinstall--upgradepip1、启动服务Hadoop
中长跑路上crush·2024-01-12 07:33

Airtest-Selenium实操小课①：爬取新榜数据

版权声明：允许转载，但转载必须保留原链接；请勿用作商业或者非法用途1.前言最近看到群里很多小伙伴都在用Airtest-Selenium做一些web自动化的尝试，正好趁此机会，我们也出几个关于web自动化的实操小课
AirtestProject·2024-01-12 06:59

Airtest-Selenium实操小课②：刷B站视频

1.前言上一课我们讲到用Airtest-Selenium爬取网站上我们需要的信息数据，还没看的同学可以戳这里看看~那么今天的推文，我们就来说说看，怎么实现看b站、刷b站的日常操作，包括点击暂停，发弹幕，点赞，收藏等操作，仅供大家参考学习~2.需求分析和准备整体的需求大致可以分为以下步骤：打开chrome浏览器打开百度网页搜索“哔哩哔哩”点击进入“哔哩哔哩”官网搜索关键词“Airtest酱”点击进入
AirtestProject·2024-01-12 06:56

Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive

说明Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive完全分布式高可用集群搭建下载https://archive.apache.org/dist/我最终选择Zookeeper3.7.1
nsa65223·2024-01-12 06:08

送你一个最接地气的实操方法！

在这里，我和大家分享一个亲测有效的逻辑表达实操方法，希望对大家有所帮助，少走弯路。经验微小，感觉十分惭愧。
砖先生·2024-01-12 05:43

黑猴子的家：Redis 客户端访问

1、一个端口[root@hadoop102redis-3.2.5]#redis-cli2、多个端口客户端访问有多个端口的情况下[root@hadoop102redis-3.2.5]#redis-cli-p63793
黑猴子的家·2024-01-12 03:21

细数那些不起眼但利润很大的赚钱生意

1、之前一位老学员，学了虚拟资源项目实操后，直接在同行那里购买了一套网课，对照课程翻录
虚拟资源创业军团·2024-01-12 03:10

03周检视（20190114-20190120）

优化线上讲座下周关注重点：1.读完《故事二》2.第六期天使班毕业典礼3.文案一篇、发布公众号一次4.长沙学习笔记整理5.修定优化个人职业规划下月要事：1.关注2019年带班团队的建设2.启动项目带领团队实操运营
梁正欣·2024-01-12 02:35

Linux操作系统下，彻底删除MySQL

背景：部署Hive时，遇到了无法访问数据库的问题；此时Linux中的环境是，已安装MySQL-8.0.35的版本，JDK8和Hadoop-3.3.4版本；然后开始上传Hive-3.1.3版本的的安装包和
zhiweizhang_zzw·2024-01-12 02:59

两大热门框架 Spring 与 Mybatis 如何整合呢？

##整合的方式-新建maven项目-引入依赖包-配置资源文件##案例实操###新建maven项目新建maven项目spring_mybatis目录结构如下:主目录包:com.xxx.dao、com.xxx.mapper
GikX·2024-01-12 02:39

细数那些不起眼但利润很大的赚钱生意

1、之前一位老学员，学了虚拟资源项目实操后，直接在同行那里购买了一套网课，对照课程翻录
关注阿阳微客·2024-01-12 01:17

探索Steam搬砖项目：挖掘潜在收益的新机会

本文将深入剖析Steam搬砖项目的核心概念、实操流程以及潜在风险，以帮助读者更好地理解这一项目，并在此基础上，提出一些个人的见解和理解。
关注阿阳微客·2024-01-12 01:16

Spark完全分布式集群搭建

环境准备服务器集群我用的CentOS-6.6版本的4个虚拟机，主机名为hadoop01、hadoop02、hadoop03、hadoop04，另外我会使用hadoop用户搭建集群(生产环境中root用户不是可以任意使用的
小猪Harry·2024-01-12 00:41

Hadoop伪集群模式搭建MAC版[Linux依旧适用]

[TOC]Hadoop1环境搭建1.1ssh免密登录需要生产sshkey[可以忽略，但是启动的时候，每次都需要输入密码]首先在用户根目录下ls-a查看包括隐藏的文件夹，应该能发现.ssh，如果没有就安装
zZeroZz·2024-01-12 00:45

团队实操，百用不厌！

我是电商珠珠在抖店入驻之后，品也选好了，就卡到了选达人这方面。要么选的达人带不起来自己的品，要么就是被达人骗样品，要么就是没有达人愿意搭理自己。我做抖店也已经三年时间了，这种情况遇到过很多，接下来我就来给大家讲讲我是怎么筛选达人的。筛选达人渠道1、同行店铺不知道怎么去筛选达人的，可以利用蝉妈妈等软件，去找到竞品关键词，或是同行店铺。点击“商品详情信息”就可以看到他的带货达人，以及佣金的多少，这个达
珠珠 RL8069·2024-01-12 00:17

实操详解！

我是电商珠珠视频号小店距今天为止，也才发展了不到一年的时间。在23年的时候开始激起浪花来，很多感兴趣的人都纷纷来入驻。但是在入驻之后，却不知道如何去选品，依照网上的方法，有点差强人意。我做视频号小店也已经有一年时间了，所以对视频号小店的玩法和规则都很熟悉，下面我来讲讲我是怎么选品的。1、用户人群商家的首选肯定是找达人进行推广，所以可以参考用户人群去进行选品。其中，40-65岁的女性用户群体则为主力
珠珠 RL8069·2024-01-12 00:47

演讲训练

练就是多次进行培训，理论的知识需要通过实操
勤劳的小蜜蜂V·2024-01-11 23:05

2019-04-21

还有就是我们组的实操还需要多练习，我自己的表演功底太弱了，汗颜……看到其他组的成员花样都很多，表演形式也很精彩，心里有点隐隐地担心。
泽蒙·2024-01-11 23:04

实操班复训第二天的感悟

两天复训下来，，再次验证了，学习是持续不断的事儿！复训真的真的真的很有必要！还有就是课堂上听的怪好，咦，讲的真好！不实施，不落地，就等于学了就忘！真的是需要多练习多运用的！更要多复习，多去看看自己记得那些笔记！那些知识点！特别是院长讲的案例，当问到接下来怎么回答的时候，真的我好多都回答不上来，要说没印象吧，几本上都有印象！但是就是回答不上来！这是怎么回事呢？因为我听课的时候听的即兴，忘得也快！在不
做个有良知的妈妈·2024-01-11 23:33

人工智能学习与实训笔记（五）：百度AI能力AIP sdk调用实操

下面以实际调用AIP的语音识别接口为例进行实操介绍：1.百度AIPsdk安装pipinstallbaidu-aip2.百度对开发者还是非常友好的，可以申请AI能力免费使用额度，比如语音免费调用的申请可以参考
穿越光年·2024-01-11 22:02

发单2019.6.13

发单，从理论—演练—实操！直接和不同世界，不同性格，不同年龄的人打交道，我们的绝技就是微笑赞美。人的本能就是拒绝，我也是在被拒绝的同时也会被接受！不巧的是，遇到了我们的天敌，城管！
西土瓦Fineyoga·2024-01-11 21:05

elementary OS5 升级 OS6

elementaryOS5升级OS61、背景2、目标3、思路4、实操4.1、更新现有系统4.2、更新6的源4.3、更新操作1、背景转眼间安装使用elementaryOS5.1.7Hera操作系统已经有两年了
水步天·2024-01-11 21:45

实操+面试题：验证mysql索引失效场景

本文主要是为了验证何种情况下索引会失效，建表使用了innoDB存储引擎以下是一些索引失效传言，和本人验证结果，基于5.6的版本“索引列不能出现null值”，不准确，可能会全表扫描，可能会走索引，看优化器怎么衡量查询的代价“模糊查询，只有左匹配才能走索引”，对“用了or的查询，必须or两边的条件都满足最左匹配才能走索引”，对“隐式转换会引起索引失效”，对“!=不走索引”，不知道，我在主键和非主键索引
w_3123454·2024-01-11 18:35

pyspark config设置、增加配置、限制_success文件生成；spark-submit 集群提交参数

1、pyspark增加config设置javaheap错误增加内存spark=(SparkSession.builder.config("spark.hadoop.hive.exec.dynamic.partition
loong_XL·2024-01-11 18:00

MPP架构与Hadoop架构是一回事吗？

它的“谬误”之处在于，明明叫做“MassivelyParallelProcessing（大规模并行处理）”，却让非常多的人拿它与大规模并行处理领域最著名的开源框架Hadoop相关框架做对比，这实在是让人困惑
ThoughtWorks·2024-01-11 17:47

2024年01月微软更新Bug 已解决 ！Explorer.EXE 提示：Windows无法访问指定设备、路径或文件。你可能没有适当的权限访问该项目。

实操篇元凶：微软更新！身边6
zhangbest5·2024-01-11 17:10

#动手返现08# 这个训练营教你写和赚钱还有做人。

自媒体赚钱的实操方法。其他相提升自我课程的学习。文案写作，个
赚钱变美撩汉的兰若·2024-01-11 17:18

通过 Spring 框架如何进行JDBC操作呢？

Spring整合JDBC的方式添加依赖编写配置文件db.propertiesbean.xml配置修改配置数据源模板类配置测试整合结果案例实操添加依赖数据库驱动jar包mysql-connector-java
天上的小仙女呀·2024-01-11 17:58

大学生未毕业就月均收入5000，原来是做了这些。

干货满满，全是实操。校内兼职大学生刷课现在的大学生基本上都会有网课，例如某到、某树。甚至一些网课刷完不算完，还要进行考试。试想一下，如果你有这么多门课需要学习，不仅消耗流量还要花费自己的时间。
云原生实战指南·2024-01-11 17:53

《PySpark大数据分析实战》-27.数据可视化图表Pyecharts介绍

对大数据技术栈Hadoop、Hive、Spark、Kafka等有深入研究，对Data
wux_labs·2024-01-11 16:21

从0开始学Git指令（3）

从0开始学Git指令因为网上的git文章优劣难评，大部分没有实操展示，所以打算自己从头整理一份完整的git实战教程，希望对大家能够起到帮助！
程序员 Hasity·2024-01-11 16:37

抖音小说推广赚钱攻略：成功实践和技巧分享

本文将为您提供抖音小说推广赚钱的攻略，探讨推广技巧与实操方法，帮助您实现小说的广泛传播和获取收益的目标。首先，要想在抖音上成功推广小说并赚钱，关键在于打造吸引人的内容和独特的创意。
高省浮沉000018·2024-01-11 16:37

从0开始学Git指令（2）

从0开始学Git指令因为网上的git文章优劣难评，大部分没有实操展示，所以打算自己从头整理一份完整的git实战教程，希望对大家能够起到帮助！
程序员 Hasity·2024-01-11 16:59

2018年最值得推荐的10本HR书籍！（附：5本管理书籍）

1书籍：《世界500强人力资源总监管理笔记实操版》作者：潘新民推荐原因：有案例，讲实操，可参考。把HR基本功打扎实！
个人发展教练张帅·2024-01-11 15:26

【2019-05-06】map reduce工作机制

mapreduce作业运行机制Hadoop运行mapreduce作业的工作原理（1）作业提交Job的submit()方法创建一个内部的JobSubmitter实例，并且调用其submitJobInternal
BigBigFlower·2024-01-11 15:31

Android SDK环境搭建[图解]； 解决问题Done. Nothing was installed.

安装SDKAndroidSDK环境搭建依赖java环境,需要自备Java环境(100%实操成功)目录1.解压：解压到非中文无特殊字符的目录2.双击：SDKManager.exe，不要选全部!
桃乃木同学·2024-01-11 15:43
上一页 38 39 40 41 42 43 44 45 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他