Hadoop小记

浅谈MapReduce

从今天开始，本人将会开始对另一项技术的学习，就是当下炙手可热的Hadoop分布式就算技术。目前国内外的诸多公司因为业务发展的需要，都纷纷用了此平台。
Android路上的人·2024-09-16 04:40

Hadoop

ApacheHadoop是一个开源的分布式计算框架，主要用于处理海量数据集。它具有高度的可扩展性、容错性和高效的分布式存储与计算能力。
傲雪凌霜，松柏长青·2024-09-16 00:16

Hadoop架构

一、案列分析1.1案例概述现在已经进入了大数据(BigData)时代，数以万计用户的互联网服务时时刻刻都在产生大量的交互，要处理的数据量实在是太大了，以传统的数据库技术等其他手段根本无法应对数据处理的实时性、有效性的需求。HDFS顺应时代出现，在解决大数据存储和计算方面有很多的优势。1.2案列前置知识点1.什么是大数据大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的大量数据集合，
henan程序媛·2024-09-16 00:14

分享一个基于python的电子书数据采集与可视化分析 hadoop电子书数据分析与推荐系统 spark大数据毕设项目（源码、调试、LW、开题、PPT)

作者：计算机源码社个人简介：本人八年开发经验，擅长Java、Python、PHP、.NET、Node.js、Android、微信小程序、爬虫、大数据、机器学习等，大家有这一块的问题可以一起交流！学习资料、程序开发、技术解答、文档报告如需要源码，可以扫取文章下方二维码联系咨询Java项目微信小程序项目Android项目Python项目PHP项目ASP.NET项目Node.js项目选题推荐项目实战|p
计算机源码社·2024-09-15 20:02

心得随笔小记

1.人要想把一件事情做好，往往需要分两步，第一步是让自己处于可以把事情做好的状态，第二步才是把事情做好。当你不在状态，不想做事时，你此时需要做的不是硬着头皮继续做，而是应该调整一下姿势，做一些放松休息的事情，以让自己的状态重新在线。唯有这样，你才能持续做好一件事。2.遇见一个正确的远远高于你认知的人，就像是为自己的世界开了一个天窗一样。电视剧《天道》里面，肖亚文关于丁元英如是说，不求和他做朋友，但
GuangHui·2024-09-15 15:25

hbase介绍

hbase是一个分布式的、多版本的、面向列的开源数据库hbase利用hadoophdfs作为其文件存储系统，提供高可靠性、高性能、列存储、可伸缩、实时读写、适用于非结构化数据存储的数据库系统hbase利用
CrazyL-·2024-09-15 13:06

大数据毕业设计hadoop+spark+hive知识图谱租房数据分析可视化大屏 租房推荐系统 58同城租房爬虫 房源推荐系统 房价预测系统 计算机毕业设计 机器学习 深度学习 人工智能

做了那么多年开发，自学了很多门编程语言，我很明白学习资源对于学一门新语言的重要性，这些年也收藏了不少的Python干货，对我来说这些东西确实已经用不到了，但对于准备自学Python的人来说，或许它就是一个宝藏，可以给你省去很多的时间和精力。别在网上瞎学了，我最近也做了一些资源的更新，只要你是我的粉丝，这期福利你都可拿走。我先来介绍一下这些东西怎么用，文末抱走。（1）Python所有方向的学习路线（
2401_84572577·2024-09-15 10:20

2019-12-24

2019年12月24日达吉工作室小记今天来到凤姐这里，凤姐没在店里，辉哥说凤姐陪桐桐玩，睡到现在还没有睡起来，这是第一次来店里遇到凤姐会去放松的睡个觉。
猴行者演懿·2024-09-15 09:49

变小记

1、变小了有一天上课了，我听老师讲课，突然我发现自己慢慢的变小，我站在椅子上都看不见黑板，我跳到桌子里，此时，我已经变得像乐高人一样想小，我拿起乐高人手中的枪，套上乐高人的护甲，我看见了一只羊，我问他:“请问你跑的快不快，跳的高不高？”羊回答:“我跑的比兰博基尼还快，跳的比房子还高。”我又问:“你想不想当我的坐骑?”小羊回答:“想，想，只要告诉我去哪，我都去。”，此时老师看见了，急忙问:“孙建宇去
孙建贸·2024-09-15 08:13

周末小记

平淡的日子波浪不惊，来不及仔细品味，五天就已经匆匆而过了。值得一提的是周一的“推普周”启动仪式，每年9月的第三周为全国普通话推广周，今年是第23届。在这一周里要广泛开展推普宣传、培训，开展主题班会、“啄木鸟”行动、“咬文嚼字”活动，一时间人们说普通话、写规范字的积极性空前高涨，以往好多习惯性读错的字音被纠正了，一直以来写错的字被发现了，大家的汉语拼音、写字、用字、标点符号、文字排版、语文常识等方面
Lcm梅子·2024-09-15 05:33

【生活小记录】记录一下今天我是怎么度过的吧！(2022134)

每周都是盼着休息日快点到来，可是这一天来了无论怎么过总会觉得这一天没过好！觉得如果再给我一次机会我一定会过得更好！就这样每一个休息日都在这样周而复始的状态中过去了！所以我就想好好记录一下这一天，我倒要看看这一天怎么过才算是过得好，才算是让自己满意的一天！好吧！开始记录：起床时间：早上7点，小猫咪依然是在平常6点零五分的时刻对着我叫了两声让我起床，毕竟休息日嘛！怎可辜负这能睡懒觉的美好时光，一巴掌把
恋上清咖·2024-09-15 05:40

Spark集群的三种模式

文章目录1、Spark的由来1.1Hadoop的发展1.2MapReduce与Spark对比2、Spark内置模块3、Spark运行模式3.1Standalone模式部署配置历史服务器配置高可用运行模式
MelodyYN·2024-09-15 01:16

月度总结 | 2022年03月 | 考研与就业的抉择 | 确定未来走大数据开发路线

申请到了校图书馆的考研专座，决定暂时放弃就业，先准备考研，买了数学和408的资料书3月9日-3月13日，因疫情原因，宿舍区暂封，这段时间在准备考研，发现内容特别多3月13日-3月19日，大部分时间在刷Hadoop
「已注销」·2024-09-14 23:30

HBase介绍

HBase是GoogleBigtable的开源实现，它利用HadoopHDFS作为其文件存储系统，利用HadoopMapReduce来处理HBase中的海量数据，利用Zookeeper作为协同服务。
mingyu1016·2024-09-14 21:47

Java中的大数据处理框架对比分析

本文将重点介绍ApacheHadoop、ApacheSpark、ApacheFlink和ApacheStorm这四种流行的
省赚客app开发者·2024-09-14 20:41

一落索 小苇的花

2019.5.23新结识的简友，拍下好漂亮的花，传给了我，小记附词谱又名洛阳春、玉连环、一络索等。双调46字，上下片各四句三仄韵。⊙⊙⊙⊙⊙，⊙□⊙。□⊙□□，⊙⊙、□□。⊙□⊙，⊙□⊙。
松涛_5e7b·2024-09-14 15:56

（2019-08-29~31周四~周六）三天小记（283）

8月29日，周四：今日没出去，我们在舞蹈教室里练功跳舞，打扫教室卫生，还唱起了卡拉0k！原来教室里有一套不错的音箱，管理这个教室这么久了，我才第一次发现可以唱卡拉0k，在"想唱歌"的念头调动下，我终于又开始练歌啦！这周我给儿子加了一道菜是秋葵刺身，儿子喜欢芥末酱，所以会吃这道素菜，不简单啊，他能喜欢让我很快乐！秋葵含有多种维生素矿物质和适量的膳食纤维，比其他的蔬菜粘液质含量高，含有丰富的植物多糖，
云庆亲子教育·2024-09-14 13:15

周检视会议

啊就就啊它记录，我帮她小记一下，吧他不发了一个，个然后
策划运营I周长胜·2024-09-14 12:20

Hadoop windows intelij 跑 MR WordCount

一、软件环境我使用的软件版本如下:IntellijIdea2017.1Maven3.3.9Hadoop分布式环境二、创建maven工程打开Idea,file->new->Project,左侧面板选择maven
piziyang12138·2024-09-14 12:33

不定期

后来他干脆就回我打小记事起它就叫白
胡须老七·2024-09-14 08:14

Hadoop学习第三课（HDFS架构--读、写流程）

1010ml，瓶子的规格200ml=>需要6个瓶子装完块的大小规格，只要是需要存储，哪怕一点点，也是要占用一个块的块大小的参数：dfs.blocksize官方默认的大小为128M官网：https://hadoop.apache.org
小小程序员呀~·2024-09-14 03:53

hadoop启动HDFS命令

启动命令：/hadoop/sbin/start-dfs.sh停止命令：/hadoop/sbin/stop-dfs.sh
m0_67401228·2024-09-14 03:49

冬日·喂猫小记（2022.12.25）

吃过午饭，记挂着校园的小流浪们，还是带上猫粮，去了学校。天气更加明朗，没了呼啸的北风，人体舒适度亦大增。街上没有人，街道似乎都宽了不少。大大小小的私家车停在车位上，安安静静的。如此情形，往常只会在过年时出现，小镇外来人口众多，过年时候鸟归巢，小镇才会有难得的宁静，可如今刚进腊月，如此好的阳光下，本应到处人头攒动，如此静谧，只能是羊圈效应，主人该不是阳了就是阳康着吧。走进校园，四下里更是安静，两个门
开心就好7947·2024-09-13 23:22

无题:此时小记

今日在去超市买鞋垫的时候，我竟冲着昨日卖臭豆腐的那个地方下意识瞄了一眼，没有看到我想要的答案，内心竟还有一些小失望，不过这种感觉随即也就消失了。买这个鞋垫主要是最近上班走的步数比较多，这脚未免就会有些疼痛，也就去了超市买了一双透气且除臭的鞋垫。不过在付账的时候，我颇为搞笑的问了一句，这鞋垫是一次性的么？只听老板淡淡回了一句，你要是当做一次性的，穿几天也可以扔掉的呀！虽说老板语气很平淡，不过我还是听
諦羽沐楓·2024-09-13 18:01

llm-universe学习小记录4--构建RAG应用

构建RAG应用一、将LLM接入LangChain1、基于LangChain调用ChatGPT2、使用LangChain调用百度文心一言3、使用LangChain调用讯飞星火4、使用LangChain调用智谱GLM具体内容与代码详见将LLM接入LangChain。二、构建检索问答链1、加载向量数据库2、创建一个LLM3、构建检索问答链4、检索问答链效果测试5、添加历史对话的记忆功能（1）记忆（Mem
Adela0546·2024-09-13 16:43

小记２

回到老位置，盯着似懂非懂的文字，还是无可奈何。窗外有大风，我有些燥热，不知是不是下雨的前兆。很早就把伞准备好了，雨还不来。湖面不在平静，大风似乎推着湖水前进，始终都逃不了这个圈。至今才觉，湖岸的曲线，勾勒的太好了，曲曲绕绕，适合慢走。又有满青的柳条摇曳，更有一番滋味。小情侣坐在长椅，畅谈，于美景之下。不知今日的风，是否会把那满树桃花、樱花吹尽，落地生五彩。风，些许大了一些，仍是惹人喜爱的。前几日的
默守温柔annmor·2024-09-13 15:53

【计算机毕设-大数据方向】基于Hadoop的电商交易数据分析可视化系统的设计与实现

博主介绍：✌全平台粉丝5W+,高级大厂开发程序员，博客之星、掘金/知乎/华为云/阿里云等平台优质作者。【源码获取】关注并且私信我【联系方式】最下边感兴趣的可以先收藏起来，同学门有不懂的毕设选题，项目以及论文编写等相关问题都可以和学长沟通，希望帮助更多同学解决问题前言随着电子商务行业的迅猛发展，电商平台积累了海量的数据资源，这些数据不仅包括用户的基本信息、购物记录，还包括用户的浏览行为、评价反馈等多
程序员-石头山·2024-09-13 13:19

分布式离线计算—Spark—基础介绍

原文作者：饥渴的小苹果原文地址：【Spark】Spark基础教程目录Spark特点Spark相对于Hadoop的优势Spark生态系统Spark基本概念Spark结构设计Spark各种概念之间的关系Executor
测试开发abbey·2024-09-13 11:11

spark常用命令

hadoop@wyy:/app/hadoop/spark100$bin/spark-submit--
我是浣熊的微笑·2024-09-13 10:38

spark启动命令

hadoop启动：cd/root/toolssstart-dfs.sh，只需在hadoop01上启动stop-dfs.sh日志查看：cat/root/toolss/hadoop/logs/hadoop-root-datanode-hadoop03
学不会又听不懂·2024-09-13 10:36

有感小记

新《三国演义》第73集魏王临终托付大业曹操说：世人，昨日看错我曹操，今日又看错了，也许明日还会看错。可是我，仍然是我。我从来不怕别人看错我。没有错，就不要怕别人看错你，更不要去无辜地承认错误。如果全世界人都错了，你反而更应该去坚持正确的观点。曹操是一个受社会各界人士争议很大的人物，为什么大多数人说他是奸雄呢？因为曹操是一个被太平盛世所不容的人物，在太平盛世里乱世英雄是一直被丑化的，在忠君思想下洗脑
洛伊子昂·2024-09-13 07:04

2018-11-04

到是写了一首小诗《生日偶感》，以作小记，竟也过了诗专题。附小诗：生日偶感生肖属猴如今却生成了一颗猪的心曾经的跃跃欲试攀登高峰的勇气已在月光下搁浅任由车马从门前疾驰而过
晓风冷月之云水禅心·2024-09-13 06:57

今日小记

在有几天过完二月二龙抬头，这个年也就过完了，孩子也开学了，一切又步入正轨了，又回到了，家—单位—孩子。感觉没准备好呢？过年了。感觉还没好好休息呢？年过完了。感觉时间快的，不曾来过。生活肯定还是那个样，岁月静好就好，但自己要给生活惊喜，要给生活仪式感，做为已经3开口了的我，要学会沉稳，学会思前想后。每年都能有一个全新的我。时间得规划，日子得积极。希望每个人都能找到人生方向，都有正能量，都有自己的梦想
静静_ee7f·2024-09-13 03:10

编程常用命令总结

编程命令大全1.软件环境变量的配置JavaScalaSparkHadoopHive2.大数据软件常用命令Spark基本命令Spark-SQL命令Hive命令HDFS命令YARN命令Zookeeper命令
Yellow0523·2024-09-13 02:42

住院小记1112

01晒太阳我住院的病房在医院1楼，从1楼走到门外的大草坪只需要两三分钟时间。我每天都会去晒太阳，有时候一天去个两三次，早上一次，中午一次，下午再一次。草坪很大，草坪上和草坪边缘都有人在晒太阳。在草坪的边缘，立了两个白色的雕像，一个是白求恩，一个是南丁格尔。在雕像的中间是一块石碑，写着医院的名称。草坪像一把大大的扇子，这扇子的尽头就是医院的大门口。几天阳光好，总是看见一些人毫无顾忌地坐着躺着趴着。昨
每日心流·2024-09-12 23:01

随心小记

生活总有无何奈何之处，但是每个人又都在向往诗和远方的田野。在寻求内心深处的净土时又总是期待宁静中的一丝烟火气。可我们一直生活在验货之中呢不是吗？或许某个时刻我们曾浅显的怀疑人生，或许某个时段我们曾认真地思考过生活，或许是与一次次的否定和一次次的肯定。我读过梭伦的《瓦尔登湖》，远离城市喧嚣去寻找内心的依靠，它的写作背景是污染环境下，作者去瓦尔登湖居住了三年，每天都有鸟语和蔚蓝的天空作伴。这是无数诗人
赵冲希望粑粑·2024-09-12 23:22

昨日反思5/13

>>每日小记<<项目状态坚持开心词场141天坚持英语流利说141天流利说打卡完成坚持日更11天流利说真人对话1201gofluent3天不抱怨21.今天新加的事02.今天遗憾的事情呼叫中心运营书没看完3
Liz_Li·2024-09-12 22:21

Hadoop常见面试题整理及解答

Hadoop常见面试题整理及解答一、基础知识篇：1.把数据仓库从传统关系型数据库转到hadoop有什么优势？答：（1）关系型数据库成本高，且存储空间有限。
叶青舟·2024-09-12 19:24

2018.8.25痛苦的小记

今天中元节，我一个人在家，老妈专门打电话来提醒我，让我晚上不要出门。本来我都不记得了，倒没觉得害怕，她一提醒，反倒还把我弄得神经质的，本来开完雄鹰组的小组会快11点了，也快忘记这码事了，她又发来一条消息，说让我11点之前赶紧睡觉，要不然就带着帽子……我……哪壶不开提哪壶啊！！！我知道她是好心，我这一个人在家，本来就胆小，她一再提醒我，弄得我觉也不敢睡，也不敢不睡，看了微信一圈也想出来一个夜猫子，还
廖忱瑶·2024-09-11 23:15

今日小记

文|白喻晚最近不想写文章。没有灵感了。写了几篇去投稿，全部退回来了。现在好像很少有公众号会收纯故事文了。大多都喜欢夹叙夹议的情感文。然而，我最不擅长写了。没什么情感经验，也没什么观点。更没什么干货。公众号的运营也暂停了，一天能涨1，2个粉差不多。不想去宣传了。就佛系更新吧。也没人投稿。现在的主要经历都放在了另一个征稿号上，不需要花什么精力。也能赚点小钱。今天就到这吧。
白喻晚·2024-09-11 20:29

2025毕业设计指南：如何用Hadoop构建超市进货推荐系统？大数据分析助力精准采购

⚡⚡Java实战|SpringBoot/SSMPython实战项目|Django微信小程序/安卓实战项目大数据实战项目⚡⚡文末获取源码文章目录⚡⚡文末获取源码基于hadoop的超市进货推荐系
计算机编程指导师·2024-09-11 18:08

小记

最近忙着给二年级的训练，几天没给一年级的娃娃上课了。课间去班上刚到门口几个学生跑过来抱着我说：老师，你去哪了？你好久没给我们上课了，好想你呀！其他学生看到了都跑过来围着像小猴子挂在身上……小刘同学也摇着我的手臂说了几句我没听懂的话，但他让我感知到了见到我他是开心的。另一个刚开学很内向的孩子看到我来了也往我身边蹭，腼腆的仰着头冲我笑，虽然经常为了纠正他的坏毛病凶他，有时甚至把他批评哭了，但从来不记仇
笑响点亮了四面wind·2024-09-11 12:54

期中作文：感受“光亮”

洛社初中小记者走进梁溪之声不小心摔倒时，路人的搀扶温暖了你；寒气逼人的凌晨，清洁工人忙碌的身影感动了你；迷茫困惑时，一本好书启发了你；平淡生活中，父母的言传身教影响了你；考试失利时，同学的安慰鼓励了你；
小苹果树·2024-09-11 10:05

Hadoop Common 之序列化机制小解

这不过此种序列化虽然跨病态兼容性强，但是因为存储过多的信息，但是传输效率比较低，所以hadoop弃用它。
猫君之上·2024-09-11 08:59

深入理解hadoop(一)----Common的实现----Configuration

一,hadoop的配置管理a,hadoop通过独有的Configuration处理配置信息Configurationconf=newConfiguration();conf.addResource("core-default.xml
maoxiao_jsd·2024-09-11 08:59

生活小记录

2021年8月12日，周四，多云有雨。灵艳早早的跟着二姨妈去摘小番茄，早饭后，王斌到庄上送楠楠外婆的身份证，良斌开车从楚雄回来，直接到我家来吃饭。那我基本就是在家里带娃了，3个孩子，玩的时候陪他们玩，下午点，楠楠坐在沙发上吸着奶瓶睡着了，王斌抱她到房间里面睡，我带着可可和弟弟在客厅看电视，我哄小宝睡觉，过了会儿，可可趴在沙发上睡着了，小家伙还没睡，自个儿玩玩这个，拿拿那个，这里翻翻，那里爬爬，我都
紫岚兮·2024-09-11 05:19

2021-10-23

今日小记今晚夜班，白天转班休息半天，由于昨晚睡得早，早上四点多就醒了睡不着。从早上醒来到晚上上班一直没睡，白天本来打算睡一下的，睡不着。把手机放在一边，躺了半天还是睡不着。
Reallove·2024-09-11 04:39

hadoop 0.22.0 部署笔记

hbase是部署在hadoop平台上的NOSql数据库，因此在部署hbase之前需要先部署hadoop。
weixin_33701564·2024-09-10 17:41

解决Windows环境下hadoop集群的运行_window运行hadoop,unknown hadoop01(4)

org.apache.hadoophadoop-com
2401_84160087·2024-09-10 16:34

解决Windows环境下hadoop集群的运行_window运行hadoop,unknown hadoop01(3)

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化资料的朋友，可以戳这里获取一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！xmlns:xsi="http://www.w3.or
2401_84160087·2024-09-10 16:04
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他