大数据随笔

Hadoop组件

Hadoop是一个开源的大数据处理框架，由Apache基金会维护。以下是每个组件的简短介绍：HBase：一个分布式、面向列的NoSQL数据库，基于GoogleBigTable的设计理念构建。
静听山水·2024-09-05 20:14

kidding 观剧随笔

上周日休息，花了好几个小时的时间看完了金·凯瑞（JimCarrey）主演的美剧《kidding》第一季。男主作为一个逗人开心的儿童节目主持人，是所有孩子的心中偶像，但在现实生活，却无法处理好跟自己的孩子的关系，甚至深陷来自家庭的重压。给我最大的感受是，跟孩子的沟通最重要的是耐心和倾听。在这一点上，我承认我自己就做的不好，很多次，我都没有足够的耐心去倾听小朋友的真实感受，很多次，我陪小盆友玩耍也是敷
yammypro·2024-09-05 19:17

CDC 数据实时同步入湖的技术、架构和方案汇总

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》
Laurence　·2024-09-05 18:33

小区做核酸检测

本来想去办张交通银行的储蓄卡，因为单位发工资用，结果现在打开地图查看疫情，小区附近三公里范围内，已经出现了三个疫情小区，而银行距离其中一个点比较近，去银行怕被大数据扫描到，可真是纠结！小区通知
舒曼_0207·2024-09-05 18:11

Azkaban：强大的开源工作流调度系统

一、概述在大数据生态系统中，随着数据量的爆炸式增长和任务复杂度的提升，管理和调度大规模的批处理任务成为了一项艰巨的挑战。
Hello.Reader·2024-09-05 15:15

系统架构师考试学习笔记第三篇——架构设计高级知识（13）未来信息综合技术

本课时考点：第13课时主要学习信息物理系统技术、人工智能技术、机器人技术、边缘计算、数字孪生体技术以及云计算和大数据技术等内容。
SheldonK·2024-09-05 15:15

随笔

我从小就想当一个作家。后来学业繁忙搁浅了一段时间，上了大学看美剧《欲望都市》和《凯莉日记》，爱上了里面凯莉的生活，时尚，纽约，梦想，作家，朋友，我喜欢美剧，也很向往那种自由，激情，美好的生活。也许是因为我大学时经常一个人，夜里走在路上就是思绪高涨的时候，我很喜欢思考，虽然有时候会有些痛苦。我称自己为浪漫主义者，能在思绪中畅游是我的独家快乐。我喜欢的作家有蒋方舟，之前是张小娴，香港作家，人们的爱情知
破仑帝·2024-09-05 15:48

今日随笔

不知道该写点啥，就想到什么，写什么好了。内容可能偏鸡汤，也是个人所见。这两年的经历，让我有了一些感悟。成长其实就是一个不断质疑自己，毁灭自己，重塑自己的过程。质疑自己的过往和思考，察觉到自己的局限性，看到不足；毁灭自己的固有经验，不再按照固定思路，面对某些事情时尝试跳出条件反射，逃离自己舒适圈的束缚；重新塑造更适合的思维与做事方法，以另一种方式，或者站在另一个视角和位置看待问题，让自己成长。不去主
冰雨andy·2024-09-05 15:17

1+X云计算运维与开发(中级)实战案例——Kafka集群部署

它的高性能、可扩展性以及丰富的功能使其成为了大数据领域中的重要工具之一。Kafka中发布订阅的对象是topic。用户可以为每类数据创建一个topic，把向
kuuuugua·2024-09-05 15:41

2023年哪些副业兼职受青睐？

据介绍，该报告数据来源通过兼职猫用户大数据分析及10万份用户调研问卷获得。据统计，疫情期间新注册用户年龄以22岁以下为主，占平台总用户的68%，其中18岁以下未成年人突增，占据平台用户的30.9%；从
氧惠佣金真的高·2024-09-05 14:58

『静夜心城』读“天的文学”之后

『1』读完丰子恺先生的随笔《天的文学》之后，我又细读了一遍，算是一种“放心”。再读时，如丰先生一样，我也把那个“天文学计算”用手工加计算器算了一遍，如丰先生一样，我也“头痛”。
眺山·2024-09-05 14:02

3.13随笔

雪，轻飏地舞动。凤喙里的流苏摇曳沸腾。帐幕掀起，黑色的鞋靴踩进积雪，狐裘垂挂瑞王身上，触碰雪地。雪花落至狐裘，与之融为一体。空阔的巷道，脚步的窸窣渐渐逼近。仆人只敢低垂脑袋，雪花堆砌眉毛，却一动也不敢动。空荡荡的巷道，急促的马蹄声愈发响亮。两络胡腮，双眼炯亮的壮汉翻身下马。他大步走向瑞王，停距一尺余。“王爷，我苦等你多日了！”“曹大人，天寒地冻，进府细说。”低沉如大鼓的乐声。
20000字·2024-09-05 13:44

齐帆齐微课（12）《浮生自在》：自在，是一种完美的理想主义

《浮生自在》是一本散文集，是北京文学为70周年庆而集结的出版的系列丛书之一卷，该书收录史铁生、贾平凹、毕飞宇、汪曾祺、蒋韵等16位知名作家的16篇经典散文随笔，有些篇目我还是第一次读到，这些作家的风格各异
韩荆·2024-09-05 13:42

Spark

它提供了对大数据集的容错机制，支持并行操作。DataFrame：DataFrame是基于RDD
傲雪凌霜，松柏长青·2024-09-05 11:20

Windows系统下的Spark环境配置

一：Spark的介绍ApacheSpark是一个开源的分布式大数据处理引擎，它提供了一整套开发API，包括流计算和机器学习。
eeee~~·2024-09-05 11:19

苍穹下（随笔小诗）

唯苍穹下才可安放美好之物譬如爱世俗中，你总是疼痛多么狭窄的人间盛不下美好的事物那些被逼迫的、被压抑的虽有人的形体，却失却自由的翅膀这铁链贯穿的一生你总喜欢仰望苍穹唯此时，你灵魂苏醒过来你的爱，在辽阔的苍穹下自由飞翔
风之子的黄昏·2024-09-05 10:49

大数据给你带来的物业管理新变化！

from=jianshu在互联网与云计算的影响下，我们正在进入大数据全面渗透的信息时代。
数据观数据分析平台·2024-09-05 09:01

大数据生态圈里的一致性算法

大数据生态圈中，保证一致性的方式举不胜举Hadoop用Zookeeper（Zab，Paxos+事务顺序）ElasticSearch用Hash路由算法（非一致性Hash）Cassandra用Gossip闲话算法
宇宙湾·2024-09-05 07:35

开门红

文/原创图片发自App这当然是这篇随笔的喜庆命题。我怀着愉悦、快乐之情来说这个主题，自然会洋溢满满的幸福。开门红其实就是迎头的喜庆现象。
梁驰·2024-09-05 07:56

探索`binlog2sql_java`: 实时数据同步利器

探索binlog2sql_java:实时数据同步利器项目简介在大数据领域中，实时数据同步是一个至关重要的环节，它能让应用始终保持最新、最准确的数据状态。
廉欣盼Industrious·2024-09-05 05:37

【大数据】浅谈Pyecharts：数据可视化的强大工具

文章目录一、引言二、Pyecharts是什么三、Pyecharts的发展历程四、如何使用Pyecharts1.安装Pyecharts2.创建图表（1）导入Pyecharts模块：（2）创建图表实例：（3）添加数据：（4）设置图表样式：（5）渲染图表：3.运行和查看图表五、目前的市场情况六、总结一、引言在数据时代，数据可视化已成为数据分析的重要组成部分。Pyecharts，作为一款基于Python的
熬夜的王·2024-09-05 05:04

使用 Vue.js 构建大屏可视化系统

引言随着大数据时代的到来，实时监控和数据分析变得越来越重要。大屏可视化系统可以帮助我们快速了解业务状况，做出及时决策。本文将详细介绍如何使用Vue.js构建一个功能完善的大屏可视化系统。
不知名靓仔·2024-09-05 04:58

人工智能在现代科技中的应用和未来发展趋势。

药物研发：通过模拟和大数据分析，AI加速了新药研发过程，缩短了药物上市时间。个性化治疗：AI能够根据患者的个人数据，推荐最适合
爱掉发的小龙·2024-09-05 03:57

随笔一

未来的我，你好啊我是2018年4月的你，在南京像你打招呼未来的我啊，你现在在哪？有男朋友了吗？成为一名斜杠青年了吗？你对现在的生活满意吗？现在的我啊，有一大堆想要做的事，想学水彩画，想学书法，想拍好看的照片，幻想着将来工作稳定了可以有个副业未来的我啊，你觉得现在的我糟糕吗？很糟糕，哈哈，那也是你啊现在的我很迷茫啊，下下周我就要成为一个准社会人，体验朝九晚六的生活，朋友再相聚估计是一件很难很幸运的事
水果松饼·2024-09-05 03:41

学习大数据DAY43 Sqoop 安装，配置环境和使用

目录sqoop安装配置mysqlsqoop安装sqoop指令集sqoop使用sqoop创建hive表sqoop全量导入表sqoop增量导入表sqoop全量导出表sqoop分区表导入表sqoop分区表导出表上机练习sqoop安装配置mysqlcreatedatabasetestDEFAULTCHARACTERSETutf8DEFAULTCOLLATEutf8_general_ci;--创建数据库sh
工科小石头·2024-09-05 03:52

大数据Python基础学习——练习（二）

目录使用字典完成一个点餐系统要求判断两个函数的区别lambda，reduce的应用reduce，map，filter，sorted的应用按照字典的值进行排序Python中的类，实例，封装，继承和多态Python中的内置模块和第三方模块自定义一个包打印函数的执行时间isinstance的应用hasattr()，setattr()，getattr()的作用对类中绑定的属性做一个限制鸭子类型import
喜欢你，还有大家·2024-09-05 03:21

注读《两般秋雨盫随笔》卷四390：好名

好名杨铁崖至嘉禾，选同人诗，夜已半，闻门外剥啄声，启视，则皆禾中能诗者也。人人持金缯，均乞留其诗。杨笑曰：“生平三尺法尚可假借，若诗文则心欲借眼，眼不从心，未尝敢欺当世。”遂运笔批选，止取鲍恂、张翼、顾文奕、金炯四首。诸人相顾错愕，固乞宽假，至有涕泣长跪者。遂俱挥出门外，闭关藏烛曰：“风雅扫地尽矣。”随园老人选诗，丹阳贡生何震负诗一册，踵门求见曰：“苦吟半生，无一知己，今所望者惟先生，是以求教。若
酿酒匠·2024-09-05 02:59

大数据系列之：查看进程控制组信息、查看systemctl服务信息、查看服务器所有控制组信息、查看服务在控制组内存限制、显示系统上所有正在运行的进程和服务的控制组（cgroup）层次结构

大数据系列之：查看进程控制组信息、查看systemctl服务信息、查看服务器所有控制组信息、查看服务在控制组内存限制、显示系统上所有正在运行的进程和服务的控制组（cgroup）层次结构、控制组和控制组下进程的关系查看进程控制组信息查看
快乐骑行^_^·2024-09-05 00:07

python读取hive数据库_利用pyhive将hive查询数据导入到mysql

在大数据工作中经常碰到需要将hive查询数据导入到mysql的需求，常见的方法主要有两种，一是sqoop，另一种则是pyhive。本文主要讲的就是python的pyhive库的安装与使用。
weixin_39939668·2024-09-05 00:35

EMR组件部署指南

EMR(ElasticMapReduce)是一个大数据处理和分析平台,包含了多个开源组件。
ivwdcwso·2024-09-05 00:05

2021-08-14随笔记录

“……唉……”无意识的叹气被一旁孩子的爸爸注意到了，“你为什么总是叹气呢？”“啊？……”“我也不知道呢。”孩子爸停顿了一会说：“如果你在这个家里少叹气，多些笑容，我们这个家里会快乐很多……”。话音刚落，心里极度不爽的我马上接话了：“如果你对这个家里多上点心，对我们都好一点，少玩点手机，多陪陪孩子，我们这个家里也会快乐很多……”。他也毫不示弱的抢话，并且把手机往我一递，“你来处理我这一堆的事情看看，
T添快乐·2024-09-05 00:51

Python教程：使用 Python 和 PyHive 连接 Hive 数据库

查询返回列表5.基本的数据库操作5.1创建表5.2插入数据5.3更新数据5.4删除数据6.表的描述信息和数据库操作6.1获取表描述6.2列出所有数据库6.3切换数据库7.关闭连接8.使用示例9.完整代码在大数据时代
旦莫·2024-09-04 23:32

Mac 安装Hadoop教程（HomeBrew安装）

1.引言本教程旨在介绍在Mac电脑上安装Hadoop，便于编程开发人员对大数据技术的熟悉和掌握。2.前提条件2.1安装JDK想要在你的Mac电脑上安装Hadoop，你必须首先安装JDK。
追光天使·2024-09-04 22:21

混合所有制

大数据再厉害，也不可能分配J.K.罗琳这样一个业余作者去写小说，还计划把她的小说印刷几百万册。是价格提供了
可可_4b5e·2024-09-04 19:08

【随笔】时尚天河购物中心

今晚去到啦时尚天河购物中心，血拼了一把，给自己买了几件衣服。不得不说，工作了两个月，审美和在校的时候相比，也有了一些变化。我会更加注重衣服的质感，布料的质量。至于时尚，我会选择在基本款的基础上，选择有一个小设计之处即可（因为比较好搭配，如果太有设计我反而不太会搭配了）。和我一起逛街的小姐妹看了试衣效果之后，也觉得我选的不错，适用也实惠。当然我也不会放弃在京东、唯品会、天猫上网购衣服，因为网购的乐趣
笔花粥粥·2024-09-04 19:28

Sublime text3+python3配置及插件安装

blog.chargingbunk.cn/微信公众号：rayson_666(Rayson开发分享)个人专研技术方向：微服务方向：springboot,springCloud,Dubbo分布式/高并发：分布式锁，消息队列RabbitMQ大数据处理
raysonfang·2024-09-04 19:23

人工智能训练师边缘计算实训室解决方案

一、引言随着物联网（IoT）、大数据、人工智能（AI）等技术的飞速发展，计算需求日益复杂和多样化。
武汉唯众智创·2024-09-04 19:34

计算机领域学术会议（ICCBD+AI 2024）

第五届计算机、大数据与人工智能国际会议（ICCBD+AI2024）将于2024年11月1日-3日在江西景德镇召开。
AC学术中心·2024-09-04 18:34

我的随笔:格物日记:46天。一念

中午吃饭的点到了，我给先生发了信息，我问他回不回店里吃饭。好久都没有给我回信息。我心里开始嘀嘀咕咕起来，到底来不来吃饭啊，说一声啊！大概停了半个多小时，还没有给我回信息，我还是忍不住给他打了电话，听到那头的声音:怎么了？我说:你来吃饭吗？他开始大声的说:我去你那里吃饭干嘛？我说:你来我就叫饭，你不来就算了！然后我就挂了电话！但我心里明显的有了情绪！我去你那里干嘛？我去你那里干嘛？我去你那里干嘛？这
豪烨生辉山东盛达石材18801·2024-09-04 18:33

日更一个月小结

故此我大部分内容以随笔形式展现，没有写
九久究·2024-09-04 18:28

今日随笔

自我定位：企业家。终身学习者终身成长者深度思考者。认知和思维模型不断更新者。如何不断提升认知和思维模型？通过什么方式？实践是一种。还有吗？在实践中不断地试错、反馈、提升，总结出经验和认知，修改自己的思维模型。为啥有的老板一天一个想法？各种想法层出不穷？原因之一就在于不断的接受新信息和新知识，然后没有很高维的认知和最基本的思维模型作为根基，所以就会很飘，看到一个新的想法，觉得有道理的就认同去做，然后
凌云手记·2024-09-04 18:22

2023-11-2随笔

今天忙得晕头转向，下班时感觉脑袋空空的，从3楼走到1楼还没想起来早上把车停在哪个位置了，幸好厂里院子也不大。回家时，小区大门被两辆大货车给挡住了，小区外面的道路两边已经停满了车，留出的道堪堪能过辆小车。我也不想去添份堵，于是掉头停去了平时锻炼的小公园。走回来的路上，我就突然在想，万一明天早上想不起来车停在那里了，可怎么办?这可不像在厂里，走着走着就能看到。有时候还真的是，有一种让人觉得不可思议的忘
半夏的熊猫·2024-09-04 18:34

青春逢盛世，奋斗正当时

大数据工程学院张福芸2020402186青春是一条萤火绚丽的流动银河，是人生中最美的乐章，然其灿烂却极其短暂，只有好好把握青春，方能领略青春的美好，在美好的青春年华做你能做，该做，会做的事，将青春的力量发挥到极致
今圆是今元·2024-09-04 17:10

关于Apache Hive 和 Apache Iceberg

ApacheHive和ApacheIceberg都是大数据生态系统中的重要工具，但它们解决的问题和扮演的角色有所不同。
[听得时光枕水眠]·2024-09-04 17:55

志愿服务心得随笔

还记得去年春节临近的时候，新冠疫情来势汹汹，正逢高三备考时的我在家里接受学校统一安排的网课，看见那么多英雄般的人物冲到疫情第一线，为祖国和人民贡献自己的力量，我的心中备受感触，心中燃起了一份汹涌，也想与他们一起做些什么，可那时的我除了听从统一的管理之外，并不能再去多做些什么。转眼又近年关，疫情也有了反复的趋势，东三省似乎还要更加严重一些，我的心又被疫情所牵动着，但今年的我是可以走出家门为大家做些什
今天你快乐了吗123·2024-09-04 16:46

大数据学习｜理解和对比 Apache Hive 和 Apache Iceberg

文章目录数据模型与存储事务支持性能优化使用场景总结数据模型与存储Hive:Hive使用的是传统的关系型数据模型，数据存储在Hadoop分布式文件系统(HDFS)中，通常是以文本格式（如CSV或TSV）或者二进制格式（如Parquet或ORC）。Hive的表定义和元数据存储在一个外部的关系数据库中，如MySQL，用于跟踪表结构、分区和其他元数据信息。Iceberg:Iceberg设计为一个现代的表格
进击的小白菜·2024-09-04 16:50

唯众2024年高职云计算实训室方案解读

云计算技术的发展，不仅推动了大数据、人工智能等新兴技术的发展，也为传统行业的数字化转型提供了强有力的支持。1.2高职教育在云计算领域的重要性高职院校作为培养应用型技术人
武汉唯众智创·2024-09-04 16:20

阅读、思考、写作，我可能找到了一生最重要的三件事

原因很简单，准备把这篇文章作为一篇随笔，记录一下自己最近的想法和感悟。02读书不是一件无用的事，关键看自己读书的目的。
安静的墨凡·2024-09-04 16:26

随笔日记20210130

这两天报名参加了两个线下活动。一个是在昨天晚上七点半到九点，回家大概都十点了，洗洗弄弄之后又做了一天的复盘，睡觉的时候已经接近十二点。早上依然是五点半起床，然后八点半出发去参加一个九点半的讲座，中午又和姐姐们约了饭，然后逛街逛到了四五点才回家。晚上又是给自家猫咪整体换猫砂，一天下来真是好想躺在床上当一条咸鱼。我其实已经很久没有这么疲惫的感觉了。原本今天已经定下了要写的文章主题，却因为状态太差而改成
云蔓·2024-09-04 16:55

商业分析能力是怎样炼成的？

感谢关注天善智能，走好数据之路↑↑↑欢迎关注天善智能，我们是专注于商业智能BI，人工智能AI，大数据分析与挖掘领域的垂直社区，学习，问答、求职一站式搞定！
R3eE9y2OeFcU40·2024-09-04 15:13
上一页 21 22 23 24 25 26 27 28 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他