大数据——云原生第26页

【大数据面试题】004 Flink状态后端是什么

一步一个脚印，一天一道大数据面试题。在实时处理中，状态管理是十分常用的。比如监控某些数据是否一直快速增长。那就需要记录到之前的状态，数值。那作为最热门的实时处理框架，Flink对状态管理是有一套的。

Jiweilai1·2024-02-08 14:25

java和javascript的区别和联系

区别设计目的和用途：Java是一种通用的、面向对象的编程语言，设计用于在各种平台上（如Windows、Mac、Linux、Android等）运行，广泛应用于企业级应用、移动应用（特别是Android应用）、大数据

Persistence is gold·2024-02-08 14:19

大数据概念与术语简介

介绍大数据是一个总称，用于描述从大型数据集中收集、组织、处理和获取见解所需的非传统策略和技术。

白如意i·2024-02-08 14:38

Kubernetes 是什么？

介绍Kubernetes是一个强大的开源系统，最初由谷歌开发，并得到云原生计算基金会（CNCF）的支持，用于在集群环境中管理容器化应用程序。

白如意i·2024-02-08 14:35

报备系统助力疫情防控更精准及时

为进一步做好疫情防控工作，我乡上线使用了河南省“来（返）豫人员社区（村）报备系统”，运用大数据手段提前预警、有效溯源、精准掌握、联防联控，以更加数字化、智能化的方式丰富我乡疫情防控手段，减轻基层疫情防控人员的工作负担

汉胡萝卜·2024-02-08 12:20

【20210804】今日十点感悟

可以给自己缓冲的时间，但最好不要太长；2、最好一件事，比同时做几件事，得到的利益更大；3、遇事不要想当然，都排除几个原因；4、这个世界上的美食有很多，没事多研究研究；5、喜欢吃的东西不一定要点外卖，也可以自己学；6、大数据也不一定准确

邱小美是Kelly·2024-02-08 12:24

大数据技术闲侃之-鹰隼试翼风尘翕张

前言似乎是需要把一系列串起来，继走出校门、岗位选择之后，现在又开始卷职业规划了，有同学提出想了解了解职业规划的事情。写这篇文章也是因为之前做了个开头，后续持续很久放在记事本上面吃灰了。这段时间呢，组里有3位刚从校园的同学进来，组里年龄瞬间拉低了一个很大的水平，不管愿不愿意，反正生理年龄上来了一场风暴式的洗牌，主要找工作这个事情上如果相同水平的话，肯定越小的未来潜力越大嘛。我自己也是参与到了这些新鲜

敏叔V587·2024-02-08 11:41

mac docker 宿主机和容器间网络打通

从我过去多次学习大数据组

敏叔V587·2024-02-08 11:10

＜网络安全＞《19 安全态势感知与管理平台》

1概念安全态势感知与管理平台融合大数据和机器学习技术，提供可落地的安全保障能力，集安全可视化、监测、预警和响应处置于一体。

Ealser·2024-02-08 11:30

No.2大数据入门 | 环境搭建：jdk1.8安装及环境配置

上一篇文章我们安装了虚拟机以及linux操作系统，接下来就要安装在操作系统上运作的大数据核心hadoop分布式系统基础架构！

滚滚红尘_8133·2024-02-08 11:43

影响世界的女性

前段时候人工智能AI的问世让我们惊叹到科技的进步，我们的大数据时代又开启了新的征途。

清源李·2024-02-08 11:21

小白解说之Prometheus监控入门

今天给大家讲解一下云原生界的监控扛把子普罗米修斯Prometheus。

小白说互联网·2024-02-08 11:43

【深度学习】“智能皮肤：深度学习驱动的‘智慧之眼‘应用如何革新皮肤病诊疗未来“

这个革新性的故事始于一场科研马拉松，一群跨学科的研究者们汇集了全球范围内的皮肤病学数据，构建了一个前所未有的庞大数据库。

德天老师·2024-02-08 11:25

Python在无人机器狗

大数据处理能力：无人机器狗可能会产生大量的传感器数据和图像数据

python无人驾驶医学芯片·2024-02-08 11:43

k8s-存储抽象-PV挂载

本文章属个人学习整理的对应笔记，学习内容来尚硅谷的培训课，有兴趣的同学可以跳转下方链接【云原生Java架构师的第一课K8s+Docker+KubeSphere+DevOps】https://www.bilibili.com

是小天才哦·2024-02-08 10:22

智领云独家技术支持，第十届全国高校新一代信息技术暑假师资研修班隆重开营

当前，以人工智能、大数据、云计算等为代表的新技术，驱动人类社会快速进入以数字化应用为基础的智能时代。在此背景下，数字化成为催生教育结构变革的重要力量。

智领云科技·2024-02-08 10:31

我的理想

大数据工程学院19计本2班沙仕康每个人都会有理想，有的人理想很远大，很有抱负。而有的很渺小，各不相同。我的理想却是飘摇不定的，一直在变。

19计本二班·2024-02-08 10:40

扔了又如何

大数据太可怕了，前几天写了篇关于不想评职称的文章，结果这些天，各个平台推送给我的文章几乎都与此有关。还有一些劝人放下的文章，我也点进去看了一些，聊以自慰。说实在，对评职称这件事，我是真的放下了的。

苠苠的日常·2024-02-08 09:00

400集！分享珍藏很久的Python学习路线！（附资料）

Python一直有胶水语言之称，应用场景相当广泛，不止有爬虫、数据分析，更可以加入到WEB、大数据、AI的应用池之中，而且开发效率相当恐怖。

smley·2024-02-08 09:46

大数据毕业设计PySpark+PyFlink航班预测系统飞机票航班数据分析可视化大屏机票预测机票爬虫飞机票推荐系统大数据毕业设计计算机毕业设计

博主介绍：✌全网粉丝100W+,前互联网大厂软件研发、集结硕博英豪成立工作室。专注于计算机相关专业毕业设计项目实战6年之久，选择我们就是选择放心、选择安心毕业✌由于篇幅限制，想要获取完整文章或者源码，或者代做，可以给我留言或者找我聊天。感兴趣的可以先收藏起来，还有大家在毕设选题，项目以及论文编写等相关问题都可以给我留言咨询，希望帮助更多的人。1.DrissionPage自动化Python爬虫工具采

B站计算机毕业设计超人·2024-02-08 09:17

聚鲸融从数字经济角度解读互联网产业发展

从云计算、大数据到人工智能、区块链,数字技术的快速发展为互联网产业带来了前所未有的机遇。聚鲸融紧跟数字技术发展趋势,为

2301_79004341·2024-02-08 09:11

Springboot整合Redis使用RedisTemplate操作redis五大类型用法详解

1、案例说明springboot整合redis之后，提供了操作redis的简便方式通过通用对象redisTemplate方式操作String,Hash,List,SetSortSet五大数据类型本案例中使用

雾林小妖·2024-02-08 09:48

编码技巧——基于RedisTemplate的RedisClient实现、操作Lua脚本

RedisTemplateClient，于是自己来实现下；springboot整合redis之后，提供了操作redis的简便方式，可以通过通用对象RedisTemplate方式操作String,Hash,List,SetSortSet五大数据类型

七海健人·2024-02-08 09:42

涤生大数据实战：基于Flink+ODPS历史累计计算项目分析与优化（上）

涤生大数据实战：基于Flink+ODPS历史累计计算项目分析与优化（一）1.前置知识ODPS（OpenDataPlatformandService）是阿里云自研的一体化大数据计算平台和数据仓库产品，在集团内部离线作为离线数据处理和存储的产品

涤生大数据·2024-02-08 08:55

明天开课 | 脑影像组学培训班（直播：2023.8.15~8.18）

★课程简介★随着大数据、人工智能的深入融合发展，一项新的研究方法开始用于临床研究，它就是影像组学。它可以对普通影像图像进行更深层

茗创科技·2024-02-08 08:10

HDFS执行balance报错：hdfs balance java.io.IOException: Another Balancer is running.. Exiting

现象：1、大数据Hadoop集群，HDFS扩容后，为了使各节点数据均衡，执行balance操作。2、启动hdfsbalance时，一直出现其他的balance在执行中，其实并没有执行。

不会吐丝的蜘蛛侠。·2024-02-08 08:29

大数据问题：Hadoop的web页面无法访问logs

记录一次大数据问题，征询解决方案。

不会吐丝的蜘蛛侠。·2024-02-08 08:28

家、家人——重拾初心的港湾

大数据工程学学院杨华2020402157出生于普普通通的农村家庭的我，有陪伴着父母早出晚归的时光、有每天上学只吃两餐饭的时光、有羡慕别人的时光、也有被他人看不起的时光，看着父母亲劳累的样子和早出晚归的样子让人心疼再加上来自生活的穷苦

今圆是今元·2024-02-08 08:34

使用 Kubernetes，基础设施层面如何优化？分享一些解决方案

随着云原生技术逐渐成熟，越来越多的用户

志凌海纳SmartX·2024-02-08 07:51

【大数据】Flink 如何处理背压

Flink如何处理背压1.什么是背压2.Flink中的背压3.结论⭐推荐阅读：《Flink架构（二）：数据传输》人们经常会问Flink是如何处理背压（backpressure）效应的。答案很简单：Flink不使用任何复杂的机制，因为它不需要任何处理机制。它只凭借数据流引擎，就可以从容地应对背压。在这篇博文中，我们介绍一下背压。然后，我们深入了解Flink运行时如何在任务之间传送缓冲区中的数据。最终

G皮T·2024-02-08 07:16

【大数据】Flink on YARN，如何确定 TaskManager 数

FlinkonYARN，如何确定TaskManager数1.问题2.并行度（Parallelism）3.任务槽（TaskSlot）4.确定TaskManager数1.问题在Flink1.5ReleaseNotes中，有这样一段话，直接上截图。这说明从1.5版本开始，FlinkonYARN时的容器数量，即TaskManager数量，将由程序的并行度自动推算，也就是说flinkrun脚本的-yn/--

G皮T·2024-02-08 07:43

【大数据面试题】005 谈一谈 Flink Watermark 水印

一步一个脚印，一天一道面试题。感觉我现在很难把水印描述的很好，但，完成比完美更重要。后续我再补充。各位如果有什么建议或补充也欢迎留言。在实时处理任务时，由于网络延迟，人工异常，各种问题，数据往往会出现乱序，不按照我们的预期到达处理框架。WaterMark水印，就是为了一定程度的解决数据，延迟乱序问题的。使用WaterMark一般有以下几个步骤：定义时间特性（Flink1.12已废弃，默认使用事件时

Jiweilai1·2024-02-08 07:54

Oracle表结构转成MySQL表结构

在将Oracle数据库表结构转换为MySQL数据库表结构时，需要考虑两大数据库系统之间的差异。

程序员爱技术·2024-02-08 07:24

HTML的body标签（列表标签）

image.pngHTML列表标签学习列表标签学习中国知名城市北京上海杭州人生几大爱好打游戏看电影踢足球IT课程：java课程python课程大数据课程热门旅游城市：嘉兴杭州上海

书只读了几本·2024-02-08 07:47

MongoDB部署策略

利用MongoDB在存储海量数据上的优势，部署存储空间大数据。·欢迎批评指正补充由于编者水平有限，所搜集资料也很有限，制定的规范肯定有考虑不周全、甚至完全错误的地方，欢迎大家批评指正。

guwei666666·2024-02-08 06:17

论文阅读-GROUP：一种聚焦于工作负载组行为的端到端多步预测方法

对于云原生应用程序来说，多个容器协同处理用户请求，导致每个容器的工作负载变化受到工作负载组行为的影响。然而，现有方法主要分析每个容器的个体变化，没有明确建模容器工作负载组的演化，导致结果次优。

向来痴_·2024-02-08 06:45

大数据系列—数据迁移(Sqoop,Flume,DataX)对比学习（stage3）

MynameisJinsuo.Shi.一个不正经的大数据开发工程师，目前从事在公司主要进行CDP平台的数据接入、数据的ETL、数据的融合与事件的展开工作。

道-闇影·2024-02-08 06:07

数据同步工具对比——SeaTunnel 、DataX、Sqoop、Flume、Flink CDC

在大数据时代，数据的采集、处理和分析变得尤为重要。业界出现了多种工具来帮助开发者和企业高效地处理数据流和数据集。

大数据_苡~·2024-02-08 06:33

京东云StarDB for openGauss实现混合多云场景元数据安全可控

以技术创新为手段，以满足未来业务需求为目标，京东云自主研发的分布式数据库StarDB在长期的业务实践过程中不断进化，在海量且复杂的大数据场景实现突破，提供卓越的数据库使用体验。

openGaussMan·2024-02-08 05:09

《自动驾驶汽车的缺陷及其产品责任》（四）

首先看技术的理解：从自动驾驶人工智能所赖以实现的技术来看，所谓具有深度自主学习能力的人工智能其本质上是依靠大数据、概率统计以及日益增长的运算能力实现对驾驶行为及其规律的重复性归纳，但并不能完全揭示其本质或内在规律

刘东利2020·2024-02-08 05:50

2023大数据必看面试题

1、请讲述HDFS输入文件的具体步骤？1、Client向NameNode提交需要上传文件的申请2、NameNode返回响应给Client,同意上传文件的请求3、Client向NameNode申请子节点DataNode.4、NameNode响应给Client它的子节点DataNode5、Client向DataNode提交申请建立传输通道。6、DataNode依次响应连接（dn1，dn2，dn3）7、

东方同学·2024-02-08 05:38

和鲁迅一起过日子【7】

我孤陋寡闻，未见国家统计局或省市统计局调查队有过这个调查统计数据，也不知今天最注重大数据掌控的组织与机构

眺山·2024-02-08 05:44

MySQL 处理大数据表的 3 种方案，建议收藏！！

场景评估表数据体量出现问题的原因如何解决单表数据量太大，查询变慢的问题方案一：数据表分区方案二：数据库分表分区分表的区别分区分表的联系分库分表存在的问题方案三：冷热归档以上三种方案我们如何选型场景当我们业务数据库表中的数据越来越多，如果你也和我遇到了以下类似场景，那让我们一起来解决这个问题。首先，我们可以考虑对数据进行分区，以便更快速地进行查询。此外，我们还可以对查询和插入操作进行优化，以减少查询

永钊源码·2024-02-08 05:47

《肖申克的救赎》：每个牢笼都湮没不了希望

记忆里的大数据在细细检索，是《金蝉脱壳》、《飞越疯人院》、还是美剧《越狱》。每次看这类型的电影或者电视剧，总会有一种强烈的代入感，因为感觉监狱无处不在。

钺冥·2024-02-08 04:45

【30秒看懂大数据】留存分析

30秒看懂大数据专栏让您在有限的碎片化时间，快速看懂最火热的大数据简单说公众号：知幽科技，更多知识分享及社群欢迎关注。

风姑娘数据说·2024-02-08 04:54

【30秒看懂大数据】数据指标

公众号：知幽科技PS:本文属专栏第24篇简单说数据指标是指对企业经营数据转化为可量化、可衡量、可对比、可预测的一个度量或者维度同称。举例理解你在小区门口开了一家馒头店。开业第一天你算了下一共卖了50个馒头，一共收款100元，店里人来的最多的时候是早上七点半左右。在这个案例中：50个馒头=SKU总数收款100元=销售额1、SKU总数指销售馒头的总数，结果都为数字，所以可量化，数字大小可衡量，每天销售

风姑娘数据说·2024-02-08 04:24

【30秒看懂大数据】数据存储

PS:本文属专栏第27篇公众号：知幽科技简单说数据存储是指将数据保存在计算机或其他媒体上，以备将来检索和使用，就像保存文件在电脑硬盘或云存储中一样。举例理解听说周末要下大雨，所以我临时决定下班后去超市采购下周末2天要吃的食物。于是我拿出纸和笔，将我想要采购的食物一一罗列了出来，包括了蔬菜、肉蛋和水果等。因为一次性要采购这么多，所以我需要给这些食物找到一个存放的地方。比如鸡蛋我可能要放进冰箱，因为它

风姑娘数据说·2024-02-08 04:23

【30秒看懂大数据】数据采集

30秒看懂大数据专栏让您在有限的碎片化时间，快速看懂最火热的大数据公众号：知幽科技简单说数据采集可以简单直白解释为数据收集的过程。

风姑娘数据说·2024-02-08 04:20

慢下来的公交车

毋庸置疑，疫情当下，实名制乘坐公交车，再加上采用大数据流调的举措来严防死守，使疫情防控的效果更加快捷，更加精准，更加显著。

山之东西·2024-02-08 03:48

贷款拿不下，信用卡秒拒？征信升级后，这七种行为一定要避免！

在2020年二代征信上马后，结合金融科技和大数据的作用，银行对于风控的把握也越来越系统化。那么

e渝卡·2024-02-08 03:31

推荐频道

大数据——云原生