大数据职业

大数据学习(37)- Flink运行时架构

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦1）作业管理器（JobManager）JobManager是一个
viperrrrrrr·2025-01-21 09:57

DolphinScheduler × Jiron：打造高效智能的数据调度新生态

gitee.com/642933588/jiron-cloudDolphinScheduler×Jiron：打造高效智能的数据调度新生态DolphinScheduler是一个开源的分布式任务调度平台，专为大数据场景下的工作流调度和数据治理而设计
jiron开源·2025-01-21 06:26

一种时序数据模式演化的跟踪与查询方法

摘要在物联网与大数据应用蓬勃发展的背景下，各类感知设备产生海量的时序数据，设备管理软件版本的快速迭代导致时序数据的模式演化问题日益凸显.模式演化要求对数据模式进行版本管理，使数据进行模式变更时不产生信息损失
米朵儿技术屋·2025-01-21 05:21

FPGA在高速数据采集系统中的应用！！！

以下是FPGA在高速数据采集系统中的详细应用，以及一些具体例子：1.应用背景高速数据采集系统通常用于需要高采样率和大数据量处理的场合，如雷达信号处理、医疗成像、高速通信等。
FPGA资料库·2025-01-21 05:50

2025年，AI时代下的前端职业思考

近年来，随着AI技术的迅猛发展，尤其是像ChatGPT、Copilot这样的工具，前端开发领域正在经历前所未有的变革。许多新人不禁会问：“在AI普及的时代，2025年还该不该学前端？前端就业还有没有前途？”今天，我们就从多个角度深入探讨这个问题，并为你提供一些实用的建议。一、AI对前端开发的影响1.AI正在改变前端开发的工作方式AI工具已经能够自动生成代码、优化UI设计、甚至调试Bug。例如，Gi
·2025-01-21 03:02

Mysql数据库和Sql语句

Mysql数据库和Sql语句一、Mysql数据库1、数据库：组织、存储、管理数据的仓库2、数据库的管理系统（DBMS）：实现对数据有效组织、管理和存取的系统软件3、数据库软件：mysql、oracle（大数据系统一般使用
Jessica小戴·2025-01-21 02:12

GPU介绍之GPU监控中，如何确定GPU忙碌程度

不仅学会如何编程，还将学会如何将AI技术应用到实际问题中，为您的职业生涯增添一笔宝贵的财富
借雨醉东风·2025-01-21 01:40

AI赋能职业发展：程序员的未来之路

程序员，这个充满挑战和机遇的职业，正站在技术浪潮的潮头。
·2025-01-20 23:51

洞见数据未来，StarRocks Summit Asia 2024 即将启幕！

这一切构成了当前大数据领域的核心难题。今年12月，StarRocksSummitAsia重磅启动！
·2025-01-20 22:45

国产海光CPU平台兼容性指南-基础软件分册-20231013（附各系统下载链接）

2.2.1VMwarevSphere上的虚拟机操作系统2.2.2KVM上的虚拟机操作系统2.2.3WindowsHyper-V上的虚拟机操作系统2.2.4VirtualBox上的虚拟机操作系统三、分布式存储四、数据库五、中间件六、大数据七
技术瘾君子1573·2025-01-20 20:59

FPGA与ASIC：深度解析与职业选择

本文将深入剖析FPGA与ASIC的区别，帮助读者更好地理解并做出职业规划。概念辨析FPGA(FieldProgrammableGateArray)：本质上是一种芯片，允许用户通过编程配置
博览鸿蒙·2025-01-20 18:03

数据驱动销售预测的未来：ScriptEcho赋能高效决策

然而，随着大数据的兴起和人工智能技术的飞速发展，数据驱动决策正成为现代企业提升竞争力的关键。
·2025-01-20 18:27

AI时代的前端开发：技能提升与职业发展之路

在瞬息万变的科技时代，个人职业发展的重要性日益凸显。提升技能，不断学习，已经不再是锦上添花，而是立足之本，是我们在竞争激烈的职场中脱颖而出的关键。
·2025-01-20 18:54

minio免费文件管理器（windows版本），若依RuoYi-Vue-Plus框架使用，有需要的可以下载，因为官网下载特别慢

MinIO设计为高性能、安全且易于使用，适合存储大量的非结构化数据，如图片、文档、视频以及大数据分析中的日志文件等。
程序员WANG·2025-01-20 10:43

分布式系统理论基础二-CAP

GitHub：https://github.com/wangzhiwubigdata/God-Of-BigData关注公众号,内推,面试,资源下载,关注更多大数据技术~大数据成神之路~预计更新500+篇文章
王知无(import_bigdata)·2025-01-20 10:41

大数据湖仓一体架构未来思考

湖仓一体架构是最近1-2年时间开始频繁出现在数据开发领域的新名词。也是各大公司竞相投入的对象。网络上关于湖仓一体架构的实践文章很多，看得也很眼花缭乱。我们今天站在一个「接地气」的角度，来说一说湖仓一体架构中未来需要关注的核心框架有哪些。文章内容也没有经过仔细的斟酌，完全是一点不成熟的想法，而且站的角度不是高屋建瓴的而是从下往上的。一个基本判断是湖仓一体架构在形式上不止一种大家可以从网上看到很多关于
王知无(import_bigdata)·2025-01-20 09:27

大数据是什么？用浅显的语言揭开神秘面纱

大数据是什么？用浅显的语言揭开神秘面纱在我们生活的时代，“大数据”已经从一个技术术语，成为了街头巷尾时常听到的词汇。然而，究竟什么是大数据？它离我们有多远？我们该如何理解这个复杂又常用的概念？
Echo_Wish·2025-01-20 08:23

在 Python 中使用 Ollama API

无论你是想进行简单的聊天对话、使用流式响应处理大数据、还是希望在本地进行模型的创建、复制、删除等操作，本文都可以为你提供指导。
一路追寻·2025-01-20 06:05

如何学懂C++语言：C++从入门到精通的全面指南（完整C++学习笔记）

数字人助手猿小美带你一起学编程一、引言作为一名拥有多年开发经验的技术人员，我的职业生涯涵盖了多种编程语言，包括C语言、C++、C#和JavaScript等。
猿享天开·2025-01-20 05:57

AI与API的融合：构建智能互联技术世界的基石

一、AI与API融合的背景随着大数据、云计算、物联网等技术的快速发展，人工
IT数据V+I7809804594·2025-01-20 05:55

浅谈Java程序员的五个职业发展方向

浅谈Java程序员的五个职业发展方向1、软件设计师其实很多程序员走到这个阶段已经在做软件设计师工作了。这是绝大多数程序员发展的必经之路。
上趣工作室·2025-01-20 03:59

Hadoop 和 Spark 的内存管理机制分析

大数据技术：涵盖Hadoop（HDFS）、Hive、Spark、Fli
王子良.·2025-01-20 03:27

2025最新大数据毕业设计选题汇总：创新课题推荐

学长给大家整理了大数据专业最新精选选题，如遇选题困难或选题有任何疑问，都可以问学长哦(见文末)!对毕设有任何疑问都可以问学长哦!更多选题指导:最新最全计算机专业毕设选题精选推荐汇总
HaiLang_IT·2025-01-20 02:51

程序员转型：探索代码外的精彩人生

随着职业生涯的不断深入，转型成为了越来越多程序员的选择。那么，除了常见的技术管理、产品经理等转型方向，程序员还能向哪些领域或岗位转型？
Milk夜雨·2025-01-20 01:41

PL/SQL语言的文件操作

PL/SQL语言的文件操作引言PL/SQL（ProceduralLanguage/SQL）是Oracle数据库提供的一种过程化编程语言，它结合了SQL的强大数据处理能力和过程性编程的灵活性。
云端 架构师·2025-01-20 01:41

LiteFlow决策系统的策略模式，顺序、最坏、投票、权重

个人博客：无奈何杨（wnhyang）个人语雀：wnhyang共享语雀：在线知识共享Github：wnhyang-Overview想必大家都有听过或做过职业和性格测试吧，尤其是现在的毕业生，在投了简历之后经常会收到一个什么测评
·2025-01-19 23:39

逆境中绽放：万字回顾2024我在挑战中突破自我

这一年，我经历了职业生涯的动荡、家庭生活的变故、个人健康的危机，以及心灵深处的觉醒。每一步都走得
Loving_enjoy·2025-01-19 23:52

CSDN简介

CSDN（ChineseSoftwareDeveloperNetwork），全称“中国软件开发者网络”，是一个专注服务于IT专业人士及IT企业的知识传播、在线学习、职业发展等全生命周期服务的平台。
神罗天征666·2025-01-19 23:19

大数据学习（五）：如何使用 Livy提交spark批量任务--转载

Livy是一个开源的REST接口，用于与Spark进行交互，它同时支持提交执行代码段和完整的程序。Livy封装了spark-submit并支持远端执行。启动服务器执行以下命令，启动livy服务器。./bin/livy-server这里假设spark使用yarn模式，所以所有文件路径都默认位于HDFS中。如果是本地开发模式的话，直接使用本地文件即可（注意必须配置livy.conf文件，设置livy.
zuoseve01·2025-01-19 22:15

Spark Livy 指南及livy部署访问实践

背景：ApacheSpark是一个比较流行的大数据框架、广泛运用于数据处理、数据分析、机器学习中，它提供了两种方式进行数据处理，一是交互式处理：比如用户使用spark-shell，编写交互式代码编译成spark
house.zhang·2025-01-19 22:40

大数据学习（四）：Livy的安装配置及pyspark的会话执行

一个基于Spark的开源REST服务，它能够通过REST的方式将代码片段或是序列化的二进制代码提交到Spark集群中去执行。它提供了以下这些基本功能：提交Scala、Python或是R代码片段到远端的Spark集群上执行；提交Java、Scala、Python所编写的Spark作业到远端的Spark集群上执行；提交批处理应用在集群中运行。从Livy所提供的基本功能可以看到Livy涵盖了原生Spar
猪笨是念来过倒·2025-01-19 21:08

网络爬虫——分布式爬虫架构

分布式爬虫在现代大数据采集中是不可或缺的一部分。随着互联网信息量的爆炸性增长，单机爬虫在性能、效率和稳定性上都面临巨大的挑战。
好看资源分享·2025-01-19 18:40

后端开发面试自我介绍_后端开发面试经验 - 共93条真实后端开发面试经验分享 - 职业圈...

面试过程：1面试首先问你对技术的理解是怎样的谈谈价值观方面的问题，比较抽象，我理解这种问题就跟你说让你做个自我介绍，问你你平时读什么书，有什么爱好这种问题类似，一方面热热场，打开话匣子，另一方面看你谈些什么技术，如果你用的技术跟公司的相似那么就就着这个问题往下问，如果你聊的不沾边，后面基本上可以不问了。总之一方面聊一些积极向上的内容，另外聊一些跟公司技术贴边的技术。2谈谈你的项目我就把我以前参与的
weixin_39815329·2025-01-19 17:36

Python-玩转数据-数据分析之分析思维

二、大数据思维自从几年前大数据开始兴起，大数据思维已经逐渐被更动的人接受，随着其进一步发展，产生了巨大的生产效果。
人猿宇宙·2025-01-19 17:33

火星数据电竞数据，世界杯数据接口api，足球数据资料库

电竞数据包含的内容有很多，比如说基础数据（实时比分，关键事件，赛后数据等等），统计数据（阵容分析，选手分析，地图分析等），还有资料库数据（赛事战队，赛程赛果，赛况榜单等等），众多的数据组合而成形成如今的电竞大数据
Tina0898·2025-01-19 14:04

构建高效GPU算力平台：挑战、策略与未来展望

引言随着深度学习、高性能计算和大数据分析等领域的快速发展，GPU（图形处理器）因其强大的并行计算能力和浮点运算速度而成为首选的计算平台。
Mr' 郑·2025-01-19 11:43

Databricks:打造数据国度的“金砖四国”

Databricks，一个并不算熟悉的名字，是大数据国度的后起之星。成立不够一年，但却阵容强大，创始人都是开源圈子里面的重要级人物，值得关注。
weixin_33832340·2025-01-19 11:40

一文详解大厂数据中台架构

在大数据发展的黄金期，几乎所有的高科技企业都在思考一个问题：海量数据作为大多数企业发展不可避免的一个趋势之后，企业该怎么去应用这部分数据资产，会对其商业产生什么影响，如何使数据对企业产生正面的推动而不是成为企业的负担
isNotNullX·2025-01-19 10:06

大数据公司 Databricks 详解

Databricks是一家在大数据和人工智能领域具有重要影响力的美国企业软件公司，以下是关于它的详细技术解析：1.起源与背景：Databricks成立于2013年，由来自加州大学伯克利分校AMP实验室的
Bj陈默·2025-01-19 10:00

hive小文件合并机制_hive小文件的问题弊端以及合并

，包括位置大小分块信息等，都保存在NN内存中，在小文件数较多的情况下，会造成占用大量内存空间，导致NN性能下降；2、在读取小文件多的目录时，MR会产生更多map数，造成GC频繁，浪费集群资源；3、现在大数据平台文件总数超过
做生活的创作者·2025-01-19 08:49

数仓建模（五）选择数仓技术栈：Hive & ClickHouse & 其它

在大数据技术的飞速发展下，数据仓库（DataWarehouse，简称数仓）成为企业处理和分析海量数据的核心工具。
昊昊该干饭了·2025-01-19 08:45

Hive 数据类型全解析：大数据开发者的实用指南

在大数据处理领域，Hive作为一款基于Hadoop的数据仓库工具，被广泛应用于数据的存储、查询和分析。
大鳥·2025-01-19 08:42

AIGC与劳动力市场：技术进步与就业结构的重塑

会让人类的大多数工作消失，还是会创造出全新的职业机会？一、AIGC对现有职业的影响——取代与重塑AI
蒙娜丽宁·2025-01-19 08:41

编程全景洞察：从基础架构到前沿创新与行业影响

从基础架构到前沿创新与行业影响编程的基础语言与逻辑架构编程范式与设计模式：理念升华与实践指南编程在前沿科技领域的深度融合与突破编程竞赛与荣誉体系：人才摇篮与创新引擎编程教育的普及与多元发展路径编程行业的生态与职业发展全景编程的未来趋势与无限可能编程与数学
༺ཌༀ傲世万物ༀད༻·2025-01-19 07:09

2024年网络安全最全CTF —— 网络安全大赛_ctf网络安全大赛

前言随着大数据、人工智能的发展，人们步入了新的时代，逐渐走上科技的巅峰。
网安墨雨·2025-01-19 07:35

基于Python大数据的王者荣耀战队数据分析及可视化系统

专栏推荐：前后端分离项目源码、SpringBoot项目源码、Vue项目源码、SSM项目源码、微信小程序源码精品专栏：Java精选实战项目源码、Python精选实战项目源码、大数据精选实战项目源码系统展示
计算机学姐·2025-01-19 07:03

Apache Hive--排序函数解析

在大数据处理与分析中，ApacheHive是一个至关重要的数据仓库工具。其丰富的函数库为数据处理提供了诸多便利，排序函数便是其中一类非常实用的工具。
大鳥·2025-01-19 06:31

Python 潮流周刊#78：async/await 是糟糕的设计（摘要）

愿景：帮助所有读者精进Python技术，并增长职业和副业的收入。分享了12篇文章，12个开源项目，1则音视频，全文2200字。
·2025-01-19 06:02

Python 潮流周刊#79：Python 的元数据困境（摘要）

愿景：帮助所有读者精进Python技术，并增长职业和副业的收入。分享了12篇文章，12个开源项目，2则热门讨论，全文2200字。
·2025-01-19 06:02

Python 潮流周刊#83：uv 的使用技巧（摘要）

愿景：帮助所有读者精进Python技术，并增长职业和副业的收入。分享了12篇文章，12个开源项目，2则热门讨论，全文2300字。
·2025-01-19 06:02
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他