SparkSQL数据源

springBoot+MyBatis分包方式实现多数据源

将mapper以及mapper的xml形式文件，置于特定的包下，根据包扫描路径来实现数据来源的区分：环境配置：spring.datasource.db1.driverClassName=com.mysql.cj.jdbc.Driverspring.datasource.db1.jdbcUrl=jdbc:mysql://xxxxxx/mybatis?useUnicode=true&character
赤橙红的黄·2025-02-08 01:53

顺丰大数据开发面试题及参考答案

Flink的提交过程通常包含以下步骤：代码编写与打包：开发人员首先使用Flink提供的API编写数据处理逻辑，包括定义数据源、转换操作和数据sink等。
大模型大数据攻城狮·2025-02-07 19:15

Deep-Seek 开源项目教程

该项目利用大型语言模型（LLM）处理大量数据源，以收集全面的实体列表。Deep-Seek不仅支持文本生成，还特别擅长数学、代码和推理任务。项目快速启动环境准备在开始之前，请确保您
毛炎宝Gardener·2025-02-07 08:34

浅谈分布式事务

分布式事务是指涉及多个独立数据源（如数据库、消息队列、缓存等）的事务，确保这些操作要么全部成功，要么全部回滚，以保证数据一致性。
纠结哥_Shrek·2025-02-07 07:27

Spark Container killed by YARN for exceeding memory limits. 11.1 GB of 11 GB physical memory used

公司SparkSql运行出现问题同事要求帮忙排查下原因日志：19-10-202110:12:06CSTSPARK_SQL-1632390310963INFO-SLF4J:Seehttp://www.slf4j.org
Called_Kingsley·2025-02-07 01:41

Java 大数据数据虚拟化：整合异构数据源的策略（41）

亲爱的朋友们，热烈欢迎你们来到青云交的博客！能与你们在此邂逅，我满心欢喜，深感无比荣幸。在这个瞬息万变的时代，我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客，正是这样一个温暖美好的所在。在这里，你们不仅能够收获既富有趣味又极为实用的内容知识，还可以毫无拘束地畅所欲言，尽情分享自己独特的见解。我真诚地期待着你们的到来，愿我们能在这片小小的天地里共同成长，共同进步。一、本博客的精华专栏：
青云交·2025-02-07 00:09

PySpark学习笔记5-SparkSQL

sparkSql的数据抽象有两种。
兔子宇航员0301·2025-02-07 00:36

PyQt6/PySide6 的 QTableView 类

QTableView通常与QAbstractItemModel的子类（如QStandardItemModel或自定义模型）一起使用，以提供数据源。
燃灯工作室·2025-02-06 21:18

Flink && Spark SQL提效神器双双更新

本次SparkSQLHelper主要更新了对于Hints的补全支持，Release版本为2025.2.0。
·2025-02-06 13:32

开源的go语言统一配置中心 - nacos + nacos go sdk

配置文件实时更新机制的场景需求配置文件热更新主要应用于需要在不停机的情况下动态调整系统行为的场景，例如修改服务参数、切换数据源等。其原理在于通过一个中心化的管理平台来存储和分发最新的配置信息。
m0_74824894·2025-02-06 10:37

SLINT：基于模式独立的关联数据的互联系统

摘要：关联数据互连是所有实例的发现，关联数据互连表示现实世界中相同的对象和定位于不同的数据源。由于不同的数据开发者频繁的使用不同的模式来存储资源，因此我们的目标是开发一个模式独立的互连系统。
ykyorky·2025-02-06 10:34

开源数据分析工具 RapidMiner

它基于Java开发，具有高度的模块化和可扩展性，能够与多种数据源无缝集成，包括MicrosoftExc
kcarly·2025-02-06 08:21

一次spark streaming 性能抖动问题解决和分析

10000+上数据大致需要30s时间，但偶发出现超过30s的情况问题分析sparkstream是内存密集型的应用，一般出现延迟通常是因为以下两个原因：内存分配过程出现延迟，出现GC问题，通常是内存资源问题导致数据源侧录入数据出现卡顿现象从以往经验看
spring208208·2025-02-06 04:18

Spring AI 智能体通过 MCP 集成本地文件数据

MCP提供了一种统一的方式将AI模型连接到不同的数据源和工具，它定义了统一的集成方式。在开发智能体（Agent）的过程中，我们经常需要将将智能体与数据和工具集成，MCP以标准的方式规范了智能
·2025-02-05 18:37

数据安全中心：守护云上数据安全的利器

它能够自动扫描云上各类数据源，如MaxComp
九河云·2025-02-05 14:06

ThreadLocal的作用和原理

slfj的MDC，多数据源，以及弱引用WeakReference等等场景中都可以看到ThreadLocal的应用。
pxr007·2025-02-05 07:16

Mycat2使用教程

install-template-1.20.zip运行包下载地址：mycat2-1.21-release-jar-with-dependencies.jar说明解压运行环境框架包，将运行包放到mycat的lib目录下配置数据源打开
晨晨OvO·2025-02-05 05:59

SpringBoot 如何实现多租户架构？

多租户架构的优势实现多租户架构的技术选择设计思路架构选型SpringBootSpringCloud数据库设计应用多租户部署应用隔离应用配置租户管理租户信息维护租户权限控制技术实现SpringBoot中的多租户实现多数据源实现动态路由实现
一名技术极客·2025-02-04 21:01

数据分析课堂笔记Day8(20221121)

步骤：a:导入数据b:进入pqc:字段种类改成文本(每经历一次转换，都查一下字段种类）注意：table代表数据源的类型。“。“意思是“的”。“M函数“要区分大小写，每个单词的第一个字母是大写。
zhangting_123abc·2025-02-04 09:59

Doris通过ODBC连接MYSQL

Doris通过数据库访问的标准接口(ODBC)来访问外部表，外部表省去了繁琐的数据导入工作，让Doris可以具有了访问各式数据库的能力，并借助Doris本身的OLAP的能力来解决外部表的数据分析问题：支持各种数据源接入
Leo⁵·2025-02-04 08:56

Spring Boot 2 快速教程：WebFlux 集成 Mongodb（三）

这样数据就不会持久化，本文我们用MongoDB来实现WebFlux对数据源的操作。什么是MongoDB?
星如雨ｸﾞｯ!(๑•̀ㅂ•́)و✧·2025-02-04 06:09

Java Stream：让数据处理变得更简单、更高效

Java中的Stream是一种用于处理集合（数组、列表等）和其他数据源的元素序列的抽象。StreamAPI提供了一种声明性的编程风格，可以方便地对数据进行过滤、映射、聚合等操作。
三花学编程·2025-02-04 02:35

如何在Java中调用Python

DataX是阿里开源的一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。
梦想画家·2025-02-03 17:17

数字孪生下的智慧城市（城市大脑）建设方案——建模层

数据源：卫
百态老人·2025-02-03 14:57

常用的数据可视化工具

能够连接30多个数据源类型，混合数据源，还支持与R集成。PowerBI：由微软开发，可很好地集成微软的Office办公软件。支持自由导入多种数据，如文件、文件夹和数据库。
python游乐园·2025-02-03 11:31

Sentinel 实现 pull 模式规则持久化

Sentinelpull模式规则持久化一、修改服务1.引入依赖2.配置nacos地址二、修改sentinel-dashboard源码2.修改nacos依赖3.添加nacos支持4.修改nacos地址5.配置nacos数据源
我心向阳iu·2025-02-02 11:30

Caused by: java.io.NotSerializableException: org.apache.kafka.common.metrics.MetricConfig

flink自定义数据源的开发过程中遇到这样一个错误。错误原因：在于KafkaConsumer的初始化放在了定义处。解决：应该放在open方法内初始化。
Slient-猿·2025-02-02 02:58

4 Spark Streaming

完成实时需求1)WordCount2)updateStateByKey3)reduceByKeyAndWindow一级目录SparkStreaming是一个基于SparkCore之上的实时计算框架，可以从很多数据源消费数据并对数据进行实时的处理
TTXS123456789ABC·2025-02-01 23:43

Python大数据之PySpark(三)使用Python语言开发Spark程序代码_windows spark python

算子：rdd的api的操作，就是算子，flatMap扁平化算子，map转换算子Transformation算子Action算子步骤：1-首先创建SparkContext上下文环境2-从外部文件数据源读取数据
2401_84181704·2025-02-01 23:09

开源的Text-to-SQL工具WrenAI

语义引擎：WrenAI配备了强大的语义引擎，能够映射业务术语到数据源，定义关系，并整合预定义的计算和聚合，从而提高查询精度。支持多种模
rkmhr_sef·2025-02-01 23:39

[ Android ] Google JetPack架构指南

文章目录架构原则架构分层关于DomainLayer架构选型参考JetPack架构组件参考网站架构原则UI和数据分离，不要将所有代码写在Activity和Fragment里面数据驱动UI，最好是持久性数据模型单一数据源
ByteFlys·2025-02-01 18:28

【数据仓库】

数据仓库：概念、架构与应用目录什么是数据仓库数据仓库的特点数据仓库的架构3.1数据源层3.2数据集成层（ETL）3.3数据存储层3.4数据展示与应用层数据仓库的建模方法4.1星型模型4.2雪花模型4.3
三日看尽长安花·2025-02-01 17:49

springDataJPA实战

mybatis更好一些1.创建module2.添加数据源,新建jpa数据库spring:datasource:username:rootpassword:123456url:jdbc:mysql://localhost
cc&·2025-02-01 14:54

TDengine 做为 FLINK 数据源技术参考手册

与此同时，Flink拥有丰富的连接器与各类工具，可对接众多不同类型的数据源实现数据的读取与写入。
TDengine （老段）·2025-02-01 11:02

TDengine 做 Google Looker Studio 数据源

LookerStudio，作为Google旗下的一个功能强大的报表和商业智能工具，前身名为GoogleDataStudio。在2022年的GoogleCloudNext大会上，Google将其更名为LookerStudio。这个工具凭借其丰富的数据可视化选项和多样化的数据连接能力，为用户提供了便捷的数据报表生成体验。用户可以根据预设的模板轻松创建数据报表，满足各种数据分析需求。由于其简单易用的操作
TDengine （老段）·2025-02-01 11:00

手把手教你搭建 Android MVI架构 MVI + kotlin + Flow

一、什么是MVIAndroidMVI是一种用于构建Android应用程序的架构模式，其核心思想在于实现单向数据流和唯一可信数据源。
m0_74825466·2025-02-01 08:05

spark 算子例子_Spark性能调优方法

一般来说，如果有可能，用户应当尽可能多地使用SparkSQL以取得更好的性能。主要原因是SparkSQL是一种声明式编程风格，背后的计算引擎会自动做大量的性能优化工作。
不让爱你的人失望·2025-01-31 16:28

OLAP引擎比较

一，sparksql与dorisspark虽然是一个计算引擎，但sparksql也支持符合通用语法的sql查询，延迟为分钟级。doris是一个OLAP数据库，支持对大数据的复杂查询，延迟为秒级。
小手追梦·2025-01-31 10:30

使用Flink进行流式图处理

1.2流式计算的概念流式计算是一种新兴的数据处理范式,它能够持续不断地处理来自各种数据源的数据流。与传统的批处
AI天才研究院·2025-01-30 19:26

OpenAI 函数调用 功能入门

它提供了一个框架，将LLM与其他数据源（如互联网或个人文件）连接起来，允许开发人员将多个命令链接在
AI火箭·2025-01-30 16:57

MyBatis配置多数据源

MyBatis配置多数据源在做项目的过程中，有时候一个数据源是不够，那么就需要配置多个数据源。本例介绍mybatis多数据源配置。
hui_ss·2025-01-30 10:39

1-structedStreaming-基本流程(2.3.1)

基本流程--spark2.3.1新定义接口--中间使用了一些过度接口为了兼容老版本如：BaseStreamingSourceDataSource为一个类，定义了可插拔的数据源，对应一些列旧的数据源DataSourceV2spark2.3.1
github_28583061·2025-01-30 09:30

1-structedStreaming-基本流程(2.2.1)

基本流程spark2.2.1StructuredNetworkWordCount统计来自socket的wordcount创建stream，指定数据源DataStreamReader--从外部存储加载流数据的接口
github_28583061·2025-01-30 09:30

基于Spark的实时计算服务的流程架构

以下是一个典型的基于Spark的实时计算服务的流程架构：1.数据源数据源是实时计算服务的起点，常见的数据源包括：消息队列：如Kafka、RabbitMQ、AmazonKinesis等。
小小搬运工40·2025-01-30 02:08

软件工程期末选择题复习

A、类图B、顺序图C、状态图D、协作图正确答案：B3、以下关于数据流图的说法错误的是()A、传统的数据流图中主要由加工、数据源点
CY_U·2025-01-29 18:06

Springboot实现多数据源整合的两种方式

一、前言大家好，我是小诚，不知不觉上一次更文已经是20多天前了！其实这段时间也一直没有闲着，一个是在梳理之前的文章知识和资源，用于搭建技术圈子，另外一个就是在思考自己的一个输出方向，社区发展得很迅速，热榜各种各类的文章都有，深思熟虑后，还是坚持文章在精不在多，质量标准更加重要，所以今后博文的方向会更加偏向实战和经验，争取分享更加有价值的博文！如果文章对你有帮助，可以帮忙一键三连和专栏订阅哦！技术圈
咸猪手呆呆·2025-01-29 16:14

RAG：AI大模型联合向量数据库和 Llama-index，助力检索增强生成技术

RAG技术的核心在于其能够将大型语言模型的生成能力与特定数据源的检索相结合。这意味着，当模型面对用户提出的问题时
AI学习不迷路·2025-01-29 10:21

大数据开发的底层逻辑是什么？

以下是大数据开发的一些关键底层逻辑：数据采集：目的：从不同的数据源（如日志文件、数据库、传感器等）收集数据。
瑰茵·2025-01-28 18:56

基于Python的多元医疗知识图谱构建与应用研究（下）

五、基于医疗知识图谱的医疗知识图谱程序构建5.1数据层构建5.1.1数据源选择与获取在构建基于医疗知识图谱的医疗知识图谱数据层时，数据源的选择与获取至关重要。
Allen_LVyingbo·2025-01-28 02:35

ELK日志分析系统

什么是ELK:Elasticsearch:基于lucene的开源分布式搜索服务器(类似于solr)特点:分布式,零配置,分片索引,restful风格,多数据源logStash收集日志,过滤分析,并存储Kibana
AWAKE-HU·2025-01-27 20:53
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他