数据库程序员大数据分布式高性能

Spark MLlib模型训练—聚类算法 K-means

ApacheSpark提供了K-means聚类算法的高效实现，支持大规模数据的分布式计算。本文将详细介绍K-means聚类算法的原理，并结合Spark
不二人生·2024-09-06 04:14

DAG (directed acyclic graph) 作为大数据执行引擎的优点

TL;DR-ConceptuallyDAGmodelisastrictgeneralizationofMapReducemodel.DAG-basedsystemslikeSparkandTezthatareawareofthewholeDAGofoperationscandobetterglobaloptimizationsthansystemslikeHadoopMapReducewhicha
joeywen·2024-09-06 04:43

Python 常用web框架

比如Django集成了安全认证，URLRouting，模板引擎，ORM以及数据库Scheme映射。这使得Django非常强大，有很好的可扩展性，性能也非常好。
TigerZ*·2024-09-06 04:41

chatgpt赋能python：Python到底能不能转换成C代码？

然而，Python的解释性带来了一定的性能损失，这使得Python在一些高性能应用程序上表现不尽理想。为了解决这个问题，许多人会想到将Python代码转换成C代码。
turensu·2024-09-06 04:10

Java分布式ID生成解决方案

Java分布式ID生成解决方案参考文章：（1）Java分布式ID生成解决方案（2）https://www.cnblogs.com/hxun/p/11451629.html备忘一下。
短期菜鸟·2024-09-06 04:10

Spark的Web界面

Storage-此视图展示了数据如何在RDDs（弹性分布式数据集）之间进行分层存储，以及
静听山水·2024-09-06 04:40

Java 7.1 - 理论 & 算法 & 协议

C：Consistency一致性A：Availability可用性P：Partition分区容错性对于理论计算机科学，CAP定理指出，对于一个分布式系统而言，CAP中的三个只能同时满足两个。
没有韭菜的饺子·2024-09-06 04:39

Java 7.4 - 分布式锁

什么是分布式锁？对于单机多线程，我们使用ReentrantLock这类本地锁来控制多个线程对本地共享资源的访问；而对于分布式系统，我们使用分布式锁来控制多个服务对共享资源的访问。
没有韭菜的饺子·2024-09-06 04:39

Java实战：分布式ID生成方案

在分布式系统的设计与开发过程中，如何生成全局唯一、有序且高可用的ID是一个绕不开的核心问题。尤其是在电商、社交网络、金融交易等领域，ID不仅是业务数据的重要标识，还可能直接影响系统的稳定性和扩展性。
拥抱AI·2024-09-06 04:39

如何用外部程序优化SQL语句中的IN和EXISTS

数据结构IN和EXISTS是SQL中常见的复杂条件，在将SQL（存储过程）转换成库外计算获取高性能时也会面对这些问题。
小黄鸭呀·2024-09-06 04:11

Lock wait timeout exceeded； try restarting transaction

Linux中找到你mysql安装的位置whereismysql查看安装目录whichmysql查找运行文件位置进行赋权此目录,目录结构如下数据库先赋权chmod-R777nidemulu/mysql重启服务并确保它在系统启动时自动启动
一入程序无退路·2024-09-06 03:08

java分布式ID生成组件

1、新建WorkId类packagecom.hua.common.id;importorg.apache.commons.lang3.RandomUtils;importorg.apache.commons.lang3.StringUtils;importjava.net.Inet4Address;importjava.net.UnknownHostException;/***@Deacripti
hong_myth·2024-09-06 03:08

开源无人棋牌室源码，无人自助茶室源码，无人台球室，uniapp，Java

前一段时间在研究一个项目，uniapp可以适配微信小程序、h5，后台用java编写，数据库支持mysql，已对接多个品牌硬件，可以插拔式适配。对于这块有兴趣的可以拿来研究、学习。
charlesbabbage·2024-09-06 03:36

2024国外类脑智能企业汇总

Intel官网:Intel:https://www.intel.com企业介绍:Intel是全球领先的半导体公司，致力于开发高性能计算技术。
细节的温柔·2024-09-06 03:35

Xline v0.2.0: 一个用于元数据管理的分布式KV存储

Xline是一个基于Curp协议的，用于管理元数据的分布式KV存储。现有的分布式KV存储大多采用Raft共识协议，需要两次RTT才能完成一次请求。
达坦科技DatenLord·2024-09-06 03:35

laravel SQLSTATE[HY000] [2002] Connection refused

新安装的laravel框架，填好数据库信息，准备提交数据，突然来了个错误SQLSTATE[HY000][2002]Connectionrefused这是怎么回事？
HaRun·2024-09-06 02:49

Flink生态与未来

本文为《Flink大数据项目实战》学习笔记，想通过视频系统学习Flink这个最火爆的大数据计算框架的同学，推荐学习课程：Flink大数据项目实战：http://t.cn/EJtKhaz核心组件栈Flink
weixin_30394333·2024-09-06 02:00

随遇而安的生活，不就是自由自在的人生吗？

我现在在一个二线的小城市生活，作为一名IT的程序员，我总觉得自己还有一份不安的心在跳动，我不喜欢规矩，就像鸟儿讨厌铁笼一般，所以最
Jim555·2024-09-06 02:44

经验笔记：数据库性能优化

数据库性能优化经验笔记引言在当今数据驱动的世界里，数据库性能直接影响到应用程序的响应时间和用户体验。随着数据量的增长，数据库性能问题变得日益突出。
漆黑的莫莫·2024-09-06 02:59

大厂程序员都会的分布式RPC框架，直接无私打包分享，手慢无

一.概述什么是RPC？远程服务调用官方：一种通过网络从远程计算机程序上请求服务，而不需要了解底层网络技术的思想通俗一点：客户端在不知道调用细节的情况下，调用存在于远程计算机上的某个对象，就像调用本地应用程序中的对象一样。市面上常见的rpc框架：dobbo，springCloud，gRPC...那为什么要有RPC，HTTP不好么？因为RPC和HTTP就不是一个层级的东西，所以严格意义上这两个没有可比
卡卡的Java架构笔记·2024-09-06 02:56

JuiceFS 社区版 v1.2 发布，新增企业级权限管理、平滑升级功能

JuiceFS是为云环境设计的分布式文件系统，支持超过10种元数据引擎和30种以上的数据存储引擎。
Juicedata·2024-09-06 01:24

10个Python脚本，轻松实现日常任务自动化

只需几行代码，你就可以读取、清洗和分析来自CSV文件或数据库等各种来源的数据。下面是一个示例脚本。importpandasaspd#从C
Python_chichi·2024-09-06 01:53

经验笔记：RPC与高性能NIO框架

RPC与高性能NIO框架的经验笔记引言随着互联网技术的发展，分布式系统逐渐成为了现代软件架构的标准之一。
漆黑的莫莫·2024-09-06 01:21

终于有人把云计算与数据库的关系讲明白了

导读：本文讨论云计算与数据库的关系，包括云数据库自身的技术和特征，也包括云数据库的使用方式和形态变迁。
大数据v·2024-09-06 01:20

python分布式集群ray_GitHub - Leesire-Python/jd_spider: 两只蠢萌京东的分布式爬虫.

使用scrapy,scrapy-redis,graphite实现的京东分布式爬虫，以mongodb实现底层存储。分布式实现，解决带宽和性能的瓶颈，提高爬取的效率。
weixin_39781930·2024-09-06 00:17

云计算之云数据库

云数据库：架构在云端数据库集群上，通过云服务的方式让关系型数据库的可靠性更高，免去繁琐的维护工作，节约硬件成本，其具备以下特点：云数据库特点：1：管理方便：可以自动备份、弹性扩展。
weixin_34320724·2024-09-06 00:17

java sql注入正则表达式_Java程序员从笨鸟到菜鸟之（一百零二）sql注入攻击详解（三）sql注入解决办法...

怎么来解决和防范sql注入，由于本人主要是搞javaweb开发的小程序员，所以这里我只讲一下有关于javaweb的防止办法。其实对于其他的，思路基本相似。
用看智障的眼神看·2024-09-06 00:17

嵌入式Linux使用sqlite的库源码编译及用户程序的编译

本文章记录了在嵌入式设备中使用sqlite数据库的前期编译工作，工作是在虚拟机ubuntu环境中进行的。
junziruyu53·2024-09-06 00:45

Canal同时监控两个mysql的binlog并同步至一个topic中

准备:安装canal(博主canal版本1.1.5)安装kafka,做接收binlog日志数据用(博主kafka版本2.11)安装两个msyql,相当于两个mysql数据库(博主mysql版本5.1.0
梦见伊兮伊不觉·2024-09-06 00:45

推荐开源项目：Fluxter - Elixir连接InfluxDB的高效桥梁

fluxterHigh-performanceandreliableInfluxDBwriterforElixir项目地址:https://gitcode.com/gh_mirrors/fl/fluxter项目介绍Fluxter是一款专为Elixir社区打造的轻量级工具，旨在简化与InfluxDB——高性能的时间序列数据库之间
江奎钰·2024-09-06 00:12

正则表达式在线测试工具

正则表达式，是一种用于匹配字符串的工具，无论是程序员、网站管理员或者数据分析师，都需要经常使用它。
刨冰雨·2024-09-05 23:41

145. 利用 Redis Bitmap实践： 用户签到统计

我们通常使用MySQL数据库来存储用户的签到记录。然而，随着用户数量的增加，数据库中的记录将会随时间和用户量线性增长，这不仅增加了存储的负担，而且可能影响查询效率。在追求更高存储效率和查询性能
百里守约学编程·2024-09-05 23:10

2024年最全程序员如何优雅地摆地摊，2024年最新微信小程序跳转界面

总结其实要轻松掌握很简单，要点就两个：找到一套好的视频资料，紧跟大牛梳理好的知识框架进行学习。多练。（视频优势是互动感强，容易集中注意力）你不需要是天才，也不需要具备强悍的天赋，只要做到这两点，短期内成功的概率是非常高的。对于很多初中级Android工程师而言，想要提升技能，往往是自己摸索成长，不成体系的学习效果低效漫长且无助。以上就是总结的关于在面试的一些总结，希望对大家能有些帮助，除了这些面试
2401_84564025·2024-09-05 23:39

计算机毕业设计SSM_Vue宠物商城系统【代码讲解+安装调试+文档指导】

心愿：点赞收藏⭐评论文末获取源码联系技术选型spring、springmvc、mybatis、vue、elementUI、LayUI、mysql、tomcat8.5、jdk1.8数据库表结构14张开发工具
计算机毕业设计_吉哥·2024-09-05 23:48

最全金融数据_PySpark-3(2)，大数据开发学习的三个终极问题及学习路线规划

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！
2401_84185145·2024-09-05 23:38

QString使用split处理大数据时的低效率问题

QFilefile(filepath1);if(!file.open(QIODevice::ReadOnly)){returndtre;}QTextStreamtxtRead(&file);QStringline=txtRead.readLine();QStringListlist=line.split(QRegExp("\\s+"));file.close();一直在使用QString的spli
junziruyu53·2024-09-05 23:07

不一样的SQL优化

基本情况：1：数据库是oracal2：库里查询完的数据为2700W条3：上线之后查询时间为12分钟+4：初次优化之后仍然有10S（太久了）优化思考1：上线上线之后，SQL一直转圈。
一键三联鸭~·2024-09-05 22:35

文章汇总 | 2018

12月RIA便签学习法10月财富最好的定义Spark分布式原理及碰到的三个坑在不断解决问题(矛盾)的过程进步9月《韭菜的自我修养》-股票交易是零和游戏吗?
学习之术·2024-09-05 22:27

浙大数据结构：01-复杂度2 Maximum Subsequence Sum

数据结构MOOCPTA习题01-复杂度2MaximumSubsequenceSum#includeusingnamespacestd;constintM=100005;inta[M];intmain(){intk;cin>>k;intf=1;for(inti=0;i>a[i];if(a[i]>=0)//如果出现大于0则进行在线处理f=0;}if(f){//全都小于0coutma){//更新答案ma
_Power_Y·2024-09-05 22:31

浙大数据结构：01-复杂度1 最大子列和问题

数据结构MOOCPTA习题01-复杂度1最大子列和问题使用在线处理，遍历数组，如果当前数组和小于0则抛弃，每次更新最大值。我们假设最终结果为数组中间的一段，那么左边剩余的部分和右边剩余的部分和一定小于0，对答案没有贡献。#includeusingnamespacestd;constintM=100005;inta[M];intmain(){intk;cin>>k;for(inti=0;i>a[i]
_Power_Y·2024-09-05 22:01

java之路—— 带你初步了解mybatis框架

的核心是什么三、mybatis的优缺点四、mybatis的基本配置五.mybatis基本流程一、什么是mybatisMyBatis是一种优秀的基于Java的持久层框架，它利用了面向对象的编程思想来操作数据库
流光CN·2024-09-05 22:57

Spark基础

一.基础1.RDD机制  1.rdd分布式弹性数据集，简单的理解成⼀种数据结构，是spark框架上的通⽤货币。所有算⼦都是基于rdd来执⾏的，不同的场景会有不同的rdd实现类，但是都可以进⾏互相转换。
Tom无敌宇宙猫·2024-09-05 22:26

Spring实现纯注解项目开发

开发中的常用注解Bean管理类常用的四个注解（作用相同，名称不同）依赖注入相关的注解（加在成员变量上）对象生命周期注解初始化方法和销毁方法其他注解代码示例1.导入Maven依赖2.创建实体类（用于接收从数据库中查询到的信息
dawn191228·2024-09-05 21:55

【研发日记】Matlab/Simulink技能解锁(八)——分布式仿真

文章目录前言背景分布式仿真使用方式分析和应用总结参考资料前言见《【研发日记】Matlab/Simulink技能解锁(三)——在Stateflow编辑窗口Debug》见《【研发日记】Matlab/Simulink
Mr.Cssust·2024-09-05 21:53

Java经典框架之MyBatis

一、基本介绍MyBatis是一个非常流行的Java持久层框架，它提供了简单的方法来处理数据库中的数据。
CN.LG·2024-09-05 21:51

交通智能化的催化剂：大模型技术在城市运营中的实践与展望

王凯博士强调，大数据与机器学习技术的飞速发展，使大模型成为智能交通系统的核心，有效提升交通效率，增强城市安全，改善居民出行体验。其演讲不仅
CSDN资讯·2024-09-05 21:51

编程之路：在Bug迷宫中寻找光明

在这条充满未知与探索的道路上，每一个程序员都如同一位勇敢的冒险家，不断在Bug的迷宫中寻找着出口。正是这些经历，塑造了编程高手们坚韧不拔的精神，也让他们在面对困难时总能找到突破的方法。
阳爱铭·2024-09-05 20:19

mysql查询之”使用索引“

项目场景：使用sql查询，但是速度非常慢（百万级数据量）问题描述使用sql查询，如果不走索引的话，速度非常慢原因分析：解决方案：tips:了解一下”主键索引”主键和主键索引在数据库中有着特定的含义和用途
AmBestToday·2024-09-05 20:49

SpringBoot3配置dynamic多数据源，url找不到。Failed to configure a DataSource: ‘url‘ attribute is not specified a

attributeisnotspecifiedandnoembeddeddatasourcecouldbeconfigured.我在编写springboot项目时尝试使用dynamic-datasource实现多数据库连接运行项目时报错退出
Java小白笔记·2024-09-05 20:19

hive序列生成_Hive实现自增列的两种方法

Hive没有关系数据库中的自增列，但它也有一些对自增序列的支持，通常有两种方法生成代理键：使用row_number()窗口函数或者使用一个名为UDFRowSequence的用户自定义函数(UDF)。
weixin_39559804·2024-09-05 20:17
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他