阿里云spark

MySQL单表数据量大优化方案及注意事项

问题概述使用阿里云rdsforMySQL数据库（就是MySQL5.6版本），有个用户上网记录表6个月的数据量近2000万，保留最近一年的数据量达到4000万，查询速度极慢，日常卡死。严重影响业务。
编程爱好者9913·2025-01-29 18:06

Composer国内镜像源修改教程

为了解决这个问题，可以切换到国内的镜像源，如阿里云的Composer镜像。以下是更换国内镜像源的步骤：一、全局配置镜像源打开命令行工具（如cmd、PowerShell、终端等）。
网友阿贵·2025-01-29 17:54

基于SpringBoot+Vue+uniapp的4S店客户管理系统(源码+lw+部署文档+讲解等)

系统测试系统测试目的系统功能测试系统测试结论为什么选择我代码参考数据库参考源码获取前言博主介绍：✌全网粉丝15W+,CSDN特邀作者、211毕业、高级全栈开发程序员、大厂多年工作经验、码云/掘金/华为云/阿里云
百奇的代码小屋·2025-01-29 12:38

【愚公系列】《循序渐进Vue.js 3.x前端开发实践》027-组件的高级配置和嵌套

标题详情作者简介愚公搬代码头衔华为云特约编辑，华为云云享专家，华为开发者专家，华为产品云测专家，CSDN博客专家，CSDN商业化专家，阿里云专家博主，阿里云签约作者，腾讯云优秀博主，腾讯云内容共创官，掘金优秀博主
愚公搬代码·2025-01-29 10:16

通义千问 Qwen2-VL-2B：技术架构、核心原理、微调操作与场景应用详解

阿里云通义千问团队推出的Qwen2-VL-2B模型，作为Qwen2-VL系列中的轻量级版本，凭借其高效的计算性能和强大的多模态处理能力，成为开源社区和工业界关注的焦点。本文将深入解
zhangjiaofa·2025-01-29 10:16

最新安装银河麒麟V10服务器版在线安装最新版 Docker，麒麟V10（arm64/aarch64）离线安装docker，解决docker容器无法访问宿主机网络的问题

aarch64）离线安装docker，解决docker容器无法访问宿主机网络的问题.环境服务器版本：Kylin-Server-V10-SP3-General-Release-2212-X86_64安装#配置阿里云
代码讲故事·2025-01-29 08:31

阿里巴巴超大规模 Kubernetes 基础设施运维体系介绍

简介：ASI作为阿里集团、阿里云基础设施底座，为越来越多的云产品提供更多专业服务，托管底层K8s集群，屏蔽复杂的K8s门槛、透明几乎所有的基础设施复杂度，并用专业的产品技术能力兜底稳定性，让云产品只需要负责自己的业务
阿里云云栖号·2025-01-29 06:37

There was a problem confirming the ssl certificate: [SSL:CERTIFICATE_ VERIFY_ FAILED]certificate解决方案

曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为CSDN博客专家、人工智能领域优质创作者。
爱编程的喵喵·2025-01-28 23:12

git clone出现fatal: unable to access Failed to connect to github.com port 443: Timed out解决方案

曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为CSDN博客专家、人工智能领域优质创作者。
爱编程的喵喵·2025-01-28 21:19

linux git clone出现fatal: unable to access Failed to connect to github.com port 443: Timed out解决方案

曾获得阿里云天池比赛第一名，CCF比赛第二名，科大讯飞比赛第三名。拥有多项发明专利。对机器学习和深度学习拥有自己独到的见解。曾经辅导过若干个非计算机专业的学生进入到算法行业就业。
herosunly·2025-01-28 20:45

ModuleNotFoundError: No module named ‘pywin32_bootstrap‘解决方案

曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为CSDN博客专家、人工智能领域优质创作者。
爱编程的喵喵·2025-01-28 18:32

使用Bert+BiLSTM+CRF训练 NER任务

使用的数据集在这里E-CommercialNERDataset/电商NER数据集_数据集-阿里云天池针对面向电商的命名实体识别研究，我们通过爬取搜集了淘宝商品文本的标题，并标注了4大类，9小类的实体类别
CHEN_RUI_2200·2025-01-28 14:57

RDD 算子全面解析：从基础到进阶与面试要点

Spark的介绍与搭建：从理论到实践_spark环境搭建-CSDN博客Spark的Standalone集群环境安装与测试-CSDN博客PySpark本地开发环境搭建与实践-CSDN博客Spark程序开发与提交
天冬忘忧·2025-01-28 12:16

JVM垃圾回收器的原理和调优详解！

运营社区：C站/掘金/腾讯云/阿里云/华为云/5
喵手·2025-01-28 02:34

Spring注解篇：@RequestParam详解！

运营社区：C站/掘金/腾讯云/阿里云/华为云/51CTO；欢迎大家常来逛逛  今天我要给大家分享一些自己日常学习到的一些知识点，并以文字的形式跟大家一起交流，互相学习，一个人虽可以走的更快，但一群人可以走的更远
喵手·2025-01-28 02:03

深度解析：MyBatis-Plus实现分页查询的封装！

运营社区：C站/掘金/腾讯云/阿里云/华为云/51CTO；欢迎大家常来逛逛 
喵手·2025-01-28 02:03

SpringBoot 多租户架构，轻松驾驭复杂业务场景！

运营社区：C站/掘金/腾讯云/阿里云/华为云/51CTO；欢迎大家常来逛逛  今天我要给大家分享一些自己日常学习到的一些知识点，并以文字的形式跟大家一起交流，互相学习，一个人虽可以走的更快，但一
喵手·2025-01-28 01:56

ERROR: Could not install packages due to an OSError: [Errno 2] No such file or directory解决方案

曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为CSDN博客专家、人工智能领域优质创作者。
爱编程的喵喵·2025-01-28 01:25

解决pip安装慢的问题

pipinstall-i源空格安装包名称（注意要去掉源后面的斜杠）例如：​pipinstall-ihttps://mirrors.aliyun.com/pypi/simple numpy​以下的源可供参考，换着试试安装阿里云
木汐爱编程·2025-01-28 01:55

安装flash-attn出现RuntimeError current installed version g++ (4.8.5) is less than mininum version解决方案

曾在阿里云、科大讯飞、CCF等比赛获得多次Top名次。现为CSDN博客专家、人工智能领域优质创作者。  
爱编程的喵喵·2025-01-28 01:53

spring配合hibernate报错：sessionFactory or hibernate

Spring整合Hibernate报错"sessionFactoryorhibernateTemplateisrequired"全解指南通过分析国内技术社区（CSDN、开源中国、阿里云开发者社区）的典型案例
·2025-01-27 22:46

深度学习-70-大语言模型LLM之基于大模型LLM与检索增强技术RAG的智能知识库

2.3建立向量索引2.4大模型选择与微调3开源知识库项目3.1FastGPT3.2AnythingLLM3.3LangChain-Chatchat4商业化解决方案4.1百度智能云+千帆大模型知识库4.2阿里云
皮皮冰燃·2025-01-27 21:31

【云原生】【适用小白】SpringCloud Alibaba开源Nacos切换到MSE Nacos

参考阿里云官方文档：NacosClient访问鉴权非常简单，我这里代码部分只更换了2个配置字段就实现了！！！
登云时刻·2025-01-27 21:56

anaconda中pyspark_自学大数据——9 Anaconda安装与使用pyspark

首先从Anaconda官网上下载Anaconda。一、解压安装包sudobashAnaconda3-2020.07-Linux-x86_64.shchown-Rhadoop:hadoop/opt/anaconda/vi/etc/profileexportANACONDA_HOME=/opt/anacondaexportPATH=$PATH:$ANACONDA_HOME/bin:source/etc
步六孤陆·2025-01-27 17:59

PySpark数据处理过程简析

作者：禅与计算机程序设计艺术1.简介PySpark是ApacheSpark的PythonAPI，可以用Python进行分布式数据处理，它在内存中利用了ApacheHadoopYARN资源调度框架对数据进行并行处理
AI天才研究院·2025-01-27 17:28

2022-02-09大数据学习日志——PySpark——Spark快速入门&Standalone集群

第一部分Spark快速入门01_Spark快速入门【Anaconda软件安装】[掌握]使用Python编写Spark代码，首先需要安装Python语言包，此时安装Anaconda科学数据分析包。
王络不稳定·2025-01-27 17:28

PySpark

1.PySpark的搭建https://blog.csdn.net/qq_36330643/article/details/78429109PySpark是Spark为Python开发者提供的API，位于
rainyrainbow·2025-01-27 17:56

spark2如何集成到cdh里

最近做性能测试需要spark2测试下和spark1.6性能有多大差别，官方文档里写着可以集成，但是自己怎么搞都不行，折磨了3天的时间，目前终于把spark2集成到集群里了我安装的是最新版本的下载spark2
蘑菇丁·2025-01-27 16:55

大数据之Spark运行流程

文章目录前言（一）SparkOnYarn集群的Client模式运行流程（二）SparkOnYarn集群的Cluster模式运行流程总结前言上篇文章有讨论到SparkOnYarn的两种部署模式，如果有不清楚的地方
「已注销」·2025-01-27 15:17

xgboost-spark-scala

今天学习写scala，拿xgboost试一下～先记一下xgboost调参要点：7.xgboost中比较重要的参数介绍（1）objective[default=reg:linear]定义学习任务及相应的学习目标，可选的目标函数如下：“reg:linear”–线性回归。“reg:logistic”–逻辑回归。“binary:logistic”–二分类的逻辑回归问题，输出为概率。“binary:logi
maokunnn·2025-01-27 15:14

点餐系统开题报告

博主介绍：✌全网粉丝30W+,CSDN全栈领域优质创作者，博客之星、掘金/华为云/阿里云等平台优质作者,计算机毕设实战导师。
JAVA编码选手·2025-01-27 13:32

低代码系统-氚云、宜搭控件对比

可以说是一个以腾讯微平台的企业级应用服务平台，但宜搭更像一个数字化工具，只是更加便利的融入了钉钉和阿里云而已，并且重点布局了AI的用户使用能力。
露临霜·2025-01-27 09:09

一站式云原生支持，Alibaba Cloud Linux性能有多强？

在这样的背景下，AlibabaCloudLinux应运而生，作为一款由阿里云自主研发的Linux操作系统，它专为云计算环境进行了深度优化，为企业和开发者提供了一站式的云原生支持。
Anna_Tong·2025-01-27 08:01

基于SpringBoot+Vue码头船只货柜管理系统

作者简介：Java领域优质创作者、CSDN博客专家、CSDN内容合伙人、掘金特邀作者、阿里云博客专家、51CTO特邀作者、多年架构师设计经验、多年校企合作经验，被多个学校常年聘为校外企业导师，指导学生毕业设计并参与学生毕业答辩指导
qq_469603589·2025-01-27 08:28

Python安装库的镜像源

这时候我们就要使用一个镜像源来下载，常用的镜像源已经列举在下面啦1.清华大学（完全度和速度都很好，是一个优秀的pip镜像源）https://pypi.tuna.tsinghua.edu.cn/simple2.阿里云
遵纪守法的小爬虫·2025-01-27 05:43

大数据平台建设整体架构设计方案

《大数据平台建设整体架构设计方案》关键词：大数据平台、分布式存储、分布式计算、数据仓库、数据湖、数据安全、数据质量管理、数据治理、数据挖掘、机器学习、图计算、自然语言处理、Hadoop、Spark、Flink
AI天才研究院·2025-01-27 02:55

后端笔记01 | 分布式锁实现与思考

参考资料：JavaGuide：分布式锁JavaGuide：分布式锁的实现方案总结阿里云开发者：分布式锁实现原理与最佳实践字节跳动技术团队：聊聊分布式锁分布式锁关键要点分布式锁的对哪些场景的必要性，分布式锁和本地锁的区别
谷嘟·2025-01-27 01:47

对话小羊驼vicuna

llama、alpaca、vicuna的前世今生6.对话Vicuna（1）llama-2-7b-hf（2）vicuna-7b-delta-v0（3）vicuna-7b-v0（4）执行推理1.gpu租用阿里云
Always_Shine·2025-01-27 01:44

Llama3本地部署的解决方案

曾获得阿里云天池比赛第一名，CCF比赛第二名，科大讯飞比赛第三名。拥有多项发明专利。对机器学习和深度学习拥有自己独到的见解。曾经辅导过若干个非计算机专业的学生进入到算法行业就业。
herosunly·2025-01-27 00:36

同步清华镜像源，制作本地pip镜像源

同步清华镜像源，制作本地pip镜像源访问清华源下载建立索引启动pip服务客户端测试为了方便国内用户使用pip模块，国内很多已经配置专用的pip镜像源国内镜像源阿里云http://mirrors.aliyun.com
淡若静水Summer·2025-01-26 21:45

Scala简介

hadoop生态圈—>javaspark生态圈—>scala1.scala是面向对象的、面向函数的基于静态类型的编程语言。
醉游江湖·2025-01-26 18:21

spark官方配置参数详解

以下是整理的Spark中的一些配置参数，官方文档请参考SparkConfiguration。
我丶怀念的·2025-01-26 18:21

【spark床头书系列】如何在YARN上启动Spark官网权威详解说明

【spark床头书系列】如何在YARN上启动Spark官网权威详解说明点击这里看全文文章目录添加其他JAR文件准备工作配置调试应用程序Spark属性重要说明KerberosYARN特定的Kerberos
BigDataMLApplication·2025-01-26 18:20

xgboost在spark集群使用指南

简介XGBoost是一个优化的分布式梯度增强库，具有高效、灵活和可移植性。在梯度增强框架下实现了机器学习算法。XGBoost提供了一种并行树增强(也称为GBDT、GBM)，可以快速、准确地解决许多数据科学问题。相同的代码在主要的分布式环境(Hadoop、SGE、MPI)上运行，可以解决数十亿个示例的训练问题。xgb相对于gbt所做的改进：1.2.3.XGBoost可以使用R、python、java
一颗小草333·2025-01-26 17:49

CentOS7如何更换yum源

etc/yum.repos.d/目录cd/etc/yum.repos.d/二、备份镜像文件mvCentOS-Base.repoCentOS-Base.repo.backup三、使用wget获取镜像源（阿里云
DITTO_IDO·2025-01-26 13:17

Python文件操作(json、csv、tsv、excel、pickle文件序列化)

曾获得阿里云天池比赛第一名，CCF比赛第二名，科大讯飞比赛第三名。拥有多项发明专利。对机器学习和深度学习拥有自己独到的见解。曾经辅导过若干个非计算机专业的学生进入到算法行业就业。
herosunly·2025-01-26 12:39

Linux-0-Cenos7最换源linux换源、aarch64架构，x86_64架构

文章目录一、前言二、系统信息查询三、x86_64架构换源3.1、阿里云CentOS7源（推荐）：3.2、网易163CentOS7源：包比较少不全3.3、清华大学CentOS7源：3.4、清理YUM缓存并生成新的缓存
Jonathon125·2025-01-26 11:04

性能优化案例：通过合理设置spark.default.parallelism参数的值来优化PySpark程序的性能

在PySpark中，spark.default.parallelism是一个关键参数，直接影响作业的并行度和资源利用率。
weixin_30777913·2025-01-26 06:52

性能优化案例：通过合理设置spark.storage.memoryFraction参数的值来优化PySpark程序的性能

优化PySpark程序的性能时，合理设置spark.storage.memoryFraction（或相关内存参数）是关键。
weixin_30777913·2025-01-26 05:14

转：Spark RDD算子练习题

版权声明：本文为博主原创文章，遵循CC4.0BY-SA版权协议，转载请附上原文出处链接和本声明。本文链接：https://blog.csdn.net/qq_40825218/article/details/83720732给定数据如下：12张三25男chinese5012张三25男math6012张三25男english7012李四20男chinese5012李四20男math5012李四20男e
爱萨萨·2025-01-26 05:42
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他