2023-大数据应用开发国赛

降本增效利器！趣头条Spark Remote Shuffle Service最佳实践

1.业务场景与现状趣头条是一家依赖大数据的科技公司，在2018-2019年经历了业务的高速发展，主App和其他创新App的日活增加了10倍以上，相应的大数据系统也从最初的100台机器增加到了1000台以上规模
阿里云技术·2024-02-05 09:29

大数据-Spark调优（一）

大数据-Spark调优（一）分配更多的资源分配更多的资源是性能优化调优的王道，就是增加和分配更多的资源，这对于性能和速度上的提升是显而易见的，基本上，在一定范围之内，增加资源与性能的提升，是成正比的；写完了一个复杂的
海恋北斗星·2024-02-05 09:29

大数据笔记--Spark（第五篇）

目录一、Spark的调优1、更改序列化为kryo2、配置多临时文件目录3、启动推测执行机制4、某些特定场景，用mapPartitions代替map5、避免使用collect二、Spark的共享变量1、广播变量2、计数器三、VSM算法1、什么是倒排索引表？2、什么是相似度的概念？3、什么是TF-IDF算法4、VSM算法Ⅰ、概念Ⅱ、算法原理Ⅲ、举例一、Spark的调优1、更改序列化为kryoSpark
是小先生·2024-02-05 09:59

大数据 - Spark系列《三》- 加载各种数据源创建RDD

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客目录3.1
王哪跑nn·2024-02-05 09:28

大数据原理-Spark

概述：基于内存计算三大分布式计算系统：Hadoop、Spark、Storm特点：采用有向无环图DAG作业调度运行速度快循环数据流容易使用：可以通过SparkShell交互式编程用途：SQL查询、流式计算、机器学习、图算法组件部署：Hadoop的yarn框架调度、单独部署等等Spark主要语言：Scala（scalable可扩展）：多范式编程语言（面向对象、函数式编程）兼容Java可以运行在JVM，
monster++·2024-02-05 09:28

大数据 - Spark系列《四》- Spark分布式运行原理

Spark系列文章：大数据-Spark系列《一》-从Hadoop到Spark：大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据
王哪跑nn·2024-02-05 08:54

AI应用开发-python实现日志生成及定期清理

AI应用开发相关目录本专栏包括AI应用开发相关内容分享，包括不限于AI算法部署实施细节、AI应用后端分析服务相关概念及开发技巧、AI应用后端应用服务相关概念及开发技巧、AI应用前端实现路径及开发技巧适用于具备一定算法及
写代码的中青年·2024-02-05 08:20

AI应用开发-Linux终端命令Screen常见用法

AI应用开发相关目录本专栏包括AI应用开发相关内容分享，包括不限于AI算法部署实施细节、AI应用后端分析服务相关概念及开发技巧、AI应用后端应用服务相关概念及开发技巧、AI应用前端实现路径及开发技巧适用于具备一定算法及
写代码的中青年·2024-02-05 08:17

kafka基本原理

一、kafka概述1、定义kafka是一个分布式的基于发布订阅模式的消息队列，主要用于大数据实时处理灵越2、消息队列【1】应用场景用于异步、削峰、解耦【2】两种模式（1）点对点模式一对一，消费者主动拉取数据
会飞的大鱼吃小鱼·2024-02-05 08:59

大学生搜题用这三款神器就够了!!! #经验分享#经验分享#媒体

大学生必备，这条笔记大数据一定定要推给刚上大学的学弟学妹！！1.WolframAlphaWolframAlpha堪称“数学解题神器”！
学习93398·2024-02-05 08:23

HarmonyOS/OpenHarmony应用开发-ArkTS自适应线性布局自适应拉伸实现

自适应拉伸，在线性布局下，常用空白填充组件Blank，在容器主轴方向自动填充空白空间，达到自适应拉伸效果。实现方式@Entry@ComponentstructBlankExample{build(){Column(){Row(){Text('Bluetooth').fontSize(18)Blank()Toggle({type:ToggleType.Switch,isOn:true})}.back
华为开发者鸿蒙专区小助手·2024-02-05 07:30

HarmonyOS应用开发：Blank()空白布局

空白填充组件，在容器主轴方向上，空白填充组件具有自动填充容器空余部分的能力。仅当父组件为Row/Column时生效。接口Blank(min?:number|string)参数：参数名参数类型必填参数描述minnumber|string否空白填充组件在容器主轴上的最小大小。默认值：0属性除支持通用属性外，还支持以下属性：名称参数类型描述colorResourceColor设置空白填充的填充颜色。示例
Tsingfeng.·2024-02-05 07:30

建筑工程答案在哪搜？九个免费好用的大学生搜题工具 #经验分享#知识分享

大学生必备，这条笔记大数据一定定要推给刚上大学的学弟学妹！！1.七燕搜题这是一个公众号解题步骤详细解析，帮助你理解问题本质。其他考试领域也能找到答案。
奔跑sdgfg·2024-02-05 07:18

(十六)ATP应用测试平台——java应用中的过滤器Filter、拦截器Interceptor、参数解析器Resolver、Aop切面，你会了吗？

前言过滤器Filter、拦截器Interceptor、参数解析器Resolver、Aop切面是我们应用开发中经常使用到的技术，到底该如何使用这些web附属功能，本小节我们就分别介绍一下其各自的用法及其应用场景
厉害哥哥吖·2024-02-05 07:07

abap实现大数据-echar调用

abap实现大数据-echar调用前言一、echart代码获取二、abap实现1.定义HTML控件2.构建option3.完整ABAP代码总结前言最近做了个bw+smartbi项目，smartbi虽然好
小猿的hello World·2024-02-05 07:03

azkaban编译时报错的解决方案

大数据单机学习环境搭建(11)Azkaban单机部署，关于Azkaban和gradle下载，本文编译不限于单机solo模式。
赫加青空·2024-02-05 07:53

Python调用pyspark报错整理

前言Pycharm配置了SSH服务器和Anaconda的python解释器，如果没有配置可参考大数据单机学习环境搭建(8)Linux单节点Anaconda安装和Pycharm连接Pycharm执行的脚本执行如下
赫加青空·2024-02-05 07:52

Android应用开发进阶，flutter页面跳转防止页面重复刷新

第三章通过Google官方的架构示例项目To-Do，详细介绍了Android的应用架构，包括MVP，MVP-Clean，MVP-Dagger，MVP-RxJava，MVVM-DataBinding，MVVM-Live。第四章介绍了实战项目AndroidPlus，AndroidPlus是一个专注于Andriod领域的知识问答与分享平台，遵循MaterialDesign，使用了MVP-Dagger架构
m0_64604842·2024-02-05 07:10

3.0 Hadoop 概念

Hadoop整体设计Hadoop框架是用于计算机集群大数据处理的框架，所以它必须是一个可以部署在多台计算机上的软件。部署了Hadoop软件的主机之间通过套接字(网络)进行通讯。
二当家的素材网·2024-02-05 06:38

基于hadoop+spark的大规模日志的一种处理方案

而且CDN上的访问日志一般都非常大，需要用大数据处理架构来进行处理，本文描述了一种利用hadoop+spark来处理大量CDN日志的方法，当然本方
码农心语·2024-02-05 06:36

14岁的男孩说想学生信，应该给予哪些指导？

现今大数据当道，生信分析也似乎是很多医学或生物科研工作者的一把剑，上可问道—分析实验数据发篇大文章，下可修枝裁芽—处理日常数据来个小美化。而从理论到实践的noerror总是“路漫漫其修远兮”。
生信宝典·2024-02-05 06:57

基于Vue+node.js的宿舍管理系统的设计与实现--80331(免费领源码、附论文）可做计算机毕业设计JAVA、PHP、爬虫、APP、小程序、C#、C++、python、数据可视化、大数据、全套文

node.js宿舍管理系统摘要信息化社会内需要与之针对性的信息获取途径，但是途径的扩展基本上为人们所努力的方向，由于角度存在偏差，人们经常能够获取不同类型的信息，这也是技术最为难以攻克的课题。针对宿舍管理系统等问题，对宿舍管理系统进行研究分析，然后开发设计出宿舍管理系统以解决问题。宿舍管理系统主要功能模块主要包括管理员和学生用户及宿管人员三大模块的实现，主要实现功能模块有：系统用户管理、宿舍楼信息
vx_BS81330·2024-02-05 06:39

基于Vue+node.js的宿舍管理系统+80331（免费领源码）可做计算机毕业设计JAVA、PHP、爬虫、APP、小程序、C#、C++、python、数据可视化、大数据、全套文案

node.js宿舍管理系统摘要信息化社会内需要与之针对性的信息获取途径，但是途径的扩展基本上为人们所努力的方向，由于角度存在偏差，人们经常能够获取不同类型的信息，这也是技术最为难以攻克的课题。针对宿舍管理系统等问题，对宿舍管理系统进行研究分析，然后开发设计出宿舍管理系统以解决问题。宿舍管理系统主要功能模块主要包括管理员和学生用户及宿管人员三大模块的实现，主要实现功能模块有：系统用户管理、宿舍楼信息
bysjwa813·2024-02-05 06:04

大数据框架(分区，分桶，分片)

前言在大数据分布式中，分区，分桶，分片是设计框架的重点。此篇就来总结各个框架。
坨坨的大数据·2024-02-05 06:29

人类与AI的优势互补

具体而言：大数据处理与分析：AI拥有强大的数据处理能力，可以在短时间内对海量数据进行挖掘和学习，发现其中隐藏的规律、趋势和关联性，这对于商业智能、科研探索以及预测模型构建等领域具有重大价值。
科学禅道·2024-02-05 06:16

目前哪些手游平台充值返利最高 返利最多的手游平台排行榜

现在的手游折扣平台很多，每家几乎都是不一样的折扣水准，所以说选择一个靠谱的平台是玩家最基本的原则，本期小编就根据现在的大数据统计来盘点几个值得推荐的0.1折手游平台，一起来瞧瞧有哪些吧！
会飞的鱼儿·2024-02-05 06:30

ST算法解决RMQ问题详解(图文并茂,保证看懂)

（RangeMinimum/MaximumQuery）问题，简单说就是求区间最值问题，是求区间最大值或最小值，即范围最值问题，若是简单的单次询问或者是区间长度很短的询问，可以用暴力的方法来实现，但面对大数据的时候此方法必然超时
伟大的拜线段树jjh·2024-02-05 06:14

5/8 杭州全力打造世界名城，一台国之重器“现身”中国

杭州副市长：杭州为打造世界名城，全力推动区块链等产业发展5月7日消息，杭州市委常委、副市长刘德生在演讲中表示，杭州为打造世界名城，正大力推进国际化进程，全力推动大数据、人工智能、区块链等未来产业发展。
铭谦·2024-02-05 05:41

城基生态创始人王继能：做智慧公园先行者

以时代先进的物联网、大数据、云计算、AI、GIS等技术，依托20多年的专业园林经验，赋予传统公园科技化、智慧化。
城基生态·2024-02-05 05:20

Solo 开发者周刊 （第2期）：一站式解决各类办公绘图问题

好文推荐重新思考云原生应用的开发模式当前云原生应用的开发模式在FaaS环境下存在挑战，本文提出一种开发模式构想：“单体式编程，编译时拆分，分布式执行”，旨在简化云应用开发，提升开发效率和应用性能。
Solo 社区·2024-02-05 05:23

Solo开发者社区-重新思考云原生应用的开发模式

当前云原生应用的开发模式在FaaS环境下存在挑战，本文提出一种开发模式构想：“单体式编程，编译时拆分，分布式执行”，旨在简化云应用开发，提升开发效率和应用性能。
Solo 社区·2024-02-05 05:53

周末杂记002

冥冥之中自有天意……181920现在是202112196:59昨天刷龙珠……泄火之后……两点睡着六点左右突然醒了或者就是大数据吧打开淘宝就是相机……明年计划入手一个摄像机存下两万块钱另外今年现在到寒假过年期间把基础打好前天申请创作者没有通过文章质量题目的确不可以也是我问题基本上把当做一个公开的拾柒了
方小相·2024-02-05 05:27

大数据之路—数据架构体系及模型设计

大数据之路—数据架构体系及模型设计一、阿里巴巴数据整合及管理体系二、维度设计1、基本概念2、规范化和反规范化3、维度整合4、维度拆分5、维度变化6、特殊维度三、事实表设计1、事实表特性2、事实表类型3、
长不大的大灰狼·2024-02-05 04:03

安卓与后端服务器交互技术详解：原理、优劣及代码实例分析

一、引言在移动应用开发领域，安卓与后端服务器之间的有效通信是确保数据一致性和应用功能完整性的关键因素。
洪信智能·2024-02-05 04:02

安卓之代码检查工具优劣分析以及应用场景

一、引言代码检查工具在Android应用开发中是不可或缺的一部分，它们旨在提高代码质量、强化编程规范、消除潜在bug、提升应用性能和安全性。
洪信智能·2024-02-05 04:01

中国硬件行业观察（三）

【嵌牛正文】微软依托在云计算、大数据、服务器等方面的优势，市值一度超越了苹果公司成为全球第一。但仅仅是因为一则关于苹果汽车的消息
ATCG_e785·2024-02-05 04:55

船舶监造系统：从设计到实现的全程解析

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-02-05 04:59

探秘本庄村果园预售系统的技术之旅

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-02-05 04:58

笔记分享网站：功能、架构与实现细节大揭秘

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-02-05 04:58

Java与SpringBoot：实现高效车险理赔信息管理系统

专业做Java、Python、微信小程序、安卓、大数据、爬虫、Golang、大屏等实战项目。⛽⛽实战项目：有源码或者技术上的问题欢迎在评论区一起讨论交流！
计算机编程指导师·2024-02-05 04:26

«孤独»

正因为现在的网络技术发达，社交软件无数大数据的预测所以我们处于这样的时代所以我们更要理解孤独的意义正因为
不长心·2024-02-05 04:14

布隆过滤器（BloomFilter）原理及如何实现（使用Redis的bitmap数据结构）

2、布隆过滤器（BloomFilter）原理布隆过滤器是一个初始值为零的bit数组和多个hash函数组成，本质是判断某个数是否在大数据集合中。它能够高效
知其_所以然·2024-02-05 03:25

基于大数据模型，营销型网站建设必备的十大要点

在数字化时代，大数据已经成为企业决策的重要依据。营销型网站作为企业市场推广的重要工具，如何利用大数据模型进行优化，提高网站的效果和转化率呢？
福兴信息科技·2024-02-05 03:54

Android 横屏应用开发如何隐藏左边黑色边缘

最近公司开发一个横屏应用的项目，Phone和Pad一套代码编译，需要考虑到全局横屏状态下的应用，起初竖屏的时候代码是没问题的，可是到切换横屏遇到了黑边问题，先来看看竖屏的时候怎么写的setContentView之前设置getWindow().clearFlags(WindowManager.LayoutParams.FLAG_TRANSLUCENT_STATUS);getWindow().getD
落魄的Android开发·2024-02-05 03:48

首次披露：快手是如何做到百万观众同场看直播仍能秒开且不卡顿的？

快手拥有5亿注册用户，单个直播间人数峰值已经超过180万，他们针对海量用户，基于大数据技术，在首屏和流畅度优化上做了大量的探索与实践。快手直播是如何设计全链路质量监控方案、如何
音视频开发老马·2024-02-05 03:08

超百万观众同场看直播秒开不卡顿，快手是如何做到的？|首次披露

\\快手拥有5亿注册用户，单个直播间人数峰值已经超过180万，他们针对海量用户，基于大数据技术，在首屏和流畅度优化上做了大量的探索与实践。快手直播是如何设计全链路质量监控方案、如何
sas???·2024-02-05 03:07

Ubuntu下Rust开发环境搭建

但在实际应用开发过程中，我们还是会使用IDE编写、调试程序源代码以提升生产率。
没想好_08·2024-02-05 02:03

【HarmonyOS应用开发】ArkUI 开发框架-进阶篇-Video组件的使用（十）

以视频功能为例，在应用开发过程中，我们需要通过ArkUI提供的Video组件为应用增加基础的视频播放功能。借助Video组件，我们可以实现视频的播放功能并控制其播放状态。常见
断水流大撕兄·2024-02-05 02:25

计算机设计大赛 深度学习 大数据 股票预测系统 - python lstm

循环神经网络2.1LSTM诞生2如何用LSTM做股票预测2.1算法构建流程2.2部分代码3实现效果3.1数据3.2预测结果项目运行展示开发环境数据获取最后0前言优质竞赛项目系列，今天要分享的是深度学习大数据股票预测系统该项目较为新颖
iuerfee·2024-02-05 02:25

【HarmonyOS 4.0 应用开发实战】ArkTS 快速入门

WeChat：hmmwx53️系列专栏：️零基础学Java——小白入门必备重识C语言——复习回顾计算机网络体系———深度详讲HCIP数通工程师-刷题与实战微信小程序开发——实战开发HarmonyOS4.0应用开发实战
落798.·2024-02-05 02:25
上一页 33 34 35 36 37 38 39 40 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他