大数据技术-Scala

最In干货大赏，SDCC 2017·深圳站完整版日程大放送

2017年6月10-11日，SDCC2017·深圳站火热开启，拥有互联网应用架构实战峰会、大数据技术实战峰会两大峰会，秉承干货实料的内容原则，邀请业内顶尖的架构师和数据技术专家，共话高可用/高并发/高性能的系统架构设计
仲培艺·2024-01-02 07:00

Intellij之Spark Scala开发环境搭建

https://www.jianshu.com/p/200473f264bchttps://blog.csdn.net/a2011480169/article/details/52712421参考博客：1、http://wwwlouxuemingcom.blog.163.com/blog/static/20974782201321953144457/2、http://blog.csdn.net/s
数据萌新·2024-01-02 06:27

Apache Flink连载（二十三）：Flink HA - Flink基于Yarn HA

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-02 04:42

Apache Doris (五十七）： Doris - Runtime Filter

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-02 04:42

Apache Flink连载（二十二）：Flink HA - Flink基于Standalone HA

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-02 04:11

交通 | 司乘匹配：基于增量成本计算的优化算法

今天解读的这篇文章是由东南亚打车公司Grab在2021年发表于数据库顶会VLDB[1]，并被评选为当年的BestScalableDat
运筹OR帷幄·2024-01-02 02:11

大数据软件开发软件架构设计思路

文章目录大数据技术和传统的软件开发技术在架构思路上有很大不同如何解决PB级数据进行计算的问题呢？移动计算程序到数据所在位置进行计算是如何实现的呢？
善守的大龙猫·2024-01-02 02:45

云宏大讲坛 | Ceph分布式存储高性能设计

当代网络，云计算、大数据技术的应用使得数据呈指数增长，每天增长达百万兆背景字节的数据量是常见的情况。我们迫切需要一种更有效的解决方案，如可伸缩扩展的软件定义存
chennbwin·2024-01-02 01:48

用idea开发我们的spark项目

那么，你有必要花点时间，瞧一瞧这篇文章，正所谓，“工欲善其事，必先利其器”，它将指导你一步一步用idea开发出我们的spark程序，用maven编译打包我们的Scala（Scala与Java混合）代码。
NikolasNull·2024-01-02 00:46

Visual Transformer (ViT)模型详解

1.1Vit的由来ViT是2020年Google团队提出的将Transformer应用在图像分类的模型，虽然不是第一篇将transformer应用在视觉任务的论文，但是因为其模型“简单”且效果好，可扩展性强（scalable
智慧医疗探索者·2024-01-01 20:24

“Java已死、前端已凉”是真相还是在贩卖焦虑

虽然面临着新兴技术如Kotlin、Scala等的竞争，但Java的广泛应
清霜辰·2024-01-01 18:20

大数据技术与应用开发赛项笔记

各种启动命令修改mysql数据库编码：alterdatabaseshtd_resultCHARACTERSETutf8;hadoop:start-all.shhive服务：hive--servicemetastorehive客户端：hivedolphinscheduler服务：./bin/dolphinscheduler-daemon.shstartstandalone-server浏览器访问地址
南城守护·2024-01-01 17:56

35--JDK新特性

1.1Java的REPL工具：jShell命令JDK9的新特性Java终于拥有了像Python和Scala之类语言的REPL工具（交互式编程环境，read-evaluate-print-l
憨憨浩浩·2024-01-01 16:07

Spark内容分享(三)：Spark - 介绍及使用 Scala、Java、Python 三种语言演示

目录一、Spark1.Spark的优点：2.Spark中的组件3.Spark和Hadoop对比4.Spark运行模式二、SparkWordCount演示1.Scala语言2.Java语言3.Python
之乎者也··2024-01-01 13:19

ssm/php/node/python大数据与智慧工程系会议管理系统

本系统（程序+源码）带文档lw万字以上文末可领取本课题的JAVA源码参考系统程序文件列表系统的选题背景和意义选题背景：随着科技的不断发展，大数据技术已经成为了当今社会的一个热门话题。
花花 程序设计·2024-01-01 13:38

opencv 各种输出格式

usingnamespacecv;intmain(intargc,char**argv){//创建一个矩阵，填充范围由randu()函数的第二个参数和第三个参数确定MatR=Mat(3,2,CV_8UC3);randu(R,Scalar
MyyyZzz·2024-01-01 10:50

【2023Hadoop大数据技术应用期末复习】填空题题型整理

大数据的4V特征包含（）（）（）（）答案：大量、多样、高速、价值Hadoop三大组件包含（）（）（）答案：HDFS、MapReduce、YarnHadoop2.x版本中的HDFS是由（）（）（）组成答案：NameNode、DataNode、SecondaryNameNodeHadoop发行版本分为答案：开源社区版、商业版目前Hadoop发布的版本主要有（）（）（）答案：Hadoop1.x、Hado
Lacszer·2024-01-01 10:23

【2023Hadoop大数据技术应用期末复习】选择题题型整理

文章目录单选题多选题单选题创建虚拟机的过程中，网络类型建议选择？A.使用桥接网络B.使用网络地址转换（NAT）C.使用仅主机模式网路D.不适用网路连接答案：B使用什么命令对jdk压缩包解压？A.tar-zxvfjdk-8u141-linux-x64.tar.gzB.zip-zxvfjdk-8u141-linux-x64.tar.gzC.uzipjdk-8u141-linux-x64.tar.gzD
Lacszer·2024-01-01 09:51

ML Design Pattern——Keyed Predictions

Intoday'sworldofmassivedatasetsandreal-timedecision-making,machinelearning(ML)systemsfaceuniquechallengesintermsofscalabilityandefficiency.Toaddressthesechallenges
卢延吉·2024-01-01 08:58

计算机毕业设计hadoop+spark+hive知识图谱酒店推荐系统 酒店数据分析可视化大屏 酒店爬虫 高德地图API 酒店预测系统 大数据毕业设计

中旅游数据进行数据清洗，使用高德API计算地理信息，最终转为.csv文件上传hdfs;3.hive建库建表导入.csv文件作为数据集；4.一半指标使用离线hive_sql分析完成，一半指标使用实时Spark之Scala
计算机毕业设计大神·2024-01-01 06:52

Flink 内容分享(二十七)：Hadoop vs Spark vs Flink——大数据框架比较

众所周知，HadoopvsSparkvsFlink是快速占领IT市场的三大大数据技术，大数据岗位几乎都是围绕它们展开。本文，将详细介绍三种框架之间的区别。
之乎者也··2024-01-01 05:52

大数据应用开发2-Scala语言各个环境配置

一、首先安装JDK1.8版本(简单过一下)1.下载与安装下载Java1.8地址：JavaDownloads|Oracle中国点击跳转（下载需要登录甲骨文账号）下载完成运行修改安装目录（两个都要改）复制第一次修改的安装目录2.配置环境变量在此电脑图标上右键，打开属性，点开高级系统设置——》环境变量在系统环境变量里新建——变量名：JAVA_HOME变量值就是刚刚复制的地址再双击PATH编辑，新建%JA
争渡争渡！·2024-01-01 00:38

你们还在用 Scala元组Tuple234..? Outer啦

为什么这么说呢，难道我自己多年使用的方式错了嘛，是的，你没错，我错了，哈哈，主要原因是使用Tuple的时候容易搞错对象，Tuple2的时候还知道第一个参数跟第二个参数的意思，后面多来个几参数你会记得_1._2._3._4代表的意思是什么吗?代码结构也不好维护，所以请结束使用Tuple吧请开始你的表演正常使用Tuplevallist=Array((1,2,3,4),(5,6,7,8))list.fi
kikiki4·2023-12-31 23:39

大数据 - Hadoop系列《二》- Hadoop组成

）：编辑2.DataNode(dn)：3.SecondaryNameNode(2nn)：3.2YARN架构概述3.3MapReduce架构概述3.4HDFS、YARN、MapReduce三者关系3.5大数据技术生态体系
王哪跑nn·2023-12-31 22:50

利用已有的大数据技术，如何构建机器学习平台

机器如何学习？人脑具备不断积累经验的能力，依赖经验我们便具备了分析处理的能力，比如我们要去菜场挑一个西瓜，别人或者自己的经验告诉我们色泽青绿、根蒂蜷缩、纹路清晰、敲声浑响的西瓜比较好吃。我们具备这样的能力，那么机器呢？机器不是只接收指令，处理指令吗？和人脑类似，可以喂给机器历史数据，机器依赖建模算法生成模型，根据模型便可以处新的数据得到未知属性。以下便是机器学习与人脑归纳经验的类别图：平台设想在同
Alukar·2023-12-31 22:12

Node.js是什么？

官网对nodejs的描述Node.jsisaplatformbuiltonChrome'sJavaScriptruntimeforeasilybuildingfast,scalablenetworkapplications.Node.jsusesanevent-driven
LuckyJin·2023-12-31 21:28

Kafka_01_Kafka初识

Kafka_01_Kafka初识Kafka基础概念延迟任务KafkaKafka:ZooKeeper协调的分布式消息系统基于Scala语言编写的高性能、多分区、多副本Kafka高性能的原因：页缓存、顺序IO
爱喝可乐的w·2023-12-31 20:48

30个最受欢迎的数据挖掘面试问题答案-第1部分

微信搜索：大数据技术工程师）大数据技术工程师30顶级数据挖掘面试问题答案Q1。数据挖掘的基础是什么？通常，我们将其用于长期的研究和产品开发过程。
栀子花_ef39·2023-12-31 18:54

数据湖三剑客，大数据时代的新范式？

随着互联网高速发展，大数据技术快速发展和迅速迭代，降低了用户处理海量数据的门槛，越来越多的应运场景出现在我们的身边存储和处理需求越来越多样化，逐渐呈现出数据仓库往数据湖方向发展、批处理往流式处理发展、本地部署往云模式发展的趋势
疯码牛·2023-12-31 15:33

2021-07-31

浅谈工业互联网及大数据技术专业建设大海_WH工业互联网学习1.前言习近平总书记就实施国家大数据战略强调：要深入实施工业互联网创新发展战略，系统推进工业互联网基础设施和数据资源管理体系建设等。
大海WH·2023-12-31 13:00

scala高阶函数---闭包-控制抽象-尾递归-while-惰性函数

packagescala01objectscala08_closing{defmain(args:Array[String]):Unit={//TODO闭包概念//需求：两数之和defsumXY(x:Int
芝士小熊饼干·2023-12-31 11:04

scala---面向对象（1）

//TODOb包对象作用综合管理当前包下的共享资源//TODO包对象当前包下只能有一个包对象一一对应packageobjectscala06{//属性valpackagename:String="scala06
芝士小熊饼干·2023-12-31 11:04

scala函数式编程--第三种用法

packagechapter05objectscala06_FunctionHigh2{defmain(args:Array[String]):Unit={/*高阶函数第二种用法函数可以作为一个参数进行传递
芝士小熊饼干·2023-12-31 11:33

scala--面向对象（2）

packagescala06objectscala07_ABSClass{//抽象属性抽象方法defmain(args:Array[String]):Unit={//抽象类用法//实例化子类valstudent0
芝士小熊饼干·2023-12-31 11:31

【毕业设计/课程设计】基于Python的在线订餐系统设计与实现（源码+文档） Django框架 外卖系统

开发工具1、数据库：MySQL2、开发工具：PyCharm等python开发工具均可技术简介系统采用Python语言开发，数据库使用MySql，框架采用Django摘要本文基于大数据技术，使用Python
程序员王大爷·2023-12-31 11:29

大数据大价值

可以看出，在推动大数据企业应用方面，真正看到大数据潜在商业价值的企业比大数据技术厂商还要着急。例如IT经理网曾经报道过沃尔玛大数据实验室直接参与到大数据工具的开发和开源工作中。但是在国
X_dmword·2023-12-31 11:50

解锁大数据世界的钥匙——Hadoop HDFS安装与使用指南

因此，大数据技术应运而生，成为解决海量数据存储和处理问题的重要工具。在大数据技术中，Hadoop是应用最广泛的框架之一。作为一个开源的
凛鼕将至·2023-12-31 07:25

【Azure Developer】Azure Automation 自动化账号生成的时候怎么生成连接 与证书 (Connection & Certificate)

AzureAutomation：TheAzureAutomationserviceprovidesahighlyreliableandscalableworkflowexecutionenginetoautomatefrequentlyrepeatedmanagementtasks.Theprocessesareautomatedthroughrunbooks
云中路灯·2023-12-31 07:32

SpringAMQP的使用方式

ActiveMQRabbitMQRocketMQKafka几种常见MQ的对比：RabbitMQActiveMQRocketMQKafka公司/社区RabbitApache阿里Apache开发语言ErlangJavaJavaScala
Winter.169·2023-12-31 07:51

从0开始学大数据01-大数据技术发展史：大数据的前世今生

预习01|大数据技术发展史：大数据的前世今生在正式落地谈技术之前，我先花一些篇幅给你讲讲大数据技术的发展史，因为这对于你理解技术来说至关重要。
源码头·2023-12-31 06:49

总结程序员这些年的数据应用发展史：从搜索引擎到人工智能

我们对大数据技术的使用也经历了一个发展过程。从最开始的Google在搜索引擎中开始使用大数据技术，到现在无处不在的各种人工智能应用，伴随着大数据技术的发展，大数据应用也从曲高和寡走到了今天的遍地开花。
taya_a·2023-12-31 06:19

预习 01 | 大数据技术发展史：大数据的前世今生

今天我们常说的大数据技术，其实起源于Google在2004年前后发表的三篇论文，也就是我们经
_Rye_·2023-12-31 06:18

从0开始学大数据02-大数据应用发展史：从搜索引擎到人工智能

预习02|大数据应用发展史：从搜索引擎到人工智能上一期我们聊了大数据技术的发展历程，事实上，我们对大数据技术的使用同样也经历了一个发展过程。
源码头·2023-12-31 06:18

预习 02 | 大数据应用发展史：从搜索引擎到人工智能

上一期我们聊了大数据技术的发展历程，事实上，我们对大数据技术的使用同样也经历了一个发展过程。
_Rye_·2023-12-31 06:48

【文末抽奖】大数据应用发展史：从搜索引擎到人工智能

来源|InfoQ作者丨李智慧我们对大数据技术的使用也经历了一个发展过程。
LinkTime_Cloud·2023-12-31 05:43

大数据应用发展史：从搜索引擎时代到机器学习时代

文章目录搜索引擎时代数据仓库时代数据挖掘时代机器学习时代小结大数据技术的使用经历了一个发展过程从最开始的Google在搜索引擎中开始使用大数据技术，到现在无处不在的各种人工智能应用，伴随着大数据技术的发展
善守的大龙猫·2023-12-31 05:11

【MAE】一种高效的自监督训练器

MAEPaper:MaskedAutoencodersAreScalableVisionLearnersAuthor:KaimingHe,XinleiChen,SainingXie,YanghaoLi,
菜鸡不叫·2023-12-31 04:04

【遇见Doris】Apache Doris (incubating) 0.11.0新版本预览线下沙龙

此次Doris有幸得到中国信通院云大所、大数据技术标准推进委员会的支持，在中国信通院举行了0.11.0新版本预览线下沙龙。
ApacheDoris·2023-12-31 03:45

【遇见Doris】Apache Doris 在京东广告平台的应用

6月29日，Doris有幸得到中国信通院云大所、大数据技术标准推进委员会的支持，在中国信通院举行了0.11.0新版本预览线下沙龙。各位嘉宾都带来了干货满满的分享。
ApacheDoris·2023-12-31 03:44

【遇见Doris】Apache Doris Parquet文件读取的设计与实现

6月29日，Doris有幸得到中国信通院云大所、大数据技术标准推进委员会的支持，在中国信通院举行了0.11.0新版本预览线下沙龙。各位嘉宾都带来了干货满满的分享。
ApacheDoris·2023-12-31 03:44
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他