SCALA 第18页

Spark多文件输出的两种形式

#所需环境版本jdk=1.8scala.version=2.11.0spark.version=2.3.2hadoop.verison=2.7.2importorg.apache.hadoop.io.

一只咸鱼va·2023-11-26 09:58

scala中F[_]中的_是什么意思

在Scala中，F[_]表示一个高阶类型（Higher-KindedType）或类型构造器（TypeConstructor）。

血太少了·2023-11-26 07:20

图书管理系统源码，图书管理系统开发，图书借阅系统源码SqlHelper数据库访问操作方法简述

SqlHelper是封装了数据库操作方法的类库，使用它我们可以链接数据库操作数据库表数据增删改查，其中主要SqlConnection,ExecuteNonQuery，ExecuteScalar，ExecuteDataTable

mabanbang·2023-11-26 04:46

2311skia,02绘制图片

Skia绘图的流程1,API用法(1)drawBitmapvoiddrawBitmap(constSkBitmap&bitmap,SkScalarleft,SkScalartop,constSkPaint

fqbqrr·2023-11-26 01:26

Scala代写：CSE262 Table Driven Scanner代写R编程、R语言程序帮写

代写Scala作业，练习Scala的编程设计。

wenhuyao·2023-11-25 20:16

基于centos7的hadoop2.7、zookeeper3.5、hbase1.3、spark2.3、scala2.11、kafka2.11、hive3.1、flume1.8、sqoop1.4组件部署

部署前准备修改主机名1、修改主机名（6台机器都要操作,以Master为举例）hostnamectlset-hostnameMaster（永久修改主机名）reboot（重启系统）修改hosts将第一行127.0.0.1xxxx注释掉，加上：195.168.2.127master195.168.2.128slave1195.168.2.129slave2确认网卡信息vi/etc/sysconfig/n

luoz_python·2023-11-25 19:42

Scala深海奇遇记-当case class遇到了Spark的聚集函数

自从知道有caseclass这个东西以后，一直都比较常用这个东西。但是，最近在测试的时候，突然发现，其实这个东西并不简单，它导致了一个看起来很无厘头的错误，并且花了我两天的时间来调试。在这篇文章里，我会详细记录调试的过程，以及结论。致谢在调试的过程中，得到了我们Hadoop组老大，项目组老大，以及其他同事的深度支持与帮助，非常感谢他们。结论先说结论。如果有朋友不感兴趣，不想深究原理，只是想知道怎么

AlstonWilliams·2023-11-25 18:58

在dss中运行scala任务报java.lang.NullPointerException: null

版本信息：dss:1.1.1linkis1.1.1hadoop:3.1.3hive:3.1.2spark:3.0.0修改文件：SparkScalaExecutor.scala修改文件内容如下：上图红色标记内容

heheha_zj·2023-11-25 18:18

MySQL存储Kafka偏移量-快速入门Scala篇

所需pom依赖org.scalikejdbcscalikejdbc_2.112.5.2org.scalikejdbcscalikejdbc-config_2.112.5.2在Mysql中创建表CREATETABLE`offset`(`groupId`varchar(255)DEFAULTNULL,`topic`varchar(255)DEFAULTNULL,`partition`int(11)DE

Climber_ty·2023-11-25 17:12

Opencv 在图像上进行标注（画框+写字）

通常要用矩形框框选出目标的位置，并在旁边附上标签在opencv实现这一目标主要用到两个函数，rectangle()和putText()函数原型：voidrectangle(Mat&img,Rectrec,constScalar

璇焱如柳·2023-11-25 14:03

scala 系列之 16scala 的柯理化

20柯理化柯里化（Currying）是把接受多个参数的函数变换成接受一个单一参数(最初函数的第一个参数)的函数，并且返回接受余下的参数且返回结果的新函数的技术。是把接受多个参数的函数变成接受一个参数的函数；柯理化的两种表现形式：以加法函数为例：defcurring(x:Int)(y:Int)=x+ydefcurring(x:Int)=(y:Int)=>x+y在柯理化形式的基础上，固定一个参数，传入

海牛大数据_青牛老师·2023-11-25 13:11

opencv中的全部绘图函数（文字，线，矩形，圆，椭圆）

voidputText(Mat&img,//原图conststring&text,//带绘制文字Pointorg,//文字绘制的左下角intfontFace,//字体类型doublefontScale,//字体大小Scalarcolor

神域炎阳·2023-11-25 09:19

用opencv绘制一个箭头，沿着圆运动并留下运动轨迹（c++）

usingnamespacecv;intmain(){//创建一个黑色背景的图像，大小为400*400Matimage(400,400,CV_8UC3,Scalar(0,0,0));//设置箭头的初始位置和方向

大风吹~~~~~·2023-11-25 09:12

flask-sqlalchemy输出json格式数据

flask-sqlalchemy查询数据：user=db.session.execute(db.select(User).filter_by(username=username)).scalar_one

一叶晨风·2023-11-25 08:03

【曹工杂谈】Maven IOC容器的下半场：Google Guice

Guice的应用也还比较广泛，以下轮子中（仅部分）都有它活跃的身影：google内部scalatestTestNGCaffeineCacheSpringSecurityConfigelasticsearchjenkins

逐日者·2023-11-25 08:12

Eclipse集成scala-maven-plugin插件

1.概述scala-maven-plugin这个插件是用来让maven能够编译、测试、运行scala项目的，使用文档参考：scala-maven-plugin2.使用插件net.alchim31.mavenscala-maven-plugin3.2.0scala-compile-firstprocess-resourcesadd-sourcecompilescala-test-compilepro

南归北隐·2023-11-25 08:58

Flume采集Kafka并把数据sink到OSS

安装环境Java环境,略(Flume依赖Java)Flume下载,略Scala环境,略(Kafka依赖Scala)Kafak下载,略Hadoop下载,略(不需要启动,写OSS依赖)配置Hadoop下载JindoSDK

不住在隔壁的老王·2023-11-25 07:34

01-详细介绍函数式接口和Lambda表达式语法

该接口可以包含其他非抽象方法)接口上使用@FunctionalInterface注解可以验证该接口是否为函数式接口,javadoc生成的文档时也会保留该注解,若接口中有多个抽象方法编译器会报错随着Python,Scala

echo 云清·2023-11-24 20:41

HTML5之SVG的使用

SVG指可伸缩矢量图形(ScalableVectorGraphics)；SVG用于定义用于网络的基于矢量的图形；SVG使用XML格式定义图形；SVG图像在放大或改变尺寸的情况下其图形质量不会有损失；SVG

暖A暖·2023-11-24 20:29

vue使用SVG矢量图

SVG（ScalableVectorGraphics，可缩放矢量图形）是一种使用XML标记语言描述二维图形和图形应用的开放标准，其核心特性是可缩放性，即使放大缩小都不会失去清晰度和质量。

我的椰子啊·2023-11-24 19:53

乐字节-Java8核心特性实战-Lambda表达式

很多语言（Groovy、Scala等）从设计之初就支持Lambda表达式。但是java中使

乐字节·2023-11-24 19:52

如何在vue项目中引入svg图标

概述svg，即ScalableVectorGraphics，可缩放矢量图形。相对于jpg，png图标，svg可以在任意分辨率下保证不会模糊，即便是网页缩放了。

别说小李·2023-11-24 19:49

Vue新项目中如何使用SVG矢量图

SVG指可伸缩矢量图形(ScalableVectorGraphics)SVG用来定义用于网络的基于矢量的图形SVG使用XML格式定义图形SVG图像在放大或改变尺寸的情况下其图形质量不会有所损失SVG是万维网联盟的标准二

run-Ameng·2023-11-24 19:18

Java与Scala中的偏函数与偏应用函数

在Java和Scala中，偏函数（PartialFunction）和偏应用函数（PartialApplicationFunction）是函数式编程中常用的概念。它们可以帮助简化代码并增加代码的可读性。

HackLogic·2023-11-24 18:11

【Spark源码分析】事件总线机制分析

顧棟·2023-11-24 16:02

Doris系列之高级功能-Rollup操作

Doris系列注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume

陈万君Allen·2023-11-24 16:31

Doris系列之物化视图操作

Doris系列注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume

陈万君Allen·2023-11-24 16:31

kafka常见面试问题（1）

这个消息传递应用程序是用“scala”编码的。基本上，这个项目是由Apache软件启动的。Kafka的设计模式主要基于事务日志设计。问题2：Kafka中有哪几个组件?

Computer_hello·2023-11-24 15:18

Rust语言入门教程(四) - 标量数据类型

标量类型(ScalarTypes)在Rust中，一共有4中标量类型，也就是基本数据类型，分别是：整型（Integers）浮点型（Floats）布尔型（Boolean）字符型（Characters）整型无符号整型

eponia·2023-11-24 14:19

【2019-06-04】scala抽象成员

不完全定义的类或特质的成员为抽象成员。抽象成员将被声明类的子类实现。四种抽象成员：val、var、方法及类型抽象类型val定义形式：//指定了val的名称和类型，不指定值。valinitial:String//值必须由子类的具体val定义提供classConcreteextendsAbstract{typeT=Stringdeftransform(x:String)=x+xvalinitial="

BigBigFlower·2023-11-24 12:43

Scala正则表达式语法以及应用大全

众所周知，在程序开发中，难免会遇到需要匹配、查找、替换、判断字符串的情况发生，而这些情况有时又比较复杂，如果用纯编码方式解决，往往会浪费程序员的时间及精力。因此，学习及使用正则表达式，便成了解决这一矛盾的主要手段。正则表达式是一种可以用于模式匹配和替换的规范，一个正则表达式就是由普通的字符（例如字符a到z）以及特殊字符（元字符）组成的文字模式，它用以描述在查找文字主体时待匹配的一个或多个字符串。正

天ヾ道℡酬勤·2023-11-24 11:53

思考: 为什么 Flink 要弃用Scala API呢？

1.问题描述最近在学习FlinkAPI的时候，发现官网声明要废弃ScalaAPI，但是为什么呢？

广阔天地大有可为·2023-11-24 11:22

scala IO流和正则表达式练习

练习需求：现有如下日志信息，请使用Scala正则表达式解析如下信息-日志级别-日期-请求URI分析需求：1、需要将文件中的日志信息使用scalaI/O流导入2、使用正则表达式进行解析，然后输出成三个部分代码实现

白修修·2023-11-24 11:51

scala正则表达式获取匹配到的字符串

正则表达式获取匹配到的字符串//需要匹配出来的地方用括号括起来valpattern="""(.*)\[(.*)\]""".r//新建一个正则表达式valpattern(ele,str)="fff[ascdrewr]"println(s"$ele,$str")这样有个问题，当匹配不到会抛异常image.png使用模式匹配valpattern="""(.*)\[(.*)\]""".r"fff"matc

weixin_33897722·2023-11-24 11:50

大数据之使用Flink消费Kafka中topic为ods_mall_data的数据，根据数据中不同的表将数据分别分发至kafka的DWD层

重难点分析总结前言本题来源于全国职业技能大赛之大数据技术赛项赛题-电商数据处理-实时数据处理注：由于设备问题，代码执行结果以及数据的展示无法给出，可参照我以往的博客其中有相同数据源展示题目：提示：以下是本篇文章正文内容，下面案例可供参考（使用Scala

约定Da于配置·2023-11-24 11:49

Day77_Flink(三）Flink时间语义和水印

课程大纲课程内容学习效果掌握目标时间语义EventTime掌握IngestionTime掌握ProcessingTime掌握水印水印掌握一、时间语义scala的集合分为了两类，一类是可变的集合（集合可以执行增删改查操作

dogedong·2023-11-24 11:49

Flink部署安装及其WorldCount执行

Flink是一个针对流数据和批数据的分布式处理引擎，代码主要是由Java实现，部分代码是Scala。它可以处理有界的批量数据集、也可以处理无界的实时数据集。对Flink而言，其所要处理的主要场景就是流

IT瓜哥-杨得朝·2023-11-24 11:18

Flink State and Checkpoint、Scala中获取类对象、通过checkpoint来恢复之前的状态、process...

目录FlinkStateandCheckpointStateValueStateCheckpoint通过checkpoint来恢复之前的状态1、从Flinkweb页面2、通过flink命令StateListStateReducingStateFlinkStateandCheckpointFlink通过State和Checkpoint来实现容错和数据处理的唯一一次State丰富的StateAPI。V

赤兔胭脂小吕布·2023-11-24 11:18

Scala——正则表达式

1.当字符串中有特殊符号时方法一、通过转义符\转义valstr="{\“id”:\“12”,\“friends\”:{\“name\”:\“zs\”,\“age\”:\“40\”}}"println(str)//{“id”:“12”,“friends”:{“name”:“zs”,“age”:“40”}}方法二、"""…“”“来转义字符串valstr2=”""{“id”:“12”,“friends”

数据孤岛·2023-11-24 11:17

scala正则表达式

一、scala支持多种正则表达式解析方式String.matches()方法正则表达式模式匹配scala.util.matching.RegexAPIString.matches()方法案例演示：println

Smile to everyday·2023-11-24 11:17

scala 正则表达式匹配_Scala教程–正则表达式，匹配

scala正则表达式匹配前言这是面向初学者的Scala教程的第5部分。该博客上还有其他文章，您可以在我正在为其创建的计算语言学课程的链接页面上找到这些链接和其他资源。

danpie3295·2023-11-24 11:16

Scala教程–正则表达式，匹配

前言这是面向初学者的Scala教程的第5部分。该博客上还有其他文章，您可以在我正在为其创建的计算语言学课程的链接页面上找到这些链接和其他资源。

danpie3295·2023-11-24 11:15

scala 正则表达式_Scala正则表达式示例

scala正则表达式Regularexpressionsarepatternmatchingutilitiesfoundinmostoftheprogramminglanguages.Theydefineagenericpatterntomatchasequenceofinputcharacters.Regexarewidelyusedintextparsingandsearch

cunchi4221·2023-11-24 11:45

Scala学习笔记（四） ——模式匹配、偏函数、运算符、异常、隐式类、scala高级类型、scala正则表达式

Scala拓展Scala拓展一、Scala模式匹配1、match表达式2、样例类的模式匹配3、非样例类的模式匹配4、偏函数5、scala注解方法6、运算符二、scala正则表达式1、matches方法2

throws-Exception·2023-11-24 11:14

scala IO 正则日志解析

日志INFO2016-07-25requestURI:/c?app=0&p=1&did=18005472&industry=469&adid=31INFO2016-07-25requestURI:/c?app=0&p=2&did=18005472&industry=469&adid=31INFO2016-07-25requestURI:/c?app=0&p=1&did=18005472&indus

KingWeiGG·2023-11-24 11:43

scala使用Gson解析数组

完整代码在最后哦，可以通过目录跳转文章目录一、背景二、解决方案1.高版本的解法(2.8.7)2.低版本的解法(2.8.2)3.直接解析为实体类三、总结1.在scala中获取类类型2.解决json字段名和实体类字段名不匹配的问题四

zhangbaqing·2023-11-24 11:12

Scala语言基础

1.Scala基础知识1.1基本数据类型和变量基本数据类型包括Byte、Short、Int、Long、Char、Float、Double、String、Boolean。

黄连福·2023-11-24 10:42

scala正则表达式使用

正则表达式是一种针对于字符串的操作，主要功能有匹配、切割、替换和获取的作用，在Scala中正则也是被频繁使用的方法（regex.r表示为正则表达式）1、匹配Scala支持多种正则表达式解析，主要包括下面三种

Code_LT·2023-11-24 10:42

scala 实现表达式解析

表达式解析importorg.junit.Testimportscala.collection.mutableclassExprTestCase{privatevalorderSource="source

jiayeliDoCn·2023-11-24 10:11

为什么 Flink 抛弃了 Scala

曾经红遍一时的Scala想当初Spark横空出世之后，Scala简直就是语言界的一颗璀璨新星，惹得大家纷纷侧目，连Kafka这类技术框架也选择用Scala语言进行开发重构。

shengjk1·2023-11-24 10:40

推荐频道

SCALA