大数据技术-Scala

Apache Spark架构与特点

它可以处理批量数据和流式数据，并提供了一个易用的编程模型，使得开发人员可以使用Scala、Java、Python等编程语言来编写程序。
OpenChat·2024-01-27 23:35

FPN结构

在FasterR-CNN中就用到FPN结构了，FPN结构对网络的好处在于：针对目标检测任务，cocoAP(IoU从0.5~0.95的均值)提升2.3个点，pascalAP提升3.8个点。
酸酸甜甜我最爱·2024-01-27 21:42

事件驱动架构与跨域数据共享：实现高效的数据传输与处理

1.背景介绍事件驱动架构和跨域数据共享是现代大数据技术中的重要概念，它们为实现高效的数据传输和处理提供了基础设施。事件驱动架构是一种异步、基于消息的系统架构，它允许系统在不同组件之间传递和处理事件。
OpenChat·2024-01-27 19:31

【自然语言处理的发展】

随着深度学习和大数据技术的不断进步，NLP在近年来取得了显著的突破。本文将探讨NLP技术的发展历程、最新技术进展以及未来展望。随着深度学习和大数据技术的进步，自然语言处理取得了显著的进步。
数据科学与艺术的贺公子·2024-01-27 19:22

【数据可视化技术】数据可视化概述&工具

OLAP可视化工具（三）Web可视化技术前言通过图表可视化分析数据结果，不仅能让数据更加生动、形象，便于用户发现数据中隐含的规律与知识，而且这也是软件工程师与数据工程师合作的最终工作成果，有助于帮助用户理解大数据技术的价值
Francek Chen·2024-01-27 16:39

【Scala-spark.mlib】分布式矩阵——分布式计算的基石与利器

分布式矩阵1.mlib.linalg.distributed包2.DistributedMatrix特质3.BlockMatrix类4.CoordinateMatrix类5.IndexedRowMatrix类6.RowMatrix类7.小结1.mlib.linalg.distributed包  矩阵计算是很多科学计算的重要步骤，而分布式矩阵存储则是分布式计算的基础。根据不同的计算需求，需要将用于计
JimmyShis·2024-01-27 10:12

2021-03-07

==>分布式应用程序协调服务·Flume=====>日志收集系统·Hive=====>基于Hadoop的数仓工具·HBase=====>分布式、面向列的开源数据库·Sqoop=====>数据传递工具·Scala
残月冷无声·2024-01-27 10:39

神经网络进一步学习

表示神经网络层数，表示该层的神经元个数，将神经网络的分类定义为两种情况：二类分类和多类分类二类分类：K类分类：，表示分到第i类回顾逻辑回归问题中我们的代价函数为：在逻辑回归中我们只有一个输出变量，又称标量（scalar
时间邮递员·2024-01-27 07:21

java scala maven 混合打包插件

org.apache.maven.pluginsmaven-compiler-plugin3.5.11.81.8UTF-8compilecompilenet.alchim31.mavenscala-maven-plugin3.2.1scala-compile-firstprocess-resourcesadd-sourcecompile-target
jiayeliDoCn·2024-01-27 07:47

大数据技术之 Flink-CDC

第1章CDC简介1.1什么是CDCCDC是ChangeDataCapture（变更数据获取）的简称。核心思想是，监测并捕获数据库的变动（包括数据或数据表的插入、更新以及删除等），将这些变更按发生的顺序完整记录下来，写入到消息中间件中以供其他服务进行订阅及消费。1.2CDC的种类CDC主要分为基于查询和基于Binlog两种方式，我们主要了解一下这两种之间的区别：基于查询的CDC基于Binlog的CD
莱恩大数据·2024-01-27 07:35

[AIGC] 后台开发者必看：大数据背景下的关键技能与难点

后台开发者必看：大数据背景下的关键技能与难点前言：随着大数据技术的发展和广泛应用，后台开发的技能与难点也随之发生了变化。
专注于Java中间件的程序员木木·2024-01-27 07:30

Ukraine crisis:Macron says crucial says ahead after Putin summit

BBC(Europe)FrenchPresidentEmmanuelMacronhassaidthecomingdayswillbecrucialtode-escalatingtheUkrainestandoff
vivian_dda9·2024-01-27 03:19

HBase入门：实现原理

文章目录说明HBase的实现原理HBase功能组件表和RegionRegion的定位说明本文参考自林子雨老师的《大数据技术原理与应用(第三版)》教材内容，仅供学习和交流HBase的实现原理HBase功能组件
缘友一世·2024-01-27 02:30

java lamdba表达式详解20200301

1.lamdba表达式概述lamdba表达式是基于函数式编程思想，在jdk8中出现的新特性，与面向对象及面向函数编程的scala语言来说，可以说只是其中一部分。
四月一对鸟·2024-01-26 22:02

五大自然语言处理技术里程碑浅析

自然语言处理的发展随着深度学习和大数据技术的进步，自然语言处理取得了显著的进步。人们正在研究如何使计算机更好地理解和生成人类语言，以及如何应用NLP技术改善搜索引擎、语音助手、机器翻译等领域。
Syntax_CD·2024-01-26 21:54

数据仓库现代化和迁移解决方案Datametica

Datametica通过使用大数据技术和独特的自动化技术建立数据湖来帮助企业，这有助于以更快的速度和更低的成本完成该
weixin_30777913·2024-01-26 20:20

大数据所带来的四种思维方式的转变

随着近年来大数据技术的快速发展，大数据所创造的价值深刻改变了我们的生活、工作和思维方式。
garyond·2024-01-26 20:22

性能优化-高通的Hexagon DSP和NPU

目录一、前言二、HighLevel三、Frontend四、FetchandDecode五、Scalar
发狂的小花·2024-01-26 18:26

自然语言NLP学习

2-7门控循环单元（GRU）_哔哩哔哩_bilibiliGRULSTM双向RNNCNN卷积神经网络输入层转化为向量表示dropoutppl标量在物理学和数学中，标量（Scalar）是一个只有大小、没有方向的量
wangqiaowq·2024-01-26 18:12

部署webrtc开源工程owt

Keyfeatures:Distributed,scalable,and
草根大哥·2024-01-26 16:32

Spring Cloud Stream 整合MQ 完整版

1、SpringCloudStream概述官方表述是：SpringCloudStreamisaframeworkforbuildinghighlyscalableevent-drivenmicroservicesconnectedwithsharedmessagingsystems
HLucas·2024-01-26 15:03

LLM-大模型训练-常见错误：RuntimeError: expected scalar type Half but found Float

RuntimeError:expectedscalartypeHalfbutfoundFloat原因一Peft版本不兼容，尝试使用不同版本的Peft原因二1.问题描述  使用GPUV100(32GB)对
u013250861·2024-01-26 11:52

解决ChatGML启动报错：RuntimeError: expected scalar type Half but found Float

1、编辑web_demo2.py文件2、在原始命令加上.half()原始命令：model=AutoModel.from_pretrained("/app/model/chatglm2-6b",trust_remote_code=True).half().cuda()改为：model=AutoModel.from_pretrained("/app/model/chatglm2-6b",trust_r
Levi_·2024-01-26 11:46

大模型微调报错：RuntimeError: expected scalar type Half but found Float

微调chatglm报错RuntimeError:expectedscalartypeHalfbutfoundFloat1.背景博主显卡：3090最初的设置：bfloat16开始训练后，线性层报错2.解决
N1cez·2024-01-26 11:14

【01】深度学习——数学基础 | 线性代数 | 微积分 |概率

深度学习1.线性代数1.1标量(scalar)1.2向量(Vector)1.2.1模长和范数1.2.2单位向量1.2.3向量的内积1.2.4向量的外积1.3矩阵(Matrix)1.3.1矩阵转置1.3.2
花落指尖❀·2024-01-26 10:53

error: scala.reflect.internal.MissingRequirementError: object java.lang.Object in compiler mirror

IDEA打包scala程序时报错。解决：更换jdk版本，更换成jdk8就行。project和Modules的jdk都得改。
二楼后座。·2024-01-26 09:30

【程序人生】研二上快结束了~整理最近的思路

日在整理NoCRouter执行流程和Chisel环境Setup流程：NoCRouter执行流程Chisel安装流程总结：先安装jdk，配置环境变量安装sbt，不用配置环境变量安装idea社区版离线安装scala
农民真快落·2024-01-26 09:58

MongoDB相关概念

HighScalability&&HighAvailability-对数据库的高可扩展性和高可用性的需求。MongoDB应用场景社交场景：使
理智很乏味清醒最孤独·2024-01-26 09:27

Hadoop3.x学习笔记

文章目录一、Hadoop入门1、Hadoop概述1.1简介1.2hadoop优势1.3hadoop组成1.4大数据技术生态体系2、环境准备(重点)2.1模板机配置2.2模板创建3、本地运行模式（官方WordCount
魅Lemon·2024-01-26 09:24

一年一度的星环开发者奇妙之旅招募活动开始啦

来自国内外政府、金融、交通、能源、制造等行业的超过1500名嘉宾将出席会议，共同探讨最新的大数据技术发展趋势、国产化数据库、数字化转型、数据安全、数据要素与流通等热门话题。
星环科技·2024-01-26 07:39

在linux、window环境搭建kafka环境

源代码包含kafka的代码文件，使用scala编写的。
Everybody_up·2024-01-26 06:25

9.scala 伴生对象、伴生类、case class、case object

.默认实现了序列化接口caseclassvscaseobject1.caseclass修饰的类，必须要有参数列表2.caseobject修饰的对象，必须不能有参数列表伴生packagecom.fun.scalaobjectPerson
流月up·2024-01-26 05:45

PySpark常见操作

frompyspark.sqlimportSparkSessioncolumns=["language","users_count"]data=[("Java","20000"),("Python","100000"),("Scala
kang0709·2024-01-26 02:37

大数据时代的新命题：谁在满足中国企业的实时性需求?

作者|思杭编辑|皮爷出品|产业家从540亿元到1286亿元——这是中国通信标准化协会大数据技术标准推进委员会在2023年做出的一份预测报告。
产业家·2024-01-26 01:25

管理好班级的建议

詹姆·爱克兰特(JaimeEscalante)电影《为人师表》在现实生活中的原型，他的教学生涯很好地诠释了“付出总有回报”。只要不断地为维护师生感情而投资，你就会得到回报：学生
让人生开出绚丽的花·2024-01-26 00:15

2022-03-08 面试总结

device-width是指这个设备最理想的viewport宽度user-scalable是否允许用户手动缩放页面initial-scale定义初始缩放比例maximum-scale/minimum-scale
网恋被骗二块二·2024-01-26 00:47

OpenCV基本绘图

rectangle（）绘制矩形使用OpenCV函数circle（）绘制圆使用OpenCV函数fillPoly（）绘制填充多边形OpenCV理论在本教程中，我们将大量使用两种结构：cv：:Point和cv：：Scalar
人工智能小豪·2024-01-25 23:06

大数据技术之Spark

Spark概述1.1Spark是什么官方解释：Spark是一种基于内存的快速、通用、可扩展的大数据分析计算引擎。1.2SparkandHadoopHadoop的MapReduce是大家广为熟知的计算框架，那为什么咱们还要学习新的计算框架Spark呢，这里简单说一下Spark和Hadoop的关系。在时间节点上（重要）HadoppSpark2006年1月，DougCutting加入Yahoo，领导Ha
严同学正在努力·2024-01-25 21:38

Chapter 20. Analyzing Architecture Risk

Everyarchitecturehasriskassociatedwithit,whetheritberiskinvolvingavailability,scalability,ordataintegrity.Analyzingarchitectureriskisoneofthekeyactivitiesofarchitecture.Bycontinuallyanalyzingrisk
城里的月光_欧阳·2024-01-25 20:50

Linux 安装 pySpark

1.1、Java参考Java安装运行1.2、Scale安装1）下载并解压官网地址：https://www.scala-lang.org/download/wgethttps://downloads.lightbend.com
兰叶书·2024-01-25 20:00

spark 关联外部数据

{SparkConf,SparkContext}importscala.collection.mutable.ListBufferobjectlesson04_rdd_partitions{defmain
新鲜氧气·2024-01-25 19:54

RocketMQ面试题及答案

kafka：scala开发，面向日志，功能丰富，性能最高，当你的业务
会_飞_的猪·2024-01-25 19:51

Scala入门到入坟

1.编译scala为java文件解析在编写完成scala文件后，会生成.class文件objectTest{defTest(args:Array[String]):Unit{println("hello
.英杰·2024-01-25 19:12

JDK 1.8 Lamda表达式

Java8最值得学习的特性就是Lambda表达式和StreamAPI,如果有用过Scala语言,对理解Lambda表达式有很大帮助.lambda写的好可以极大的减少代码冗余，同时可读性也好过冗长的内部类
随手点灯·2024-01-25 17:36

大数据技术原理与应用 概念、存储、处理、分析和应用（林子雨）——第五章 NoSQL数据库

第五章NoSQL数据库NoSQL（NotOnlySQL）是指非关系型数据库，它的出现是为了解决关系型数据库在某些场景下的不足。NoSQL数据库相对于传统的关系型数据库，具有更高的可扩展性、更好的性能、更灵活的数据模型以及更低的成本等优势。在传统的关系型数据库中，数据被存储在严格的表结构中，这样的结构导致关系型数据库在处理大规模数据、高并发访问等场景时，面临很大的挑战。NoSQL数据库则采用了更加灵
m0_62096596·2024-01-25 17:05

CalvinFS: Consistent WAN Replication and Scalable Metadata Management for Distributed File...——论文泛读

FAST2015Paper元数据论文阅读汇总问题现有的文件系统，即使是存储数百PB数据的可伸缩系统，也会将文件元数据存储在单个服务器上，或通过共享磁盘架构，以确保元数据的一致性和有效性。文件系统在可扩展性和跨数据中心实现方面还有不足。尽管已经开发了许多分布式文件系统以扩展到数千台计算机的集群，但由于在地理距离上提供期望的文件系统语义和工具（如线性化操作、分层访问控制、标准命令行工具等）的困难，这些
妙BOOK言·2024-01-25 14:02

【易混区分】 tensor张量 Numpy张量的各种矩阵乘法、点积的函数对比 (dot, multiply,*,@matmul)

文章目录1矩阵运算基本概念1.1点积1.2矩阵乘法2dot()3multiply（）和*4matmul和@1矩阵运算基本概念1.1点积又称为数量积、标量积（scalarproduct）或者内积（innerproduct
Qodicat·2024-01-25 13:16

hadoop集群部署

hadoop简介Hadoop是一个由Apache基金会所开发的分布式系统基础架构,是一个存储系统+计算框架的软件框架，主要解决海量数据存储与计算的问题，是大数据技术中的基石。
Cat God 007·2024-01-25 12:45

自然语言处理（NLP）的发展

自然语言处理的发展随着深度学习和大数据技术的进步，自然语言处理取得了显著的进步。人们正在研究如何使计算机更好地理解和生成人类语言，以及如何应用NLP技术改善搜索引擎、语音助手、机器翻译等领域。
志尊宝·2024-01-25 12:17

自然语言处理的发展

自然语言处理的发展随着深度学习和大数据技术的进步，自然语言处理取得了显著的进步。人们正在研究如何使计算机更好地理解和生成人类语言，以及如何应用NLP技术改善搜索引擎、语音助手、机器翻译等领域。
胡图不迷糊·2024-01-25 12:17
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他