topN

大数据数仓项目实战

1、项目需求分析数据采集平台搭建；实现数据仓库分层的搭建；实现数据清洗、聚合、计算等操作；统计各指标，如统计通过各地址跳转注册的用户人数、统计各平台的用户人数、统计支付金额topN的
wespten·2022-10-09 10:04

MapReduce经典案例-TopN

1.TopN分析法介绍TopN分析法是指从研究对象中按照某一个指标进行倒序或正序排列，取其中所需的N个数据，并对这N个数据进行重点分析的方法。
诺特兰德·2022-10-04 08:11

PySpark和SQL中的Window function

的使用代码例子sparkwindowfunctionsqlwindowfunctionWindowFunction的使用WindowFunction用于解决组内排名问题：排名问题：每个部门按业绩来排名topN
November丶Chopin·2022-09-25 01:15

Sentinel热点key限流的实现详解

目录基本介绍兜底方法参数例外项基本介绍何为热点热点即经常访问的数据，很多时候我们希望统计或者限制某个热点数据中访问频次最高的TopN数据，并对其访问进行限流或者其它操作兜底方法分为系统默认和客户自定义两种之前的
·2022-08-31 11:38

6.2.3 Spark《RDD高阶》序列化,依赖,持久,容错,分区,广播,累加,TopN《原理初》独立作业提交,洗牌原理,RDD优化《SQL概述》数据抽象,类型《SQL编程》SpkSes,DF&DS

目录第4节RDD编程高阶Spark原理4.1序列化4.2RDD依赖关系4.3RDD持久化/缓存4.4RDD容错机制Checkpoint4.5RDD的分区1、本地模式(取决于核数)2、伪分布式（x为本机上启动的executor数，y为每个executor使用的core数，z为每个executor使用的内存）3、分布式模式（yarn&standalone）4.6RDD分区器4.7广播变量4.8累加器(
CH_ENN·2022-08-17 07:29

Power BI----几个常用的分析方法和相适应的视觉对象

几个常用的分析方法和相适应的视觉对象1、水平分析法2、帕累托分析和topN3、结构分析法4、趋势分析法5、因素分析法其他  对于BI报表来说，不仅要美观（虽然美化这个东西真的要要天赋，不过多看大神的作品页可以提升很多
小陈步吃人·2022-08-16 17:28

Keras实现CNN文本分类

步骤1：文本的预处理，分词->去除停用词->统计选择topn的词做为特征词步骤2：为每个特征词生成ID步骤3：将文本转化成ID序列，并将左侧补齐步骤4：训练集shuffle步骤5：EmbeddingLayer
山水无间道·2022-08-03 19:38

weak-and算法原理演示（wand）

原因是很多时候我们其实只是想要topn个结果，一些结果明显较差的也进行了复杂的相关性计算，而weak-and算法通过计算每个词的贡献上限来估计文档的相关性上限，从而建立一个阈值对倒排中
yihucha166·2022-06-25 18:16

Spark RDD案例：分组排行榜

读取成绩文件得到RDD2、利用映射算子生成二元组构成的RDD3、按键分组得到新的二元组构成的RDD4、按值排序，取前三5、按指定格式输出结果三、完成任务方法2（一）新建Maven项目一、提出任务分组求TopN
十四是40·2022-06-16 00:40

Hive/Spark SQL使用案例

Hive/SparkSQL使用案例求TOPN：开窗函数求天数：datediff()函数求每个学生的成绩都大于...系列：开窗/分组表转置/行转列系列一：concat_ws函数表转置/行转列系列二：concat_ws
半吊子Kyle·2022-06-16 00:20

机器学习入门：主题模型-4

实验时长：45分钟主要步骤：导入实验相关的包加载lda数据集观察数据样本利用特定的样本做测试创建LDA模型分析文档的主题分布计算对应主题的TOPN单词结果展示2、实验环境虚拟机数量：1系统
奔腾游子·2022-05-02 07:11

阿里飞猪个性化推荐：召回篇

常见的有基于userprofile的召回，基于协同过滤的召回，还有最近比较流程的基于embedding向量相似度的topN召回
文文学霸·2022-04-27 07:19

NLP 实战 (9) | CSDN topN指数月排行榜竞赛动画

开源一个topn词竞赛动画项目topn_race:GitCode仓库：https://gitcode.net/csdn/topn_race核心功能：输入：按月统计的topN词频数据输出：topN词频竞赛动画
幻灰龙·2022-03-30 13:31

时序数据库TDengine写入查询的问题分析

目录写入问题必须为每个Tag组合起一个表名Tag支撑与管理不支持乱序写入查询问题求topN的groupdownsampling和aggregation查询聚合架构写入问题必须为每个Tag组合起一个表名付出的代价
·2022-03-24 17:05

MySQL - SQL窗口函数

1.应用场景窗口函数解决的问题包括：1）排名问题2）topN问题应用工作中,面试中.2.学习/操作前言MySQL版本8已支持窗口函数这个功能,如果低于该版本,会出现SQL报错!一.窗口函数有什么用？
穿素白衫的少年·2022-03-05 10:55

Flink 实战一用户行为分析

用户行为分析实战一1.按照操作系统(iOS、Android..)分析新老用户2.按照省份维度进行新老顾客统计分析3.分组topN需求4.新老用户统计，按照deviceId来统计1.按照操作系统(iOS、
大数据学习爱好者·2022-02-28 10:28

MapReduce 案例之Top N

MapReduce案例之TopN1.TopNTop-N分析法是指从研究对象中得到所需的N个数据，并对这N个数据进行重点分析的方法。2.实例描述对数据文件中的数据取最大top-n。
__豆约翰__·2022-02-20 03:03

Redis实现排名功能的示例代码

公司有一个专门给线下销售人员使用的APP，APP记录销售推广公司贷款产品赚取的佣金以及一些门店开拓和打卡的功能，后端是由我和另外一个同事开发的，其中有一个模块是全国门店内的销售佣金实时排名，说到排名很多人的第一反应都是这是个TopN
·2022-02-16 13:07

MySQL 开窗函数

目录（1）开窗函数的定义（2）开窗函数的实际应用场景结合orderby关键词和limit关键词是可以解决很多的topN问题，比如从二手房数据集中查询出某个地区的最贵的10套房，从电商交易数据集中查询出实付金额最高的
·2022-02-15 10:04

MapReduce 案例之Top N

MapReduce案例之TopN1.TopNTop-N分析法是指从研究对象中得到所需的N个数据，并对这N个数据进行重点分析的方法。2.实例描述对数据文件中的数据取最大top-n。
piziyang12138·2022-02-13 16:25

圈复杂度度量

xml格式，参数很少，非常容易配置可以按目录、文件、函数来设置排除项，对有些函数来说，比如switch下有多个case而且每个case的逻辑都非常简单，可读性本身就很高的情况下可以直接排除可以设置只统计topN
楚秀才·2022-02-12 08:14

排行榜功能设计方案

这样，我们在第一次查询topn的时候使用sql的排序，直接返回结果，同时把结果存redis。此时可以有两种方式，1.排序结果存string格式；2.排序结果存sortedset（
土卫十六·2022-02-10 23:48

seq2seq注意力机制源码分析和word2vec最相似topN源码分析

幻灯片2.PNG幻灯片3.PNG幻灯片4.PNG幻灯片5.PNG幻灯片6.PNG幻灯片7.PNG幻灯片8.PNG幻灯片9.PNG幻灯片10.PNG幻灯片11.PNG幻灯片12.PNG幻灯片13.PNG幻灯片14.PNG幻灯片15.PNG幻灯片16.PNG幻灯片17.PNG幻灯片18.PNG幻灯片19.PNG幻灯片20.PNG幻灯片21.PNG幻灯片22.PNG幻灯片23.PNG
xyq_learn·2022-02-08 12:46

Hadoop实战——MapReduce实现主播的播放量等数据的统计及TopN排序（第一篇）

进来了就点个赞呗本次实战项目一共分三篇教学（二三篇后续更新）第一篇：对主播文本数据的清洗，从大量数据中获取我们所需要的数据（如播放量，时长等）第二篇：对清洗后的数据进行统计求和处理操作，对id进行升序排序打印结果第三篇：对统计好的数据进行TopN
Yuan-Programmer·2021-11-23 13:02

基于用户的协同过滤实现demo

例如我们有一个基于用户(userId)对物品(itemId)进行打分(vote)的数据源然后我们想根据用户的协同过滤算法计算某用户的TopN相似用户importorg.apache.spark.sql.SparkSessionimportorg.apache.spark.sql.catalyst.ScalaReflectionimportorg.apache.spark.sql.types.Str
简单随风·2021-11-08 18:42

智能问答初识

智能问答的一般实现步骤包括：1）文本库分词，训练模型，由模型将文本库转换为词向量；2）将词向量与索引进行存储；3）输入检索文本，将检索文本分词转换为词向量，计算检索文本词向量与词向量库的相似度，并进行排序，返回topn
reco171·2021-07-19 10:57

7M推荐系统 - S1 推荐系统和常用算法

1推荐系统简介推荐系统介绍见S0推荐系统评估显式反馈和隐式反馈准确性（学术界）评分预测topN推荐，准确和召回率准备性（工业界）信息流：时长->用户行为->关注和付费电商：浏览深度->用户行为->付费分层流量占比销量大于
左心Chris·2021-06-10 07:19

项目去O改造——SQL转换

image.png2、行号：rownum报错出现次数最多，oracle查询中无论是做数据分页还是查询TOPn数据基本都用rownum，
二枚目·2021-06-09 15:38

推荐feed流

还可以以用户喜好程度排序，选出用户最想看的topN，适用于新闻、商品推荐等场景。feed流的特点：1.多账号内容流：系统中有一定量的账号，账号之间存在关注、取关、拉黑等关系2
yi_cloud·2021-06-07 20:50

22list『DT_Spark 』第114课:SparkStreaming+Kafka+Spark SQL+TopN+Mysql+KafkaOffsetMonitor电商广告点击综合案例实战(详细内幕版本

第114课:SparkStreaming+Kafka+SparkSQL+TopN+Mysql+KafkaOffsetMonitor电商广告点击综合案例实战(详细内幕版本)-段智华的博客-博客频道-CSDN.NEThttp
葡萄喃喃呓语·2021-05-16 12:49

Spark经典案例之求top值

需求分析orderid,userid,payment,productid求topN的payment值a.txt1,9819,100,1212,8918,2000,1113,2813,1234,224,9100,10,11015,3210,490,1116,1298,28,12117,1010,281,908,1818,9000,20b.txt100,3333,10,100101,9321,1000
数据萌新·2021-05-15 15:10

OBIEE 排序函数 TopN()、BottomN() 和 Rank()

而函数Rank()可以对某一数值列进行排序，并返回整数型的序号；TopN()和BottomN()不仅可以对某一数值列进行排序返回整数型序号，还可以只返回固定的行数。
DreamOver·2021-05-09 19:18

PowerBI 2018 1月更新来了

主要的一些变化包括：支持显示或隐藏报告页面支持数据标签背景支持坐标轴区域可调宽度支持条/柱图内部填充比例支持显示日期层级支持将相对日期筛选锚定到特定日期支持在Q&A中使用TOPN提供了[相关系数]快速度量值其他
PowerBI战友联盟·2021-05-09 03:10

配置nutch可能出现的错误

/nutchcrawlweburls.txt-dirlocalweb-depth2-topN100-threads2命令的时候可能会
oword·2021-05-03 06:36

面试-编程题目

1.TOPN排序有一字符串数组string（），对应有一个权重数组int[]，现按照如下规则取出字符串数组的top5：1）对每个数组求综合得分，综合得分=权重得分+顺序得分，权重打得分对应的权重值，顺序得分为字符串在字符串数组中的顺序号
Aaron_Alphabet·2021-05-02 11:36

Hadoop：MapReduce进阶编程（WritableComparable和cleanup的使用）

Hadoop：MapReduce进阶编程（WritableComparable和cleanup的使用）一、案例要求实验内容1，自定义类型实验内容2，TopN求解实验简析二、实现过程1.IntelliJIDEA
Regan_zhx·2021-04-23 23:09

10000亿数据寻找 最大 或者最小 n个 数 各种算法比较

原文：https://blog.csdn.net/gaoranfighting/article/details/44784059寻找最优的TopN算法1概要在大量的数据记录中，依据某可排序的记录属性（一般为数字类型
laosijikaichele·2021-04-20 17:41

Power BI应用：KPI指标动态展示之TOPN及其他

KPI指标动态展示之TOPN及其他作者：Beau一、背景故事2020年第一天上班，B同学还沉浸在跨年的喜悦中，坐在工位上，喝了一口枸杞养生茶，随即打开了电脑，邮箱提醒老板发来一封邮件，顿时心
PowerBI星球·2021-04-19 03:02

2021 大厂Java最全面试准备—1000+道高频面试题+互联网大厂面经+简历指导（附答案解析）冲刺2021

前言这篇文章从Java基础面试题到技术栈专题再到大厂面经都给大家整理好了，收集了大厂topN的高频面试题，其中概括的知识点有：Java、MyBatis、ZooKeeper、Dubbo、Elasticsearch
coder诸葛·2021-03-02 21:35

2021 互联网大厂年度总结1000+道高频面试题（附答案解析）冲刺2021（持续更新）

本文大多是各大厂topN题目，针对中高级java开发，会持续更新，如果有优质面试题，欢迎大家一起交流点击一起学习暗号：csdn第一时间领取最新学习资料+简历优化资源1、String类能不能被继承？
coder诸葛·2021-02-23 15:29

Blink/Flink作业 性能优化配置及原理

groupaggregate优化：开启minibatch，开启localglobal，开启partialfinal，countdistinct改写为aggwithfilter（countdistinct优化）2．topN
Foools·2021-02-03 10:03

SQL学习笔记——task05：SQL高级处理

3.1窗口函数适用的范围和注意事项4.GROUPING运算符4.1ROLLUP-计算合计及小计练习题总结前言在日常工作中，经常会遇到需要在每组内排名，比如下面的业务需求：排名问题：每个部门按业绩来排名；topN
J.How.Lee·2020-12-25 23:23

hive udf 分组取top1_Hive中分组取前N个值的实现-row_number()

这个就是典型在分组取TopN的需求。
weixin_39734048·2020-12-23 09:52

Kylin on Parquet 介绍和快速上手

在构建部分讲到的CountDistinct,TopN,Percentile，这些度量目前已经都支持了，详情请见KYLIN-4462。补充了自动
淡蘫铯の迗悾·2020-12-15 13:38

Kylin 4.0 TopN实现原理介绍

从Kylin1.5开始就已经加入了TopN的度量，一直到kylin3.x，实现上没有太大改变，想了解kylin3之前的TopN实现原理可以参考下面的文章：https://www.infoq.cn/article
淡蘫铯の迗悾·2020-12-15 13:38

Kylin on Parquet 介绍和快速上手

在构建部分讲到的CountDistinct,TopN,Percentile，这些度量目前已经都支持了，详情请见KYLIN-4462。补充了自动
淡蘫铯の迗悾·2020-12-15 13:11

Kylin 4.0 TopN实现原理介绍

从Kylin1.5开始就已经加入了TopN的度量，一直到kylin3.x，实现上没有太大改变，想了解kylin3之前的TopN实现原理可以参考下面的文章：https://www.infoq.cn/article
淡蘫铯の迗悾·2020-12-15 13:10

Pandas对每个分组应用apply函数的实现

Pandas的apply函数概念（图解）实例1：怎样对数值按分组的归一化实例2：怎样取每个分组的TOPN数据到此这篇关于Pandas对每个分组应用apply函数的实现的文章就介绍到这了,更多相关Pandas
·2020-12-13 10:10

二十四、案例：分析日志数据，降序输出TopN

咱们Hadoop篇正文内容就这么多了，接下来的三篇是三个MapReduce的案例，以代码为主，实现过程相对简单。关注专栏《破茧成蝶——大数据篇》查看相关系列的文章~目录一、需求分析二、代码实现一、需求分析现有如下四列的日志数据：分别代表手机号码、上行流量、下行流量、总流量。现在需要对此数据进行加工，输出流量使用量前5的用户信息。二、代码实现2.1首先定义一个Bean类，值得注意的是这里面有一个co
象在舞·2020-12-07 15:56

推荐系统-多路召回

回想一下baseline的思路，我们首先计算了item的之间的相似度，然后基于用户的正反馈item列表，找到与列表中每一个item相似度最高的topn个item，组成一个列表，最后直接按照相似度得分进行排序
mhxin·2020-12-01 04:15
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他