Spark公开课第6页

中原焦点团队刘晓飞坚持分享第1117天焦点网络中十期

以后要对给身边人赋能，就像我讲公开课时，也没有表扬学生们，更没有煽情，学生们积极性不高，感觉就是自己的热情不够，其实是内心热爱的能量没有点燃。接下来坚持：每晚辅导孩子们20分钟。

花开盛夏·2024-02-20 04:08

手机远程控制树莓派-BLINKER应用（物联网基础）

由于我买了坚果云这个软件服务，所以我对云储存并无太大的兴趣，只是有时候要远程回家翻翻服务器上的东西，或者挂着下载个东西，跑个pyspark之类的。

crossni·2024-02-20 00:15

无依赖单机尝鲜 Nebula Exchange 的 SST 导入

无依赖单机尝鲜NebulaExchange的SST导入本文尝试分享下以最小方式（单机、容器化Spark、Hadoop、NebulaGraph），快速趟一下NebulaExchange中SST写入方式的步骤

NebulaGraph·2024-02-19 23:51

Linux下Spark offline安装graphframes包

文章目录背景安装步骤背景GraphX是Spark中用于图计算的模块.Spark安装包中内置Scala语言的GraphX库,但是对于Python语言的安装包,需要额外进行安装.对于内网服务器,不能访问外网

ithiker·2024-02-19 22:45

代码随想录算法训练营第三十一天 |基础知识，455.分发饼干，376.摆动序列，53.最大子序和（已补充）

基础知识：题目分类大纲如下：#算法公开课《代码随想录》算法视频公开课(opensnewwindow)：贪心算法理论基础！

菜鸟是大神·2024-02-19 22:15

建立绘画的一种认知体系－－老白学画（十二）

当然有时听听公开课也会有收获。昨天听了一堂素描艺术思维课。老师谈到画画不难，关键是找到方法、规律；方法就是思路、步骤

江苏刘志祥·2024-02-19 21:33

公开课怎么确定教学目标

教学目标是什么？教学目标一般指课堂教学目标。课堂教学目标是指教学活动预期达到的结果，是教育目的、教学目标和课程目标的具体化，也是教师完成教学任务所要达到的要求和标准。课堂教学目标一般是指：知识目标、能力目标、情感目标.当然不同的教学内容,三个方面不一定都具备。教学过程中采用了哪些教学方法（用具课堂实例来说明）,这些方法都是依据什么样的教育原则或教育原理。概括起来是：讲什么、怎么讲、为什么这样讲。换

子午云·2024-02-19 20:20

海拔五千

下午再讲比上午公开课好的多。文综组开始打卡读书读《中国大历史》。建文师兄讲必须从问题解决者角度入手去读书。经典作品阅读与问题解决式阅读不冲突。经典阅读做基础，问题解决式阅读提升深度！

3点8度·2024-02-19 18:11

蓝桥杯备赛情报收集

情报大纲正需竞赛大纲解析视频公开课回放46章，46h算法知识点思维导图VIP：官方视频题解+压轴题单+微信群？

Unen030·2024-02-19 18:50

跟100位大师练，练完就成高手丨写作工具箱 71

大师写作100练丨文/张伟蹯溪百日极致写作练习营这是椰子私塾第1825篇原创输出跟100位大师练，练完就成高手丨写作工具箱71网大公开课学习摘要。读与写——每个作者都是从读者开始的（主讲人：越人歌）。

丨张伟丨·2024-02-19 16:08

AWS Serverless PySpark 指定 Python 版本（qbit）

·2024-02-19 16:05

亲子日记（313）

20180413星期五天气晴今天有点小雨，还下了好几次…晚上陪孩子们去听了一堂与人交流的公开课，老师聊了遵守纪律和自律的重要性和必要性（我是这样理解的），小朋友们听得也比较认真，老师还时不时给他们互动，

璇戎爸爸·2024-02-19 16:00

Quick introduction to Apache Spark

什么是SparkApacheSpark是一种快速通用的集群计算系统。它提供Java，Scala，Python和R中的高级API，以及支持通用执行图的优化引擎。

Liam_ml·2024-02-19 13:29

Spark中多分区写文件前可以不排序么

背景Spark3.5.0目前Spark中的实现中，对于多分区的写入默认会先排序，这是没必要的。

鸿乃江边鸟·2024-02-19 13:10

Flink 细粒度滑动窗口性能优化

大数据技术AIFlink/Spark/Hadoop/数仓，数据分析、面试，源码解读等干货学习资料118篇原创内容公众号1、概述1.1细粒度滑动的影响当使用细粒度的滑动窗口（窗口长度远远大于滑动步长）时，

hyunbar·2024-02-19 13:39

【大数据面试题】006介绍一下Parquet存储格式的优势

同时一般查询使用时不会使用所有列，而是只用到几列，所以查询速度会更快压缩比例高因为是列式存储，所以可以对同一类型的一段做压缩，压缩比例高支持的平台和框架多在Hadoop,Spark,Presto,Python

Jiweilai1·2024-02-19 13:34

七天爆肝flink笔记

一.flink整体介绍及wordcount案例代码1.1整体介绍从上到下包含有界无界流支持状态特点与spark对比应用场景架构分层1.2示例代码了解了后就整个demo吧数据源准备这里直接用的文本文件gradle

我才是真的封不觉·2024-02-19 13:01

把控好时间，追求精彩课堂——《纳米技术就在我们身边》教学反思

上午第三节我上了一节公开课。课题：《纳米技术就在我们身边》。上完以后心里难免还是有很多遗憾。

勤耕小语·2024-02-19 12:40

(15)Hive调优——数据倾斜的解决指南

目录前言一、什么是数据倾斜二、发生数据倾斜的表现2.1MapReduce任务2.2Spark任务三、如何定位发生数据倾斜的代码四、发生数据倾斜的原因3.1key分布不均匀3.1.1某些key存在大量相同值

爱吃辣条byte·2024-02-19 11:50

Hive on Spark配置

前提条件1、安装好Hive，参考：Hive安装部署-CSDN博客2、下载好Spark安装包，链接：https://pan.baidu.com/s/1plIBKPUAv79WJxBSbdPODw?

在下区区俗物·2024-02-15 10:51

配置hive on spark

配置hiveonspark1、上传Spark纯净版jar包到HDFS：hdfsdfs-mkdir/spark-jarshdfsdfs-put/opt/spark/jars/*/spark-jars2、修改

空白格2519·2024-02-15 10:51

hive on spark配置经验

常规配置配置完，开启hadoop，开启spark（如果在hdfs上上传了纯净版的spark则不需要开启），开启hive注：当前节点一定要是namenode的active节点，因为hadoop长时间不用namenode

小五冲冲冲·2024-02-15 10:21

【小记】目标雅思~

AppsandWebSites沪江英语传送门：听力板块/有声热点FOR精读练习使用方法：调整读速0.75x，盲听默写；对于听不清的部分，再多听几遍网易公开课传送门：TED、可汗学院、国际名校公开课FOR

爱学习的卡比兽·2024-02-15 06:40

Hbase - 自定义Rowkey规则

中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制TableInputFormat来实现我们的需求了，我们还可以采用Flink的DataSet的方式读取,另外下面还有Spark

kikiki2·2024-02-15 06:39

一群特别的“小朋友”

这天带着紧张又激动的情绪，即将轮到我上公开课了，本次与以往不同的是，台下坐着的是各园所的园长和主任，而她们也即将是本次参与活动的主角——小朋友，这一个两个的可都是“历经沙场”“身经百战”的教学能手，也着实给台上的老师施加了不小的压力

愿一切安好_b89c·2024-02-15 05:47

听！幸福花开的声音

去听王老师的公开课，是因为我想要解

银毛毛·2024-02-15 04:29

星光作业4月11日

觉察日记：事件：今天在天一园听了一天新老师的公开课。感受：开心。想法：集中培训新老师让她们快速适应工作。期待：期待自己接受她们当下的状况。期待对方认真工作踏实学习。对方期待自己：肯定认可她们的呈现。

刘宸羽新·2024-02-15 04:42

江苏南菁跟岗研修心得之八———听课随感

今天是忙碌而充实的一天，早上7:30开始在敔山湾实验学校全程跟岗六（4）班，从早读、数学培优、上课、参加升旗仪式，到公开课试课、音乐、科学学科教学，全方位、全天候、全活动参与，让我收获良多。

育才周荣·2024-02-15 03:54

3月5日——准备省考50天

省考倒计时4月18日今天完成了：1.申论训练2.行测套题训练3.PPT制作4.开题报告修改5.粉笔公开课2节总结：1.自己还需要加强锻炼，把身体养好锻炼好2.摆正心态，与爸妈好好沟通3.大四最后半年每周回家看望他们

Der浩研途漫漫·2024-02-15 03:38

周海宏老师公开课：欣赏音乐单纯的美

周海宏老师在音乐鉴赏课上讲，也许作曲家想表现听觉的好听，他并不追求表现什么。这句话真的讲到点子上了，比如大家化妆、穿好看的衣服、把家装修成自己喜欢的样子，真的不一定在表现情感、理想、信念，而是我们在追求和表达自己认可的美。所以一段音乐，可能作曲家的初衷是，我想到了一段旋律，我认为它十分美丽，我想要把它分享给别人听。我们能感受作曲家大致的表现意图，并有一个纯音乐的思维方式，抛开听音乐就要听出内涵的心

秦何意·2024-02-15 02:29

（免费领源码）python+mysql+spark 手机销售数据的可视化分析系统44127-计算机毕业设计项目选题推荐

摘要信息化社会内需要与之针对性的信息获取途径，但是途径的扩展基本上为人们所努力的方向，由于站在的角度存在偏差，人们经常能够获得不同类型信息，这也是技术最为难以攻克的课题。针对手机销售数据管理等问题，对手机销售数据管理进行研究分析，然后开发设计出手机销售数据可视化系统以解决问题。手机销售数据可视化系统主要功能模块包括系统首页、轮播图、公告信息、资源管理（新闻资讯、新闻分类）交流管理（交流论坛、论坛分

2301_3224142804·2024-02-15 00:40

第十五周工作总结

这周本来打算给三个班做个期末测试的，结果因为临时安排的公开课给耽误了，只三年级做了一次

西凉燕衔妮·2024-02-14 22:09

生活工作时刻有学习

今天在科组听的公开课，感觉和精品的课堂还是有差距，从课堂设计到结构框架再到课堂语言的表达，看到公众号的推文，工作室的利玲老师上的一节公开课《预防犯罪》，三个环节“罪与非罪我能辨”、“预防犯罪我认识”、“

我在枣快乐呀·2024-02-14 20:55

基于Kafka的实时计算引擎如何选择？

以Flink和Spark为首的实时计算引擎，成为实时计算场景的重点考虑对象。那么，今天就来聊一聊基于Kafka的实时计算引擎如何选择？FlinkorSpark？2.为何需要实时计算？

java菜·2024-02-14 19:37

调用讯飞火星AI大模型WebAPI

getWebsocketUrl(){returnnewPromise((resolve,reject)=>{varapiKey=API_KEYvarapiSecret=API_SECRETvarurl='ws://spark-api

雲墨知秋·2024-02-14 18:54

Spark通过jdbc性能调优--采用分区的方式从oracle读数据

spark通过jdbc读取Oracle，当数据量很大的时候会出现两个问题：读取数据异常缓慢，甚至卡死大表中进行操作也会出现OOM的问题调优常规的读取数据库的方式如下ods_bdz=spark.read.format

korry24·2024-02-14 18:08

PySpark介绍及其安装教程

一、PySpark是什么PythonPySpark是Spark官方提供的一个Python类库，其中内置了完全的SparkAPI，使得Python用户在导入这个类库后，可以使用自己熟悉的Python语言来编写

文景大大·2024-02-14 14:58

Spark（四十二）数据倾斜解决方案之使用随机数以及扩容表进行join

一、背景当采用随机数和扩容表进行join解决数据倾斜的时候，就代表着，你的之前的数据倾斜的解决方案，都没法使用。这个方案是没办法彻底解决数据倾斜的，更多的，是一种对数据倾斜的缓解。原理，其实在上一讲，已经带出来了。扩容表（RDD）步骤：1、选择一个RDD，要用flatMap，进行扩容，将每条数据，映射为多条数据，每个映射出来的数据，都带了一个n以内的随机数，通常来说，会选择10。2、将另外一个RD

文子轩·2024-02-14 14:36

Spark编程实验六：Spark机器学习库MLlib编程

目录一、目的与要求二、实验内容三、实验步骤1、数据导入2、进行主成分分析（PCA）3、训练分类模型并预测居民收入4、超参数调优四、结果分析与实验体会一、目的与要求1、通过实验掌握基本的MLLib编程方法；2、掌握用MLLib解决一些常见的数据分析问题，包括数据导入、成分分析和分类和预测等。二、实验内容1.数据导入从文件中导入数据，并转化为DataFrame。2、进行主成分分析（PCA）对6个连续型

Francek Chen·2024-02-14 14:48

感受同侪压力，被动进步

有人说互联网已经改变了这一切，你可以通过公开课学到很多知识，打破距离的限制。但是我想说的是，网络公开课到底有没有改变地理分配不均的情况？它跟哈佛大学、麻省理工学院或者斯坦福大学的线下课程有什么区别？

非烟店主·2024-02-14 13:28

ShuffleManager 原理

在Spark的源码中，负责shuffle过程的执行、计算、处理的组件主要是ShuffleManager。在Spark1.2以前，默认的shuffle计算引擎是HashShuffleManager。

stone_zhu·2024-02-14 10:03

十二生肖的数学故事

可是，这次要面临的讲台，让我有些紧张—“同课异构”，它不同于一般的公开课，是在对教材的把握和教学方法的设计上强调“同中求异，异中求同”，在同一教材下，教师展现出对内容的不同处理，不同教学策略所产生的不同教学效果

_我们_·2024-02-14 08:08

斯坦福大学密码学公开课——Block Ciphers (1)

WhatisBlockCipher下面抛出BlockCipher的具体定义：Incryptography,ablockcipherisadeterministicalgorithmoperatingonfixed-lengthgroupsofbits,calledablock,withanunvaryingtransformationthatisspecifiedbyasymmetrickey.其

Scaryang·2024-02-14 08:31

Hadoop+Spark+MongoDB+MySQL+C#大数据开发项目最佳实践

一、前言随着IT技术的飞速发展，各行各业都已在广泛尝试使用大数据技术提供更稳健和优质的服务。目前，医疗IT系统收集了大量极具价值的数据，但这些历史医疗数据并没有发挥出其应有的价值。为此，本文拟利用医院现有的历史数据，挖掘出有价值的基于统计学的医学规则、知识，并基于这些信息构建专业的临床知识库，提供诊断、处方、用药推荐功能，基于强大的关联推荐能力，极大地提高医疗服务质量，减轻医疗人员的工作强度。二、

yiyidsj·2024-02-14 07:08

基于 C# 的 ETL 大数据并行编程

ApacheSpark是一个用于Extract(提取),

dotNET跨平台·2024-02-14 07:07

关于设计师与客户，关于热情与利益

shiro.png01关于设计师与客户01.jpeg在听研习社K先生的排版公开课中，K大提到了让我很感兴趣的一点，也是我没有注意到的一个点，那就是设计师和客户的关系。

Mu_Xin·2024-02-14 07:32

活得普通，也只能怪责自己

任何那些所谓有意义的事情都不想做，什么读书、写文章、看网络公开课，或者出去运动，都提不起我的兴趣。整天只想盯着手机屏幕，四处浏览网络信息，打发时间；要不然，就打开电视，看看综艺和电影。

萝卜视·2024-02-14 06:19

Spark - 动态注册UDF

昨天有位大哥问小弟一个Spark问题，他们想在不停Spark程序的情况下动态更新UDF的逻辑，他一问我这个问题的时候，本猪心里一惊，Spark**还能这么玩?

kikiki2·2024-02-14 06:33

知识图谱学习笔记——（五）知识图谱推理

一、知识学习声明：知识学习中本文主体按照浙江大学陈华钧教授的《知识图谱》公开课讲义进行介绍，并个别地方加入了自己的注释和思考，希望大家尊重陈华钧教授的知识产权，在使用时加上出处。感谢陈华钧教授。

AIFarmer·2024-02-14 03:59

【语文教学】《刘姥姥进大观园》教学设计

图片发自App【写在前面】花费了不少脑细胞，终于稀里糊涂凑合了这次公开课，上课后，整理了这次教学设计，和大家共享，请看到的语文同仁多提宝贵意见。

吴老师教语文·2024-02-14 00:01

推荐频道

Spark公开课