项目实战笔记

大数据入门：Spark+Kudu的广告业务项目实战笔记(六)

本章目标：将代码打包并运行在服务器上。1.将数据放在HDFS上先把Hadoop启动起来：[hadoop@hadoop000~]$cdapp/[hadoop@hadoop000app]$lsapache-maven-3.6.3hive-1.1.0-cdh5.15.1spark-2.4.5-bin-hadoop2.6hadoop-2.6.0-cdh5.15.1jdk1.8.0_91tmp[hadoop
Tai_Park·2020-09-15 14:05

大数据入门：Spark+Kudu的广告业务项目实战笔记(二)

第一章点这里传送1.功能二开发统计省份、城市数量分布情况，按照provincename与cityname分组统计packagecom.imooc.bigdata.cp08.businessimportcom.imooc.bigdata.cp08.utils.SQLUtilsimportorg.apache.spark.sql.SparkSessionobjectProvinceCityStatAp
Tai_Park·2020-09-15 14:05

大数据入门：Spark+Kudu的广告业务项目实战笔记(一)

1.简介本项目需要实现：将广告数据的json文件放置在HDFS上，并利用spark进行ETL操作、分析操作，之后存储在kudu上，最后设定每天凌晨三点自动执行广告数据的分析存储操作。2.项目需求数据ETL：原始文件为JSON格式数据，需原始文件与IP库中数据进行解析统计各省市的地域分布情况统计广告投放的地域分布情况统计广告投放APP分布情况3.项目架构4.日志字段{"sessionid":"qld
Tai_Park·2020-09-15 13:23

Spark Streaming实时流处理项目实战笔记—— Flume实战案例（一）

实时流处理概述：数据量大时效性高需求：使用分布式日志收集框架Flume，从指定网络端口采集数据输出到控制台环境参数scala2.11.8官网【地址】http://flume.apache.org/FlumeUserGuide.html【配置文件截图】#example.conf:Asingle-nodeFlumeconfiguration#Namethecomponentsonthisagenta1
一个谦虚的青年·2020-09-13 19:17

uniapp项目实战笔记

目录1项目搭建1.1新建项目并运行1.2按照项目效果配置基本外观2搭建框架2.1配置tabbar3从后台获取数据3.1封装请求组件3.2搭建后台应用4首页页面4.1配置首页基础数据4.2轮播图4.3页面中的导航4.4首页推荐商品5单个商品的详情页5.1点击跳转5.2获取详情页数据5.3UI组件的使用6超市首页6.1完成基础布局6.2触底加载6.3下拉刷新6.4点击跳转到详情页7.联系我们7.1静态
youhebuke225·2020-09-11 21:54

大数据入门：Spark+Kudu的广告业务项目实战笔记(四)

Spark+Kudu的广告业务项目实战系列：Spark+Kudu的广告业务项目实战笔记(一)1.统计需求完成统计地域分布情况，需要原始请求数、有效请求数、广告请求数、参与竞价数、竞价成功数、广告主展示数
大数据技术与架构·2020-08-23 03:05

大数据入门：Spark+Kudu的广告业务项目实战笔记(六)

Spark+Kudu的广告业务项目实战系列：Spark+Kudu的广告业务项目实战笔记(一)本章目标：将代码打包并运行在服务器上。
大数据技术与架构·2020-08-23 03:05

大数据入门：Spark+Kudu的广告业务项目实战笔记(五)

Spark+Kudu的广告业务项目实战系列：Spark+Kudu的广告业务项目实战笔记(一)1.统计需求本章主要实现需求四：APP统计。
大数据技术与架构·2020-08-23 03:04

大数据入门：Spark+Kudu的广告业务项目实战笔记(三)

Spark+Kudu的广告业务项目实战系列：Spark+Kudu的广告业务项目实战笔记(一)这章的主要目标是对前两个需求的代码进行重构。
大数据技术与架构·2020-08-23 03:04

大数据入门：Spark+Kudu的广告业务项目实战笔记(二)

Spark+Kudu的广告业务项目实战系列：Spark+Kudu的广告业务项目实战笔记(一)1.功能二开发统计省份、城市数量分布情况，按照provincename与cityname分组统计packagecom.imooc.bigdata.cp08
大数据技术与架构·2020-08-23 03:04

微服务项目实战笔记4

集成springdataJPAJPA是Sun官方提出的Java持久化规范。所谓规范，即只定义标准规则，不提供现实。springDataJPA最顶层的接口是Repository,该接口是所有Repository类的父类。packagecom.springboot.demo.repository;importcom.springboot.demo.repository.model.User;impor
Rae_C·2020-08-22 16:51

微服务项目实战笔记5

Springboot事务管理事务有四大特性：ACID：原子性（Atomicity）一致性（consistency）隔离性（isolation）持久性（Durability）.spring既支持编程式事务管理（也称编码事务管理），又支持声明式事务管理。编程式事务管理是指事务管理代码嵌入业务方法中来控制事务的提交和回滚。在编码式事务中，必须在每个业务操作中包含额外的事务管理代码。声明式事务是指将事务管
Rae_C·2020-08-22 16:51

Spark+Kudu的广告业务项目实战笔记(一)

点击上方蓝色字体，选择“设为星标”回复”资源“获取更多资源大数据技术与架构点击右侧关注，大数据开发领域最强公众号！暴走大数据点击右侧关注，暴走大数据！1.简介本项目需要实现：将广告数据的json文件放置在HDFS上，并利用spark进行ETL操作、分析操作，之后存储在kudu上，最后设定每天凌晨三点自动执行广告数据的分析存储操作。2.项目需求数据ETL：原始文件为JSON格式数据，需原始文件与IP
大数据技术与架构·2020-08-21 05:18

原码,反码,补码,到底是个啥? -?，你来这看看吧。

写在前面:这里是小王成长日志，一名普通在校大学生，想成学习之余将自己的学习笔记分享出来，记录自己的成长轨迹，帮助可能需要的人，平时博客内容主要是一些系统的学习笔记，项目实战笔记，一些技术的探究和自己的一些思考
小王心里有人了·2020-08-05 03:42

【项目管理】项目实战笔记之五：里程碑管理

一、背景由于公司及部门的发展，项目经理已经开始面对人数众多，时间跨度较长的版本管理挑战。如张湘辉（1994年加盟微软，现任微软大中华区CTO）所说：以Windows7为例，包含七八千万条甚至上亿条代码，五六千人同时开发，还有很多合作伙伴确保周边产品兼容。对这样一个超大的项目而言，不能一眼盯到结果，不能像跑百米一样，始终盯着终点。我们的经验是盯终点肯定乱，因为要经历非常漫长的过程。从心理上说，当发现
小落勇士·2020-08-04 15:50

Unity3D项目实战笔记（5）：延时功能的几种实现

我所做过的系统，分单机版系统（2005年）、CS系统（2010年）、实时系统（2015年），各个系统均有“延时”功能：定时调度的；本博客说的是实时系统中的延时功能（基于Unity3D游戏引擎）。在Unity3D中，新建的脚本会默认继承MonoBehaviour，其中Update函数会被引擎自动调度，如在我的电脑上，Update函数被调用的周期为0.012s。那么Unity3D中，仅有通过Updat
weixin_30585437·2020-07-31 10:37

转：Unity延时功能的几种实现

转自《Unity3D项目实战笔记（5）：延时功能的几种实现》我所做过的系统，分单机版系统（2005年）、CS系统（2010年）、实时系统（2015年），各个系统均有“延时”功能：定时调度的；本博客说的是实时系统中的延时功能
dujiahei·2020-07-30 23:15

Vue项目实战笔记【二】

其次是一些依赖（根据自己用到的安装）我安装的有VueAxios用来发送ajax请求npminstall--saveaxiosvue-axios然后在main.js配置importaxiosfrom'axios'importVueAxiosfrom'vue-axios'Vue.use(VueAxios,axios)router，配置路由用的npminstallvue-router--save-dev
tiezhuLee·2020-07-28 07:54

Vue项目实战笔记【一】

第一步肯定是上官网vue学下基础知识，这是必须的对吧？比如v-model.v-for,v-if乱七八糟的，还有就是学完vue至少得知道什么是MVVM很多都会说用vue-cli，然后还需要安装一些东西，由于本人之前写前端一直用的HBuilder，然后在官网发现了HBuilderX。。。可以直接创建Vue项目，自然也就避免了很多繁琐的步骤，值得指出的是这里创建的项目使用的是vue中的webpack框架
tiezhuLee·2020-07-28 07:54

activiti5.16 项目实战笔记 并整合activiti modeler到项目实现业务人员自定义工作流程

Activiti项目实战笔记项目中用到的所有jar包和插件我都整理出来放在Activiti实战工具包(一)eclipse配置activiti开发环境首先在eclipse中装activiti插件方便开发过程中进行流程设计我这里主要写离线安装方法
我只想把名字改成拂晓神剑·2020-07-01 17:22

一文带你看懂多路复用与多路分解

写在前面:这里是小王成长日志，一名普通在校大学生，想成学习之余将自己的学习笔记分享出来，记录自己的成长轨迹，帮助可能需要的人，平时博客内容主要是一些系统的学习笔记，项目实战笔记，一些技术的探究和自己的一些思考
小王心里有人了·2020-06-29 16:44

没搞清运输层的UDP协议? -哎呀, 早来这看就好了啊

/抱拳写在前面:这里是小王成长日志，一名普通在校大学生，想成学习之余将自己的学习笔记分享出来，记录自己的成长轨迹，帮助可能需要的人，平时博客内容主要是一些系统的学习笔记，项目实战笔记，一些技术的探究和自己的一些思考
小王心里有人了·2020-06-29 16:44

一文带你看流水线协议、回退N步以及选择重传

写在前面:这里是小王成长日志，一名普通在校大学生，想成学习之余将自己的学习笔记分享出来，记录自己的成长轨迹，帮助可能需要的人，平时博客内容主要是一些学习笔记，项目实战笔记，一些技术的探究和自己的一些思考
小王心里有人了·2020-06-29 16:44

我们该如何对付花里胡哨的运算符优先级(C)

写在前面:这里是小王成长日志，一名普通在校大学生，想成学习之余将自己的学习笔记分享出来，记录自己的成长轨迹，帮助可能需要的人，平时博客内容主要是一些学习笔记，项目实战笔记，一些技术的探究和自己的一些思考
小王心里有人了·2020-06-29 16:12

别看了！C语言里的unsigned int/char 看我就够了

这里是小王成长日志，一名普通在校大学生，想在学习之余将自己的学习笔记分享出来，记录自己的成长轨迹，并且帮助可能需要的人，平时博客内容主要是一些学习笔记（系统的，会附带思维导图，就像我之前一个专栏-数据科学导论一样)，项目实战笔记
小王心里有人了·2020-06-29 16:12

《vue.js从入门到项目实战》的项目实战笔记

vue项目之启动项目前言：vue的基本知识重点讲述《vue.js从入门到项目实战》的第一章到第四章vue项目化重点讲述《vue.js从入门到项目实战》的第六章接下来就是对第八章的启动了。文章目录vue项目之启动项目前言：一、理论内容页面设计目录结构设计初始目录src目录结构webpack介绍FontAwesome介绍动态资源配置动态资源构建动态资源存储自定义组件二、启动线上商城三、启动企业网站理论
wsdchong之小马过河·2020-06-29 06:49

大数据入门：Spark+Kudu的广告业务项目实战笔记(五)

1.统计需求本章主要实现需求四：APP统计。需求如下：2.代码编写入口搭好：AppStatProcessor.process(spark)先看一下第一步的运行情况：packagecom.imooc.bigdata.cp08.businessimportcom.imooc.bigdata.cp08.`trait`.DataProcessimportcom.imooc.bigdata.cp08.uti
Tai_Park·2020-06-25 10:24

十大排序算法基本思想，动画演示及其C语言实现

十大排序算法基本思想及其C语言实现写在前面:这里是小王成长日志，一名普通在校大学生，想成学习之余将自己的学习笔记分享出来，记录自己的成长轨迹，帮助可能需要的人，平时博客内容主要是一些系统的学习笔记，项目实战笔记
北海以北没有小王·2020-06-21 13:49

一文带你看可靠数据传输协议RDT前后三个版本的原理关系以及有限状态机的解释

写在前面:这里是小王成长日志，一名普通在校大学生，想成学习之余将自己的学习笔记分享出来，记录自己的成长轨迹，帮助可能需要的人，平时博客内容主要是一些系统的学习笔记，项目实战笔记，一些技术的探究和自己的一些思考
北海以北没有小王·2020-06-21 13:48

面对焦虑我们怎么办 - 凭什么我们要去焦虑！

写在前面:这里是小王成长日志，一名普通在校大学生，想成学习之余将自己的学习笔记分享出来，记录自己的成长轨迹，帮助可能需要的人平时博客内容主要是一些系统的学习笔记，项目实战笔记，一些技术的探究和自己的一些思考
北海以北没有小王·2020-06-21 13:48

学习C语言从小白到专家你只需要这一篇博客-史上最全C语言学习资源整理

C语言资源整理写在前面:这里是小王成长日志，一名普通在校大学生，想成学习之余将自己的学习笔记分享出来，记录自己的成长轨迹，帮助可能需要的人，平时博客内容主要是一些系统的学习笔记，项目实战笔记，一些技术的探究和自己的一些思考
北海以北没有小王·2020-06-21 13:16

第十三周之QQ音乐移动端项目实战笔记

QQ音乐移动端项目涉及的技术栈rem的响应式单位；js中的正则；数据获取；zepto和zepto中的订阅发布；html5+css3；less;移动开发中的rem设置rem设置优点：在不同的屏幕下，字体的大小以及宽高的设置不能使用定值px，需要在不同的屏幕下按比例缩放；所以需要设置rem;rem相对于浏览器中的html根标签的fontSize大小成倍数设置；与其他值无关；实际开发实际开发中屏幕大小为
果木山·2020-03-01 00:52

Spark Streaming实时流处理项目实战笔记——使用IDEA+Maven构建开发环境

构建项目Pom文件2.112.4.32.6.0org.apache.sparkspark-core_${scala.version}${spark.version}org.apache.sparkspark-streaming_${scala.version}${spark.version}org.apache.sparkspark-sql_${scala.version}${spark.vers
一个谦虚的青年·2019-11-27 19:53

[项目实战笔记]-使用ThreadLocal请务必remove

场景说明:压测的时候发现调用某个接口同一个入参，返回的商品数据不一致。使用技术：threadLocal问题原因：使用ThreadLocal没有remove。导致问题：1内存溢出，ThreadLocal依赖没有释放，无法GC。2线程池的某个线程会被反复使用,ThreadLocal的生命周期不等于一次Request的生命周期，造成获取threadLocal内数据异常。get方法publicTget()
周仲景·2019-08-20 23:21

Spark Streaming实时流处理项目实战笔记

第二章分布式日志收集框架Flume课程目录业务现状分析=>flume概述=>flume架构及核心组件=>flume环境部署=>flume实战1、业务现状分析WebServer/ApplicationServer分散在各个机器上大数据平台Hadoop进行统计分析日志如何收集到Hadoop平台上解决方案及存在问题传统从Server到Hadoop处理上存在的问题1.难以监控2.IO的读写开销大3.容错
倩mys·2018-11-12 13:53

Spark Streaming实时流处理项目实战笔记一

SparkStreaming实时流处理项目实战笔记一视频资源下载：https://download.csdn.net/download/mys_mys/10778011第一章：课程介绍Hadoop环境：
倩mys·2018-11-11 20:06

SFB 项目经验-51-某上市企业2千人Exchange 2013升级2016高可用之伤01

SFB项目经验-51-某上市企业2千人Exchange2013升级2016高可用之伤01（带病撰写项目实战笔记）问题描述：2000人企业使用Exchange2013邮件服务器标准版，n年!
CTO_LiuJinFeng·2018-08-19 22:13

第一周项目练习笔记

1.项目实战笔记标签内如果文字不垂直居中，与行高有关系，行高与高度值相等的话，会使内容垂直居中；如果一个标签整体不垂直居中，则通过上下margin值来调节；通过行高与高度的变化，调节内容在垂直方向的位置
果木山·2018-07-19 20:16

Robot Framework项目实战笔记

1.仅有一个button的图片上传，使用choosefile无法搞定的情况下，需要引入AutoItLibrary，具体实现如下栗子：LibraryAutoItLibraryclickelementid=f_contractIdCardFrontPickerAutoItid=f_contractIdCardFrontPickerC:\\Users\\XX\\Pictures\\2612129497.
sunshine_nie·2017-11-14 21:30

Unity3D项目实战笔记（10）：Unity3D编译IPA的PostEvents–节约时间利器

最近，SDK支付等接入差不多了，就从Unity3D生成IPA(企业版License),然，需要手动执行的PostEvents竟然多大10项+,这些我默默的承受了1周时间，每次约浪费20分钟-额外的。    周末用了2天时间，研究一下官方的例子和雨松的相关博客2篇，总算是搞定了这件事情，开心！ 痛苦的前传：Unity3D导出为XCode工程后，有如下任务需要做Plist文件中CFBundl
王文刚_Unity3D·2015-12-02 22:51

Unity3D项目实战笔记（10）：Unity3D编译IPA的PostEvents–节约时间利器

最近，SDK支付等接入差不多了，就从Unity3D生成IPA(企业版License),然，需要手动执行的PostEvents竟然多大10项+,这些我默默的承受了1周时间，每次约浪费20分钟-额外的。    周末用了2天时间，研究一下官方的例子和雨松的相关博客2篇，总算是搞定了这件事情，开心！ 痛苦的前传：Unity3D导出为XCode工程后，有如下任务需要做Plist文件中CFBundleDeve
息田博客·2015-11-29 19:00

Unity3D项目实战笔记（5）：延时功能的几种实现

我所做过的系统，分单机版系统（2005年）、CS系统（2010年）、实时系统（2015年），各个系统均有“延时”功能：定时调度的；本博客说的是实时系统中的延时功能（基于Unity3D游戏引擎）。 在Unity3D中，新建的脚本会默认继承MonoBehaviour，其中Update函数会被引擎自动调度，如在我的电脑上，Update函数被调用的周期为0.012s。那么Unity3D中，仅有通过Upda
息田博客·2015-09-14 21:00

团队建设三境界

团队建设三境界项目实战笔记之六：团队建设的三种境界经过自己总结和项目经理们探讨，认为项目或部门团队建设可分为三个等级：一、乌合之众，强权政治（新手）很多新手都会经历这样的过程，新组建的团队冲突不断，大家对当各种制度措施
finer·2013-09-24 15:00

项目实战笔记之六：团队建设的三种境界

项目实战笔记之六：团队建设的三种境界经过自己总结和项目经理们探讨，认为项目或部门团队建设可分为三个等级：一、乌合之众，强权政治（新手）很多新手都会经历这样的过程，新组建的团队冲突不断，大家对当各种制度措施
qileilove·2013-06-04 10:00

项目实战笔记之五：里程碑管理

项目实战笔记之五：里程碑管理一、背景由于公司及部门的发展，项目经理已经开始面对人数众多，时间跨度较长的版本管理挑战。
qileilove·2013-06-03 13:00

项目实战笔记之四：团队建设（尊重）

项目实战笔记之四：团队建设（尊重）知识型工作者只有让他们感到被尊重，被认可才能激发出他们的工作热情。
qileilove·2013-05-31 11:00

项目实战笔记之三：时间估算的三步曲

项目实战笔记之三：时间估算的三步曲项目绩效的重要衡量指标之一便是时间，这里总结下亲身经历的三步曲。
qileilove·2013-05-30 10:00

项目实战笔记之一：高效会议的组织方法

项目实战笔记之一：高效会议的组织方法关于开会大家应该都不陌生，而且应该有不少人被过度频繁的会议“伤过”，甚至”谈会色变“。当一个组织的人员较多，结构复杂时这个问题会更加突出。
qileilove·2013-05-29 10:00

【项目管理】项目实战笔记之六：团队建设的三种境界

经过自己总结和项目经理们探讨，认为项目或部门团队建设可分为三个等级：一、乌合之众，强权政治（新手）    很多新手都会经历这样的过程，新组建的团队冲突不断，大家对当各种制度措施，报以反感。为保证执行力和项目成功，项目经理会选择强权压制，尤其是技术比较好的项目经理。大抵的逻辑是“我是老大并且我资深，要听我的”。最终的结果是大家对项目目标已经完全不感兴趣，一些冲突升级到个人情感冲突，项目经理左右突击，
liangjingbo·2012-07-02 18:00

【项目管理】项目实战笔记之五：里程碑管理

一、背景由于公司及部门的发展，项目经理已经开始面对人数众多，时间跨度较长的版本管理挑战。如张湘辉（1994年加盟微软，现任微软大中华区CTO）所说：以Windows 7为例，包含七八千万条甚至上亿条代码，五六千人同时开发，还有很多合作伙伴确保周边产品兼容。对这样一个超大的项目而言，不能一眼盯到结果，不能像跑百米一样，始终盯着终点。我们的经验是盯终点肯定乱，因为要经历非常漫长的过程。从心理上说，当发
liangjingbo·2012-04-27 23:00
上一页 1 2 3 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他