大数据系统开发笔记第21页

看这篇就够了丨基于Calcite框架的SQL语法扩展探索

Calcite在大数据系统中有着广泛的运用,比如ApacheFlink,ApacheDrill等都大量使用了Calcite，理解Calcite的原理可以说已经成为理解大数据系统中SQL访问层实现原理的必备条件之一

·2023-01-12 19:20

基于安卓android studio的日记APP 笔记APP或者备忘录APP 设计开发

一项目简介笔记APP项目可以用户进行注册，登录，可以查看笔记列表发布笔记修改笔记删除笔记日历记录，清单列表，发布清单，修改清单，删除清单，个人中心，退出系统等功能二项目功能结构图三项目功能开发笔记首页:

MarkCoder·2023-01-10 03:41

再看Lambda架构

博客原文地址最近看了一本《大数据系统构建》的书，发现之前对于Lambda架构的理解还是不够深入和清晰。

boydfd·2023-01-09 10:38

物联网开发笔记（26）- 使用Micropython开发ESP32开发板之控制LCD1602显示屏（续）

上一节介绍了使用i2c来控制LCD1602显示屏，那么使用GPIO怎么控制LCD1602显示屏呢？使用GPIO又分为8bit和4bit两种模式，比较常用的4bit模式，因为它占用GPIO口比较少。一、目的使用MicroPython开发ESP32开发板，通过GPIO方法来控制LCD1602显示屏二、环境ESP32+LCD1602显示屏+ThonnyIDE+面包板（非必须）+一个220欧姆的色环电阻+

魔都飘雪·2023-01-08 22:05

Python游戏开发笔记之pygame库（一）

文章目录前言pygame安装开发框架屏幕窗口-pygame.display位图操作-pygame.transform事件响应-pygame.event事件类型-event.type具体事件-event.key绘制图形-pygame.draw绘制文字-pygame.freetype色彩机制-pygame.Color二维坐标-pygame.math.Vector2添加音乐-pypame.总结前言记录p

Mr_Stutter·2023-01-08 15:12

parquet-tools用法详解

1.parquet-tools用途大数据系统里面，parquet是常见的一种列存储压缩格式。

bitcarmanlee·2023-01-07 12:40

java项目后端开发-购物商场mall项目开发笔记（1）

购物商场开发，可作为本、硕应届生积累项目经验用Nginx简介Nginx是什么？Nginx能干什么？Nginx特点Nginx常用命令Nginx本地玩耍注意事项git简介简介特点git基础配置项目初始化概要安装IDEA(15版本）maven创建web项目并验证Git创建仓库及初始化Maven之POM初始化项目包结构设计Mybatis三剑客web.xml初始化Spring配置初始化Logback初始化F

double_c之·2023-01-05 16:42

在C++上如何使用OpenCV头文件是什么_OpenCV开发笔记（）：使用mingw530_32编译openCV3.4.1源码，搭建Qt5.9.3的openCV开发环境...

搭建openCV3环境第一步：下载CMake并配置系统环境。到官网下载最新版本的CMake：https://cmake.org/download/因为官网下载太慢，我们到其他地方下一个版本3.10，百度自己下载。解压到当前文件夹，将cmake添加进系统PAPH使用命令行，输入cmake–version查看，显示版本号表示添加路径成功。第二步：下载openCV3.4.1。下载源码，目前最新的版本，我

weixin_39832965·2023-01-04 10:44

直方图的算法与图表

开发笔记，有缘人，阅{{msg}}5sdfsfdsdfsdfsdfsdfsdffdCPK测试sdfsfdsdfsdfsdfsdfsdffddfsdfsdf5555{{msg}}body{/*background-image

chuan6752·2023-01-03 14:55

人工智能的发展历程

就金融行业而言，《规划》指出，要在智能金融方面，建立金融大数据系统，提升金融多媒体数据处理与理解能力；创新智能金融产品和服务，发展金融新业

qq_45293105·2023-01-03 08:45

大数据系统体系架构（含图示）

目录1大数据体系架构图2数据采集层3数据计算层4数据服务层5数据应用层1大数据体系架构图2数据采集层阿里的的日志采集包括两大体系：Aplus.JS是Web端的日志采集技术方案，UserTrack是APP端的日志采集技术方案；在采集技术基础上，阿里用面向各个场景的埋点规范，来满足通用浏览、点击、特殊交互、APP事件、H5及APP里的H5和Native日志数据打通等多种业务场景；同时建立了一套高性能、

hellosc01·2022-12-30 05:54

大数据在智慧城市建设中的应用

随着智慧城市的不断建设和发展，大数据系统和数据处理也变得越来越重要。那么，大数据在智慧城市建设中的应用有哪些呢？

成都远石·2022-12-29 19:41

分享思路：Python+Spark招聘爬虫可视化系统招聘数据分析 Hadoop职位可视化大数据毕业设计 51job数据分析(可选加推荐算法)

数据可视化啰里啰嗦适合大数据毕业设计、数据分析、爬虫类计算机毕业设计可二次开发选加推荐算法(协同过滤算法等或者调用SparkML库)数据处理流程本环节主要讲述的是对于整体项目功能的设计，设计方案为主要是由大数据系统以及可视化前端子系统组成

haochengxu2022·2022-12-27 10:01

elastic stack 那些事【7】

聚合分析aggregationes在搜索功能之外，提供的针对数据统计分析的功能功能丰富，提供bucketmetricpipeline等多种分析方式实时性高，所有结果都是即时返回，而hadoop等大数据系统是

·2022-12-26 20:07

小说阅读器开发笔记（一）文件的读写

小说阅读器开发笔记（一）文件的读写标签（空格分隔）：安卓开发小说阅读器文件读写借着空闲的时间，想要开发一款小说阅读器，一是满足自己的需求，二是锻炼下自己的能力。

wathinst·2022-12-26 07:56

T31开发笔记：EC200T-CN 4G模块调试

若该文为原创文章，转载请注明原文出处一、硬件和开发环境1、硬件：T31X+SC5235+EC200T-CN2、开发环境：ubuntu16.04-64bit3、编译器：mips-gcc540-glibc222-32bit-r3.3.0.tar.gz注：板子和4G模块某淘上淘的，uboot和内核是自己裁剪移植的，没有移植wifi，所以USB接口未使用；EC200T-CN使用的是USB接口，电源外供5V

殷忆枫·2022-12-25 06:10

初识大数据采集

在大数据系统体系中，数据源、数据采集是第一环。

小麦兜Data·2022-12-24 12:00

DJI OSDK开发笔记（N3飞控）（1）——开发工作流程

DJIOSDK开发笔记（N3飞控）（1）——开发工作流程API层次结构硬件设置一般设置数据串口连接器引脚排列连接到记载计算机软件环境设置所有平台下载SDK和所需工具更新固件启用OSDKAPI板载SDK应用注册飞行平台激活

wzsrcd·2022-12-23 11:53

【QT开发笔记-基础篇】| 第五章绘图QPainter | 5.6 矩形、圆角矩形

本节对应的视频讲解：B_站_视_频https://www.bilibili.com/video/BV1mg411J7u5本节讲解如何绘制矩形、圆角矩形1.相关的API直接查看官方的帮助文档，可以看到有多个重载的方法用于绘制矩形、圆角矩形1.1矩形//带F表示参数为浮点数，否则为整型数voiddrawRect(constQRectF&rectangle)voiddrawRect(constQRect

大轮明王讲QT·2022-12-23 07:10

CANN 算子开发笔记AI CPU 篇 2022_07_08

day11.入门学习文章目录day11.入门学习1.1何为算子1.1.1算子名称(name)1.1.2算子类型(type)1.1.3张量（Tensor）1.1.4数据排布格式（Format）1.1.5形状（Shape）1.1.6轴（axis）1.1.7权重（weight）1.1.8偏差（bias）2.AICPU简介2.1概述2.2算子编译运行流程2.2.1算子编译运行逻辑架构2.2.2算子编译流程

风尘23187·2022-12-22 16:50

CANN训练营第三季_昇腾CANN算子精讲课_TBE算子Sinh开发笔记_环境搭建（一）

一、环境配置华为云服务器：AI加速型|ai1s.large.4|2vCPUs|8GiB|1*HUAWEIAscend310/1*8G操作系统：Ubuntu18.04CANN版本：6.0.RC1.alpha001MINDSTUDIO版本：5.0.RC3Python版本：3.7.5二、购买弹性云服务器三、为服务器配置个人账户HwHiAiUser(可选）1）添加用户组和用户groupaddHwHiAiU

_PeterXing_·2022-12-22 16:07

CANN训练营第三季_昇腾CANN算子精讲课_TBE算子Sinh开发笔记_UT测试（三）

UT测试：UT测试是为了测试算子代码的正确性和不同场景下的覆盖率的测试，UT测试在硬件CPU上执行，MindStudio提供了gtest框架方便进行UT测试。参考：https://www.hiascend.com/document/detail/zh/mindstudio/50RC2/msug/msug_000125.html1.打开MindStudio软件cdMindStudio/bin./Mi

_PeterXing_·2022-12-22 16:07

CANN训练营第三季_昇腾CANN算子精讲课_TBE算子Sinh开发笔记_算子开发（二）

1.作业算子要求2.检查版本对应关系在Mindstudio软件包下载界面可以检查安装的mindstudio版本和cann版本是否一致，如果不一致可能会导致后面算子工程创建出错。这里我用的MindStudio5.0RC3对应的CANN商用版本为6.0RC1，我使用6.0.RC1.alpha001也没有问题。查看CANN版本cd/usr/local/Ascend/ascend-toolkit/late

_PeterXing_·2022-12-22 16:02

ReactNative开发笔记（持续更新...）

本文均为RN开发过程中遇到的问题、坑点的分析及解决方案，各问题点之间无关联，希望能帮助读者少走弯路，持续更新中...（2022年11月8日更新）原文链接：http://www.kovli.com/2018/06/...作者:Kovli-yarn操作时遇到Integritycheckfailedfor...(computedintegritydoesn'tmatchourrecords,got"sh

·2022-12-20 16:10

Atlas 200DK的开发笔记分享

Atlas200DK板子的官方材料真的是非常乱，细节信息丢失非常严重，很多细节完全是靠开发者自己猜测的，这里记录一下我觉得有用的东西以及一些使用的软件配置。开发工具MindStudio是一套基于华为自研NPU开发的AI全栈开发平台，包括基于芯片的算子开发、调试、调优以及第三方算子开发，同时还包括网络层的网络移植、优化和分析，另外在业务引擎层提供了一套可视化的AI引擎拖拽式编程服务，极大的降低了AI

badman250·2022-12-20 10:37

Cocos Creater（3.6.1）开发笔记——Typscript

文章目录项目入门关于cocoscreator3.x关于TypeScript新建项目VSsettingjson配置屏蔽项事件节点添加脚本（事件）案例代码素材使用技巧素材组合固定布局（类似css）项目入门关于cocoscreator3.x相当于cocos所有版本的功能的综合，包含了成熟的2d和3d开发功能其他的cocos版本还有Cocos2dxCocosCreator2.xCocosCreator3.

鬼鬼骑士·2022-12-19 00:20

C#启程—游戏开发笔记

文章目录ideRider下载和安装创建C#基础工程（包含form）Rider去除语法警告C#笔记namespace找不到某个class（命名空间）c#相对路径（比较特别）双缓存技术窗体事件绑定窗体初始属性方法生成调式绑定事件成功窗体中调试功能实现说明实例代码正常使用ideRideride我们选择Rider为何不选vs？vs占硬盘内存太高了（20多G），而且Rider也是jetbrains的产品，i

鬼鬼骑士·2022-12-19 00:18

基于微信小程序的会议室预定平台开发笔记

业务背景会议室是一个单位或部门的共用资源,但在使用的时候往往会遇到时间冲突、预约困难、不方便协调等问题。目前大部分公司是统一在公司群聊中预约，每次预约时，都需要翻一下聊天记录，了解是否有人预定以及预定时间等。如果冲突则需要找到相关联系人进行沟通。查找历史预约记录麻烦。而现在员工人人都有微信，基于微信环境下的小程序，不用安装独立APP，访问方便。所以我们可以基于小程序，借助于会议室预约系统改善这种情

·2022-12-18 21:55

大恒相机sdk开发+opencv开发笔记二

大恒相机sdk开发+opencv开发笔记二一.理清相机工作流程首先我的相机是支持usb3.0的所以传输速率是很快的、从传输速率上进行比较:理论值上讲USB3.0的传输速度是4.8Gbps,是USB2.0

南方双木林·2022-12-17 16:32

StarRocks技术内幕 | 打造一款强大成熟的数据库有多难？

StarRocksPMC，负责查询方向的研发（本文转自其个人博客“编程小梦”）从2015年开始，我在美团先后维护和研发过ApacheHBase、ApacheKylin、ApacheDruid和ApacheDoris，对大数据系统和

StarRocks_labs·2022-12-17 05:18

对话智领云CEO彭锋：大数据平台如何进行云原生改造？｜甲子光年

智领云成立于2016年，专注于利用云原生技术将企业大数据系统各项组件容器化和服务化，帮助企业搭建数据和AI中台，轻松打造业务数据能力闭环，掌握全面、及时、更

LinkTime_Cloud·2022-12-16 16:02

Unity+C#开发笔记（七）| unity中继承MonoBehaviour类的脚本里的函数怎么调用 | ╭(●｀∀´●)╯╰(●’◡’●)╮

继上文，有个蠢货单例模式只是用来引用，突然遇到了一个继承了MonoBehaviour的类，然后unity跟你讲：不！你不可以在我这里这么用！啊这……吓得我当场百度...**************正文开始**************第一个脚本publicclass类1:MonoBehaviour别的地方引用：类1test=this.gameObject.AddComponent();test.Qi

浅岚。·2022-12-15 21:12

localdatetime获得时间搓_Java开发笔记（一百五十三）时间戳的获取和转换

日期时间是Java一个重要的数据类型，常见的日期时间格式通常为“yyyy-MM-ddHH:mm:ss”，但是计算机中存储的日期时间并非字符串形式，而是长整型的时间戳。因为字符串又占用空间又难以运算，相比之下，长整型只占用四个字节，普通的加减乘除运算更是不在话下，所以时间戳是最佳的日期时间存储方案。获取时间戳的代码很简单，只需调用System类的currentTimeMillis方法即可，如下所示：

weixin_39633276·2022-12-15 01:54

【Linux开发笔记】VSCode+WSL——Windows搭建最轻量便捷的Ubuntu/Linux开发环境

1.概述我们一般搭建Ubuntu开发环境都是采用VMware或者VirtualBox的虚拟机安装Ubuntu的方案，但是这样的方案会有几个弊端：安装、启动慢；使用图形桌面时卡顿、鼠标不跟手、打字有延迟；磁盘空间占用比较大；内存资源占用比较大；虚拟机网络的配置复杂；与物理机以及外部进行文件或数据交互比较繁琐；虚拟机本身比较容易出bug。再或者就是安装Windows+Ubuntu的双系统，这样的方式在

maoboxxx·2022-12-14 20:59

iOS开发笔记汇总

苹果官方文档入口苹果官方文档苹果底层源码下载地址计算机基础程序是如何映射到内存中的；程序的内存布局以及栈、堆原理；线程及线程安全；LLVM及其编译流程；HTTP1.x和HTTP/2的区别;iOS相关开发基础LLVM及其编译流程；Mach-O&重定向&符号绑定&符号重绑定；iOS程序启动-Dyld流程解析；iOS启动优化及二进制重排；iOS中方法调用的隐藏参数和结构体压栈；iOS中#pragmacl

希尔罗斯沃德_董·2022-12-14 17:34

46、linux开发笔记(主线更新)

一、安装Vmware161.1、Vmware16的下载1.2、Vmware16的安装二、安装Ubuntu202.1、Ubuntu20的下载2.2、Ubuntu20的安装1、新建一个文件夹并把下载好的Ubuntu20镜像放在里面2、打开Vmware并新建虚拟机2.3、首次设置root密码如果想二次修改密码，使用命令：sudopasswdroot //修改root用户密码sudopasswdhaut

Bao@Ting·2022-12-14 15:21

从源码到架构实战，Spring Boot+Spring Cloud微服务开发笔记全分享

就一个字“屌”分享一份由阿里p8大牛编写的【SpringBoot+SpringCloud微服务开发实战笔记】此份适合的读者：微服务开发入门人员，入门编程的学员，中级编程的学员，在校学生，微服务框架研究人员在当前技术迭代很快的情况下，本书从基础入门开始，然后一步步加深，希望可以把每个知识点描述清楚，希望读者可以快速上手，并加深对每个组件的理解。在本书的编写期间，我查找了很多资料，看过很多源码，使自己

·2022-12-14 14:25

人工智能是什么？我来告诉你！

就金融行业而言，《规划》指出，要在智能金融方面，建立金融大数据系统，提升金融多媒体数据处理与理解能力；创新智能金融产品和服务，发展金融新

是肉肉肉肉呀·2022-12-14 07:30

《MY大数据开发笔记》----hive知识点总结

hive的作用：hive最初的设计目的是为了给哪些精通sql但是不熟悉Hadoop的分析师，用来分析大规模的结构化的数据文件而设计的。首先最重要的一点：hive的使用和关系型数据库的使用方式类似（类sql语句），那我们为什么不使用关系型数据库而使用hive？1.hive能分析超大数据规模的数据。2.hive用于分析存储在文件中的结构化的数据。而关系型数据库不能。所以hive最初的设计目的是：给哪些

慢！有杀气·2022-12-12 09:42

Unity3D数字孪生开发笔记——软件基础篇

Unity3D数字孪生开发笔记（一）一、常用快捷键二、组件功能1、Material2、Camera3、InstantOC1>渲染管线2>OcclusionCulling3>LOD4、Light1>GlobalIlluminationa

聪 ~smart·2022-12-09 06:25

hololens开发笔记-DEP6957未能使用“通用身份验证”连接到设备

造成这个问题的原因：1、可能是你的Hololens的蓝牙打开了，导致出现了一个错误的IP地址，将蓝牙功能关闭即可；2、你的Hololens与电脑不在一个网段，即没有接到同一个路由器，检查你的网络连接即可；注：以上为笔者在开发中遇到的问题及解决方案，如有其他原因导致此问题，欢迎指正。

捞不起月亮的渔民·2022-12-08 07:21

智能家居 (10) ——人脸识别祥云平台编程使用(编译libcurl库支持SSL，安装SSL依赖库openSSL)

wget)curl库重新配置，编译，安装开启SSL后重新编译人脸识别.C文件传入图片的base64流最终实现人脸识别程序往期文章说明本章使用的平台是上位机Ubuntu，树莓派的要跟着这篇文章来：树莓派4B开发笔记

行稳方能走远·2022-12-07 17:33

ThingsBoard调试部署和性能分析

（图片仅为示意）开源大数据系统物联网大数据系统正在工业、半工业以及其他互联网技术领域获得广泛应用，良好的物联网大数据系统是架构高效、安全、可靠信息化系统的“底座”之一。

haiwen5668·2022-12-07 04:24

【ChatBot开发笔记】GPT2模型的导入、使用和分析，模型训练

Transformers是一个先进的NLP框架，适用于pytorch和tensorflow2.0，这边使用的GPT2框架是一个OpenAI的先进技术，在上下文连贯性和情感表达上有相当好的表现，实际使用时可以直接从transformer库导入：fromtransformers.models.gpt2.modeling_gpt2importGPT2Config,GPT2LMHeadModel其实Ope

Mars_阿火·2022-12-05 18:19

海思3518E开发笔记1.3——海思64位交叉编译工具链安装

目录分析安装兼容包错误解决分析在上一篇博文中，配置好makefile中的交叉编译工具链路径后依然显示找不到路径那么问题就在于交叉编译工具链可能是32位，而开发环境是64位的通过file指令查看果然是32位的，而虚拟机是64位的，所以不能运行有两个解决方案换32ubuntu装32位兼容包安装兼容包sudoapt-getupdatesudoaptinstallgcc-multilibsudoapt-g

Spark！·2022-12-05 13:39

视觉检测程序开发笔记

目录简介将HALCON/.NET添加到应用程序添加控件引用dll调用Halcon算子程序示例

shengyin714959·2022-12-03 19:00

异构消息队列的海量数据流转Connect架构解析

而在业务系统，或者大数据系统中异构数据源之间的数据

移动云开发者联盟·2022-12-02 05:41

Android-开发笔记

安卓学习几个月，感觉脑瓜子嗡嗡的。荣耀Magic2编译错误，暂时未定位问题，搁置。。。E/AwareLog:AtomicFileUtils:readFileLinesfilenotexist:android.util.AtomicFile@d0e88ecE/AwareLog:AtomicFileUtils:readFileLinesfilenotexist:android.util.AtomicF

DylanPP·2022-12-01 15:05

云计算技术与应用A卷（2020年附带标准答案）

按照给出的云平台架构进行IaaS、PaaS、大数据系统部署及运维管理，并进行云存储网盘（包括web及安卓客户端）开发、大数据分析应用开发和微信小程序开发，最后提交工程文档。

九分横南·2022-11-30 14:24

Asp-Net-Core开发笔记：接口返回json对象出现套娃递归问题

前言看了下推送记录，一个月前，OK，我又变成月更了o(╯□╰)o，这绝对不行！[○･｀Д´･○]所以今天来更新了其实不是我懒得更新或者是太忙，其实是最近在写一篇很长的博客，一直没写完(Ĭ^Ĭ)另外快过年了，我领到了公众号作者的红包封面定制机会，接下来找时间设计（copy）一个好看的红包封面作为粉丝福利发给各位读者大大好吧，先进入正题……有一个关于WebApi序列化的问题，跟设计有关，但在涉及到关联

dotNET跨平台·2022-11-29 21:14

推荐频道

大数据系统开发笔记