大数据学习记录

大数据入门-大数据技术概述(二)

目录大数据入门系列文章1.大数据入门-大数据是什么2.大数据入门-大数据技术概述(一)一、简介二、技术详解1.分布式协调服务：Zookeeper2.分布式资源管理器：Yarn3.计算引擎：Spark4.
水坚石青·2024-02-04 11:11

大数据入门--zookeeper（一）--集群搭建与常用指令

Zookeeper单机搭建下载官方安装包#解压tar-zxvfzookeeper-3.4.5.tar.gz-C/opt/module/#配置zoo.conf，只需要将conf/zoo_sample.conf重命名为zoo.conf即可mvconf/zoo_sample.cfgconf/zoo.cfg#启动bin/zkServer.shstart#查询状态bin/zkServer.shstatus#
许中宝·2024-02-04 11:40

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki4·2024-02-04 11:08

CTF web学习笔记

i春秋视频学习记录日常渗透测试（笔记）CTF学习记大佬的渗透测试记录web狗如何在CTF-web中的套路中实现反套路题目类型SQL注入SQL注入工具SQL解题思路SQL注入技巧XSSXSS注入工具XSS
hiddenCarry·2024-02-04 10:41

吴恩达：改善深层神经网络：超参数调试、正则化以及优化(Improving Deep Neural Networks:Hyperparameter tuning, Regularizatio)

@[toc]1.1训练、开发、测试集trainset训练集Devset验证集testset测试集小规模数据：训练集：其他=7:3大数据时代（超百万数据）：训练集占80%或者90%以上验证集和测试集来自同一分布如果只有训练集和验证集
Cache_wood·2024-02-04 10:48

Django学习记录01

1.项目结构djangoProject02├──manage.py【项目的管理，启动项目、创建app、数据管理】【不要动】【常常用】└──jangoProject02├──__init__.py├──settings.py【项目配置】【常常修改】├──urls.py【URL和函数的对应关系】【常常修改】├──asgi.py【接收网络请求】【不要动】└──wsgi.py【接收网络请求】【不要动】dj
Yoin.·2024-02-04 09:56

智慧水务（水厂）大数据平台，打造水务运营管理驾驶舱

以物联感知技术、大数据、智能控制、云计算、人工智能、数字孪生、AI算法、虚拟现实技术为核心，以监测仪表、通讯网络、数据库系统、数据中台、模型软件、前台展示、智慧运维等产
郭靖守襄阳【软芯民用】·2024-02-04 09:52

大数据领域的数据仓库

在大数据领域，数据仓库（DataWarehouse）是一个用于存储、管理和分析大量数据的集中式系统。
薛定谔的zhu·2024-02-04 09:43

题记(39)--约数个数(大数据情况)

目录一、题目内容二、输入描述三、输出描述四、输入输出示例五、完整C语言代码一、题目内容输入n个整数,依次输出每个数的约数的个数二、输入描述输入的第一行为N，即数组的个数(N#includeintmain(){intN;while(scanf("%d",&N)!=EOF){int*a=(int*)malloc(N*sizeof(int));for(inti=0;i
INT小蔡·2024-02-04 09:08

转载-58同城离线计算平台设计与实践

本次分享将聚焦大数据平台离线计算和大家一起系统的探讨58在离线计算平台建设实践的思路、方案和问题解决之道。
无色的叶·2024-02-04 09:14

TensorFlow官方入门实操课程-一个神经元的网络（线性曲线预测）

基于如下的课程进行的学习记录TensorFlow官方入门实操课程#设置显卡内存使用率，根据使用率占用importosos.environ["TF_FORCE_GPU_ALLOW_GROWTH"]="true
尘埃飞舞·2024-02-04 09:03

消息队列服务Kafka揭秘：痛点、优势以及适用场景

摘要：消息队列Kafka是一个分布式的、高吞吐量、高可扩展性消息队列服务，广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等，是大数据生态中不可或缺的产品之一，阿里云提供全托管服务，用户无需部署运维
云栖社区v·2024-02-04 08:01

数据库-计算机三级学习记录-从ER图到关系模型

ER图实体（矩形）属性（圆角矩形）联系（菱形）ER图集成1.合并（消除冲突*，生成初步整体ER图）2.修改，重构冲突*：1.属性冲突（1.域冲突：属性范围，类型如整数与小数2.属性单位冲突：如斤与千克）2.命名冲突（1.同名异义2.异名同义）3.结构冲突（1.同一队形在不同应用中有不同的抽象，如职工在一部分被应用中被当作实体，一部分应用中被当作属性2.同一实体在不同子系统中的属性与次序不完全相同实
不笑的鬼·2024-02-04 08:00

数据库-计算机三级学习记录-习题总结3-第三章

习题总结3-第三章无损连接性：分解的若干连接重组时可以恢复到原来的数据表，数据记录既没有增加也没有减少。（元素不变）保持函数依赖：原关系模式含有的属性之间的隐含关系在分解之后不丢失。（联系不变）函数依赖的本质是根据属性间的依赖情况来判定关系是否有模型不合适的性质IDEFIX：介绍文章入口1标定型联系非标定型联系分类联系不确定关系介绍文章入口2直角矩形（独立实体集）圆角矩形（从属或附属实体集）ER图
不笑的鬼·2024-02-04 08:00

数据库-计算机三级学习记录-2需求分析

需求分析参照b站【计算机三级数据库技术】1.需求分析的概念和意义需求是值用户对软件的功能和性能的要求，就是用户希望软件能做什么事情，能完成什么样的功能，达到什么样的性能。需求分析是在计算机系统的软件功能分配和软件设计之间起重要桥梁作用的一项软件工程活动。描述待开发的系统所要完成的功能。需求分析使得系统工程师能够刻画出软件的功能和性能，指明软件和系统其他元素的接口，并建立软件必须满足的约束。需求分析
不笑的鬼·2024-02-04 08:30

数据库-计算机三级学习记录-3数据库结构设计

数据库结构设计参照b站【计算机三级数据库技术】一个设计良好的数据库，在很大程度上决定了系统的成功与否。数据库概念设计一般分为：数据库逻辑设计数据库物理设计概念设计是数据库设计的核心环节。通过对用户需求进行综合、归纳与抽象，形成一个独立于具体DBMS的概念模型。1、数据库概念设计的目标1.定义和描述应用领域设计的数据范围2.获取信息模型3.描述数据的属性特征4.描述数据之间的关系5.定义和描述数据的
不笑的鬼·2024-02-04 08:30

数据库-计算机三级学习记录-习题总结1-第一章

数据库的三级模式由外模式、模式、内模式构成。外模式是用户可见的部分数据的存在形式；模式可以等价为全体数据的逻辑结构且用户不可见，是三级模式的中间部分；内模式对应数据库的物理结构和储存方式。数据库三级模式结构:①内模式也称存储模式或物理模式，它是数据物理结构和存储结构的描述，是数据在数据库内部的表示方式。并且一个数库只有一个内模式。②模式也称逻辑模式，是数据库中全体数据的逻辑结构和和特征的描述，是所
不笑的鬼·2024-02-04 08:30

数据库-计算机三级学习记录-4DBAS功能概要设计

DBAS功能概要设计参照b站【计算机三级数据库技术】DBAS功能设计包括应用软件中的数据库事务设计和应用程序设计。功能设计过程一般被划分为总体设计、概要设计和详细设计。而具体到数据库事务设计部分，又可分成事务概要设计和事务详细设计。完成系统设计工作之后,就进入系统实现与部署阶段。1.软件体系结构与设计过程➢软件体系结构又称软件架构，软件体系结构={构件，连接件，约束}软件体系结构是软件系统中最本质
不笑的鬼·2024-02-04 08:58

IT行业有哪些证书含金量高？

IT行业涵盖了广泛的领域，包括软件开发、网络管理、数据库管理、信息安全、云计算、人工智能、大数据分析等多个方面。
番茄不是西红柿1·2024-02-04 08:56

STM32--HAL库定时器学习记录（易懂）--持续学习

一、什么是定时器定时器就是计数器，通过计数完成一系列功能。二、定时器的分类定时器分为基本定时器、通用定时器、高级定时器。级别不同，功能不同。级别越高，功能越强。三、定时器（计数器）三个重要寄存器预分频器PSC；通过分频器可以设定定时器的频率，即为APB1/APB2timerclocks除以（PSC+1），为什么要减一呢？0~（80-1）；0计数到80-1计数80个；0计数到80是计数81个脉冲！_
悲喜自渡721·2024-02-04 07:20

文心一言APP上线数字分身功能；王仲远加入智源研究院任院长；商汤科技发布新版日日新·商量大语言模型丨每日大事件...

‍大数据产业创新服务媒体——聚焦数据·改变商业企业动态Meta将于今年在数据中心部署新版本的内部定制AI芯片2月2日消息，Meta将于2024年部署新款自研的定制款芯片到旗下数据中心，以支持人工智能。
数据猿·2024-02-04 07:13

隐私计算行业要步入寒冬？还可以再抢救一下！

大数据产业创新服务媒体——聚焦数据·改变商业在前两年，隐私计算这个细分领域可谓数据安全行业的明星选手，得到很多的关注，并被赋予很大的期待。
数据猿·2024-02-04 07:43

【大数据面试题】001 Flink 的 Checkpoint 原理

一步一个脚印，一天一道大数据面试题。Flink是大数据实时处理计算框架。实时框架对检查点，错误恢复的功能要比离线的更复杂，所以一起来了解Flink的Checkpoint机制吧。
Jiweilai1·2024-02-04 07:13

中国大学生计算机设计大赛与大数据应用主题赛

中国大学生计算机设计大赛与大数据应用主题赛中国大学生计算机设计大赛（简称“大赛”或4C）始筹于2007年，首届于2008年，已经举办了16届80场赛事。
泰迪智能科技·2024-02-04 06:41

镜舟科技客户成功团队负责人孟庆欢：湖仓一体将成为数据架构的新范式

大数据产业创新服务媒体——聚焦数据·改变商业随着数字化的概念逐步深入不同领域企业的运营中，业务形态和数字化路径也越来越丰富。这也为企业数据处理、储存的方式提出了更多要求。
数据猿·2024-02-04 06:40

类银河恶魔城学习记录1-6 Flip基本设置源代码 P33

Alex教程每一P的教程原代码加上我自己的理解初步理解写的注释，可供学习Alex教程的人参考【Unity教程】从0编程制作类银河恶魔城游戏_哔哩哔哩_bilibiliPlayer.csusingSystem.Collections;usingSystem.Collections.Generic;usingUnity.VisualScripting;usingUnityEngine;publiccl
SuKacZev·2024-02-04 06:43

深度学习和大数据技术的进步在自然语言处理领域的应用

文章目录每日一句正能量前言一、深度学习在NLP中的应用二、大数据技术在NLP中的应用三、深度学习和大数据技术的影响四、应用场景后记每日一句正能量努力学习，勤奋工作，让青春更加光彩。
想你依然心痛·2024-02-04 06:41

类银河恶魔城学习记录1-7-DashState源代码 P34

Alex教程每一P的教程原代码加上我自己的理解初步理解写的注释，可供学习Alex教程的人参考【Unity教程】从0编程制作类银河恶魔城游戏_哔哩哔哩_bilibiliPlayer.csusingSystem.Collections;usingSystem.Collections.Generic;usingUnity.VisualScripting;usingUnityEngine;publiccl
SuKacZev·2024-02-04 06:09

类银河恶魔城学习记录1-8 PlayerDash补全 P35

Alex教程每一P的教程原代码加上我自己的理解初步理解写的注释，可供学习Alex教程的人参考【Unity教程】从0编程制作类银河恶魔城游戏_哔哩哔哩_bilibiliPlayer.csusingSystem.Collections;usingSystem.Collections.Generic;usingUnity.VisualScripting;usingUnityEngine;publiccl
SuKacZev·2024-02-04 06:09

子雨大数据之Spark入门教程---Spark入门：RDD的设计与运行原理1.3

Spark的核心是建立在统一的抽象RDD之上，使得Spark的各个组件可以无缝进行集成，在同一个应用程序中完成大数据计算任务。
千寻～·2024-02-04 06:38

大数据本地环境搭建03-Spark搭建

需要提前部署好Zookeeper/Hadoop/Hive环境1Local模式1.1上传压缩包下载链接链接：https://pan.baidu.com/s/1rLq39ddxh7np7JKiuRAhDA?pwd=e20h提取码：e20h将spark-3.1.2-bin-hadoop3.2.tar.gz压缩包到node1下的/export/server目录1.2解压压缩包tar-zxvf/export
OnePandas·2024-02-04 06:31

redis(基础)

目录一、十大数据类型(一)、redis键(keys)(二)、String1、setkeyvalue2、getrange/setrange(获取指定区间内的值)3、数值增减4、获取字符串长度、字符串追加5
一+一加1·2024-02-04 06:25

大学网课怎么搜题答案？ #其他#职场发展

大学生必备，这条笔记大数据一定定要推给刚上大学的学弟学妹！！
复古蛋卷·2024-02-04 06:53

MySQL调优

优化类型大概分类三个类型结构/架构优化：读写分离、集群热备、分布式架构、引入缓存/消息/搜索中间件、分库分表、中台架构（大数据中台、基础设施中台）等配置/参数优化：调整应用系统中各层面的配置文件、启动参数达到优化性能的目标代码
whiteBrocade·2024-02-04 06:48

Hadoop大数据实战系列文章之Hive

hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，Hive定义了简单的类SQL查询语言，称为HQL，它允许熟悉SQL的用户查询数据可以将sql语句转换为MapReduce任务进行运行，不必开发专门的MapReduce。毕竟会写SQL的人比写JAVA的人多，这样可以让一大批运营人员直接获取海量数据。在数据仓库建设中，HIVE灵活易用且
测试帮日记·2024-02-04 05:45

基于Python的徐州市天气信息可视化分析系统的设计与实现+04600(免费领源码、附论文）可做计算机毕业设计JAVA、PHP、爬虫、APP、小程序、C#、C++、python、数据可视化、大数据、文

基于flask徐州市天气信息可视化分析系统摘要信息化社会内需要与之针对性的信息获取途径，但是途径的扩展基本上为人们所努力的方向，由于站在的角度存在偏差，人们经常能够获得不同类型信息，这也是技术最为难以攻克的课题。针对天气信息等问题，对天气信息进行研究分析，然后开发设计出天气信息可视化分析系统以解决问题。天气信息可视化分析系统主要功能模块包括系统首页、轮播图、公告消息、资源管理（天气资讯、资讯分类）
bysjwa813·2024-02-04 05:08

大数据学习之Redis，十大数据类型的具体应用（五）

目录3.9Redis地理空间（GEO）简介原理Redis在3.2版本以后增加了地理位置的处理哦命令命令实操如何获得某个地址的经纬度3.9Redis地理空间（GEO）简介移动互联网时代LBS应用越来越多，交友软件中附近的小姐姐、外卖软件中附近的美食店铺、高德地图附近的核酸检査点等等，那这种附近各种形形色色的XXX地址位置选择是如何实现的?地球上的地理位置是使用二维的经纬度表示，经度范围(-180,1
十二点的泡面·2024-02-04 05:37

主流DDR2内存芯片编号解析

本文主要内容转自有备无患主流DDR2内存芯片编号解析仅限个人参考与学习记录，如有侵权请联系删除。
彼华之年·2024-02-04 05:23

学习小组Day2笔记--（齐晓鹏）

本来累的不想学习了，但是为了钱晚上还是学习了三个小时，以下是学习记录：1.Xshell安装安装时按照花花的方法安装即可，我安装时出现了报错。image.png经过上网查询，卸载高版本的补丁即可。
齐晓鹏·2024-02-04 05:50

Day16学习记录

#c语言知识1.字符串格式化sprintf()#includeintsprintf(char*str,constchar*format);功能：根据参数format字符串来转换并格式化数据，然后将结果输出到str指定的空间中，直到出现字符串结束符’\0’为止。参数：str——字符串首地址format——字符串格式，用法和printf()一样返回值：成功——实际格式化的字符个数失败——-1（存在字符
好好编码·2024-02-04 05:46

Day14学习记录

#c语言知识1.字符串查找字符串2.指针与字符串（1）（2）（3）修改（4）指针数组、字符串数组对字符串进行排序（改变的是地址不是内容）找首字符进行比较，交换指针数组元素进行排序。3.字符指针作为函数参数计算字符串有效长度（数组版）（指针版）4.const修饰的指针（1）（2）constchar*p；指向常量的指针可以修改指针变量的值，不可以修改指针变量指向内存空间的值。char*constp=c
好好编码·2024-02-04 05:45

Day15学习记录

#c语言知识1.统计字符个数2.字符串反转模型（逆置）（数组版）（指针版）3.回文字符串4.字符串处理函数（1）字符串拷贝strcpy()#includechar*strcpy(char*dest,constchar*src);【前面不能加const】功能：把src所指向的字符串复制到dest所指向的空间中，’\0’也会拷贝过去。参数：dest——目的字符串首地址src——源字符首地址返回值：成功
好好编码·2024-02-04 05:45

Day17、18、19学习记录

#c语言知识内存管理1.作用域（1）代码块作用域（代码块是{}之间的一段代码）（2）函数作用域（3）文件作用域2.局部变量（自动变量auto）：在函数（代码块{}）内部定义的变量（1）作用域：在函数内部（2）生命周期：从变量定义到函数结束*局部变量在栈区*未赋初值，内容随机*形参是局部变量的一种3.全局变量在函数外部定义的变量（1）作用域：整个项目中所有文件（如果在其他文件中使用需要声明）（2）生
好好编码·2024-02-04 05:45

大数据组件部署下载链接

Hadoop2.7下载连接:https://archive.apache.org/dist/hadoop/core/hadoop-2.7.6/Hive2.3.2下载连接：http://archive.apache.org/dist/hive/hive-2.3.2/Zookeeper下载连接：https://archive.apache.org/dist/zookeeper/zookeeper-3.
运维道上奔跑者·2024-02-04 05:13

【大数据开发运维解决方案】Hadoop+Hive+HBase+Kylin 伪分布式安装指南

Hadoop2.7.6+Mysql5.7+Hive2.3.2+Hbase1.4.9+Kylin2.4单机伪分布式安装文档注意：####################################################################本文档已经有了最新版本，主要改动地方为：1、zookeeper改为使用安装的外置zookeeper而非hbase自带zookeeper，新
运维道上奔跑者·2024-02-04 05:43

Java 枚举(enum)

、自定义枚举类1、步骤2、代码3、使用三、enum定义枚举类1、定义2、使用3、switch中使用枚举类4、有关构造函数5、实现接口的枚举类6、有抽象方法的枚举类前言本篇内容是对Java中的枚举类进行学习记录一
右璇·2024-02-04 04:04

基于Java校园网书店详细设计和实现

Java技术领域和学生毕业项目实战,高校老师/讲师/同行前辈交流✌主要内容：SpringBoot、Vue、SSM、HLMT、Jsp、PHP、Nodejs、Python、爬虫、数据可视化、小程序、安卓app、大数据
java李杨勇·2024-02-04 04:58

嵌入式学习日记（三）

嵌入式学习记录2018.11.8理论学习阶段计算机科学导论（原书第二版）第15章数据压缩学到的新知识1数据压缩分类：无损压缩和有损压缩2无损压缩的压缩方式有三种：游程长度编码、赫夫曼编码和LZ编码3介绍的有损压缩的三种方法
huyz_2008·2024-02-04 04:46

嵌入式学习日记（四）

嵌入式学习记录2018.11.9理论学习阶段计算机科学导论（原书第二版）第16章安全学到的新知识1安全的三个目标：机密性、完整性和可用性2安全攻击分为针对机密性的威胁、对完整性的威胁和对可用性的威胁3为了达到安全目标和防止安全攻击
huyz_2008·2024-02-04 04:46

2023年全球软件开发大会（QCon上海站2023）：核心内容与学习收获（附大会核心PPT下载）

大会以“未来软件开发的创新与演进”为主题，涵盖了从前端到后端、从云计算到人工智能、从大数据到物联网等多个领域。一、峰会核心内容1、人工智能与
百家峰会·2024-02-04 02:15
上一页 31 32 33 34 35 36 37 38 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他