大数据-概述第94页

分布式任务调度框架XXL-JOB详解

分布式任务调度概述场景:如12306网站根据不同车次设置放票时间点，商品成功发货后向客户发送短信提醒等任务,某财务系统需要在每天上午10天前统计前一天的账单数据任务的调度是指系统为了完成特定业务，基于给定的时间点

echo 云清·2024-02-04 11:02

《云原生安全攻防》-- 容器安全风险分析

在这个课程中，我们将学习以下内容：容器技术概述：什么是容器技术以及它解决了什么问题。探索容器架构：深入了解容器、镜像、镜像仓库等核心概念。安全风险分析：逐层分析容器架构，识别各层面可能存在的安全风险。

Bypass--·2024-02-04 11:32

大数据Zookeeper--集群操作

文章目录集群操作集群安装选举机制（面试重点）Zookeeper选举机制——第一次启动Zookeeper选举机制——非第一次启动ZK集群启动停止脚本客户端命令行操作命令行语法znode节点数据信息节点类型（持久/短暂/有序号/无序号）监听器原理节点删除和查看客户端API操作IDEA环境搭建创建Zookeeper客户端创建子节点获取子节点并监听节点变化判断Znode是否存在客户端向服务端写数据流程写流

泛黄的咖啡店·2024-02-04 11:15

大数据Hive--安装和配置

文章目录一、Hive的安装地址1.1Hive安装部署1.1.1安装Hive1.1.2启动Hive二、MySQL的安装地址2.1安装MySQL2.2配置MySQL2.3卸载MySQL三、配置Hive元数据存储到MySQL3.1配置Hive元数据存储到MySQL3.2验证元数据是否配置成功3.3查看MySQL中的元数据四、Hive服务部署4.1hiveserver2服务4.2metastore服务五、

泛黄的咖啡店·2024-02-04 11:44

大数据Hive--函数

数值函数1.2.3字符串函数1.2.4日期函数1.2.5流程控制函数1.2.6集合函数1.2.7案列演示1.2.7.1数据准备1.2.7.2需求1.3高级聚合函数1.3.1案例演示1.4炸裂函数1.4.1概述

泛黄的咖啡店·2024-02-04 11:44

大数据Hive--DDL(数据定义)和DML(数据操作)

文章目录一、DDL1、数据库1.1创建数据库1.2查询数据库1.3修改数据库1.4删除数据库1.5切换当前数据库2、表2.1创建表1）普通建表2）CreateTableAsSelect（CTAS）建表3）CreateTableLike语法2.2案例1）内部表与外部表2）SERDE和复杂数据类型2.3查看表2.4修改表2.5删除表2.6清空表二、DML1.1Load1.2Insert1.2.1将查询

泛黄的咖啡店·2024-02-04 11:43

大数据Zookeeper--入门

文章目录Zookeeper入门概述Zookeeper工作机制特点数据结构应用场景Zookeeper下载地址Zookeeper本地安装本地模式安装安装前准备配置修改配置参数解读Zookeeper入门概述Zookeeper

泛黄的咖啡店·2024-02-04 11:11

大数据入门-大数据技术概述(二)

目录大数据入门系列文章1.大数据入门-大数据是什么2.大数据入门-大数据技术概述(一)一、简介二、技术详解1.分布式协调服务：Zookeeper2.分布式资源管理器：Yarn3.计算引擎：Spark4.

水坚石青·2024-02-04 11:11

大数据入门--zookeeper（一）--集群搭建与常用指令

Zookeeper单机搭建下载官方安装包#解压tar-zxvfzookeeper-3.4.5.tar.gz-C/opt/module/#配置zoo.conf，只需要将conf/zoo_sample.conf重命名为zoo.conf即可mvconf/zoo_sample.cfgconf/zoo.cfg#启动bin/zkServer.shstart#查询状态bin/zkServer.shstatus#

许中宝·2024-02-04 11:40

基于YOLOv8算法的照片角度分类项目实践

目录一、任务概述二、YOLOv8算法简介2.1算法改进2.2算法特点2.3网络结构2.4性能比较三、工程实践3.1安装算法框架库ultralytics3.2库存照片预处理3.2.1提取所有图片3.2.2

钱彬 (Qian Bin)·2024-02-04 11:33

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d

kikiki4·2024-02-04 11:08

吴恩达：改善深层神经网络：超参数调试、正则化以及优化(Improving Deep Neural Networks:Hyperparameter tuning, Regularizatio)

@[toc]1.1训练、开发、测试集trainset训练集Devset验证集testset测试集小规模数据：训练集：其他=7:3大数据时代（超百万数据）：训练集占80%或者90%以上验证集和测试集来自同一分布如果只有训练集和验证集

Cache_wood·2024-02-04 10:48

【ELK】logstash快速入门

1.概述1.1.什么是logstash？之前我们聊了es，并且用docker搭建了一个es+kibana的环境。es目前最普遍的用法是用来存储日志的，然后结合kibana对日志做一些可视化的工作。

_BugMan·2024-02-04 10:25

数据库语言SQL（1）

@[TOC]关系数据库语言SQL（上）一，SQL概述1.SQL产生与发展标准发布日期SQL/86ANSIISO1986.10SQL/89(FIPS127-1)1989年SQL/921992年SQL991999

西西弗质·2024-02-04 10:53

vuex基础

vuex概述#优点：js原生的数据对象写法,比起localStorage不需要做转换,使用方便属于vue生态一环,能够触发响应式的渲染页面更新(localStorage就不会)限定了一种可预测的方式改变数据

只管挖坑不管埋·2024-02-04 10:46

简单说说-docker网络类型

概述容器网络是指容器之间或非Docker工作负载之间连接和通信的能力。容器默认启用网络，并且可以建立传出连接。

木子林_·2024-02-04 10:45

2.前端工程化-webpack

webpack2.1概述webpack是目前流行的前端项目构建工具（打包工具），提供了模块化支持，代码压缩混淆，解决js兼容问题，性能优化等强大功能，提高了开发效率和项目的可维护性。

世界，太精彩·2024-02-04 10:35

前端工程化实战 - Webpack 打包

前端工程化实战-Webpack打包模块打包工具的由来模块打包工具概述Webpack基础Webpack快速上手Webpack配置文件Webpack工作模式Webpack打包结果运行原理Webpack模块加载器

时光海丶·2024-02-04 10:33

使用wda框架实现IOS自动化测试详解

目录1、weditor元素定位工具1.1、weditor的安装和使用2、wdaiOS自动化框架2.1、wda概述2.2、wda安装2.3、wda的使用2.3.1、全局配置2.3.2、创建客户端2.3.3

MY测试之路·2024-02-04 09:25

容器监控实践-Grafana

概述Grafana是一个开源的，可以用于大规模指标数据的可视化项目，甚至还能对指标进行报警。基于友好的ApacheLicense2.0开源协议，目前是prometheus监控展示的首选。

徐亚松_v·2024-02-04 09:04

智慧水务（水厂）大数据平台，打造水务运营管理驾驶舱

以物联感知技术、大数据、智能控制、云计算、人工智能、数字孪生、AI算法、虚拟现实技术为核心，以监测仪表、通讯网络、数据库系统、数据中台、模型软件、前台展示、智慧运维等产

郭靖守襄阳【软芯民用】·2024-02-04 09:52

Web-环境搭建:Tomcat/HTTP协议/Servlet

文章目录Tomcat服务器概述Tomcat服务器Tomcat简介Tomcat下载Tomcat的版本安装启动和关闭修改Tomcat端口号和手动部署工程将Tomcat整合到IDEA中将动态工程部署到Tomcat

I会飞的鱼·2024-02-04 09:42

如何写一个其他人可以使用的GitHub Action

什么是GitHubActions官方概述如下：GitHubActions是一种持续集成和持续交付(CI/CD)平台，可用于自动执行生成、测试和

晚风予星_Kylin·2024-02-04 09:09

Spring Boot第一天

SpringBoot概述SpringBoot是Spring提供的一个子项目，用于快速构建Spring应用程序传统方式构建Spring应用程序导入依赖繁琐项目配置繁琐为了简化如此繁琐的配置流程，SpringBoot

Cary_cacb·2024-02-04 09:36

ES6中Proxy

概述Proxy用于修改某些操作的默认行为，等同于在语言层面做出修改，所以属于一种“元编程”（metaprogramming），即对编程语言进行编程。

硅谷干货·2024-02-04 09:01

基于SpringBoot的人力资源管理系统设计与实现

基于SpringBoot的人力资源管理系统设计与实现一、摘要二、绪论背景及意义国内外研究现状研究内容章节安排本章小结三、相关技术概述SpringBootMVC设计模式本章小结四、系统需求分析时间可行性分析技术可行性分析经济可行性分析操作可行性分析法律可行性分析功能性需求分析非功能性需求分析本章小结五

设计分享-安安·2024-02-04 09:27

使用 Visual Studio Code 在远程计算机上调试 PostgreSQL

使用VisualStudioCode在远程计算机上调试PostgreSQL1.概述PostgreSQL是一个功能强大的开源关系数据库管理系统，适用于各种应用程序。

xuejianxinokok·2024-02-04 09:23

【文本到上下文 #10】探索地平线：GPT 和 NLP 中大型语言模型的未来

在最后一章中，我们将探讨：语言模型概述：了解它们在NLP中的作用和演变。GPT模型：深入研究GPT谱系及其影响。大型语言模型（LLM）：揭示潜力和挑战。现实世界的NLP应用：这些

无水先生·2024-02-04 09:20

大数据领域的数据仓库

在大数据领域，数据仓库（DataWarehouse）是一个用于存储、管理和分析大量数据的集中式系统。

薛定谔的zhu·2024-02-04 09:43

题记(39)--约数个数(大数据情况)

目录一、题目内容二、输入描述三、输出描述四、输入输出示例五、完整C语言代码一、题目内容输入n个整数,依次输出每个数的约数的个数二、输入描述输入的第一行为N，即数组的个数(N#includeintmain(){intN;while(scanf("%d",&N)!=EOF){int*a=(int*)malloc(N*sizeof(int));for(inti=0;i

INT小蔡·2024-02-04 09:08

转载-58同城离线计算平台设计与实践

本次分享将聚焦大数据平台离线计算和大家一起系统的探讨58在离线计算平台建设实践的思路、方案和问题解决之道。

无色的叶·2024-02-04 09:14

Python爬虫8-异步加载

目录9.1异步加载技术与爬虫方法9.1.1异步加载技术概述9.1.2异步加载网页示例9.1.3逆向工程9.2综合案例1-爬取简书网用户动态信息9.2.1爬虫思路分析9.2.2爬虫代码及分析9.1异步加载技术与爬虫方法

查尔斯-狩乃·2024-02-04 09:04

消息队列服务Kafka揭秘：痛点、优势以及适用场景

摘要：消息队列Kafka是一个分布式的、高吞吐量、高可扩展性消息队列服务，广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等，是大数据生态中不可或缺的产品之一，阿里云提供全托管服务，用户无需部署运维

云栖社区v·2024-02-04 08:01

mysql++库的分享和介绍

目录1.mysql++库的简介2.编译和安装3.mysql++常用类概述4.Mysql++用法详解5.Query支持的三种查询方式5.1直接使用Querystream输入SQL语句5.2使用TemplateQuery

会&唱歌的鱼·2024-02-04 08:01

AI专题：2023年AI和标准化网络安全报告

（报告出品方：enisa）报告共计：37页文件目的和目标本文件的总体目标是概述与人工智能(AI)网络安全有关的标准(现有的、正在起草的、审议中的和计划中的)，评估其覆盖面，并找出标准化方面的差距。

人工智能学派·2024-02-04 08:14

【23种设计模式·全精解析 | 结构型模式篇】7种结构型模式的结构概述、案例实现、优缺点、扩展对比、使用场景、源码解析

文章目录结构型模式1、代理模式（1）概述（2）结构（3）静态代理（4）JDK动态代理（5）CGLIB动态代理（6）三种代理的对比（7）优缺点（8）使用场景2、适配器模式（1）概述（2）结构（3）类适配器模式

蓝染-惣右介·2024-02-04 08:06

TYPE-C HUB（拓展坞）乐得瑞LDR6023A快充方案介绍

概述USBType-C拓展坞主要用于Type-C接口功能扩展，可方便实现Type-C扩展USB3.0接口，DP/VGA/HDMI显示接口，Type-C充电口等应用。

Legendary_008·2024-02-04 08:31

PC端网页特效：元素偏移量offset系列、元素可视区client系列、元素滚动scroll系列、动画函数封装、常见网页特效案例

1、元素偏移量offset概述及常用属性offset和style的区别offset案例：获取鼠标在盒子内的坐标能拖动的登录框案例放大镜案例（未完成）2、元素可视区client（大小不包含边框，offset

我的皎月闻越香_·2024-02-04 08:06

IT行业有哪些证书含金量高？

IT行业涵盖了广泛的领域，包括软件开发、网络管理、数据库管理、信息安全、云计算、人工智能、大数据分析等多个方面。

番茄不是西红柿1·2024-02-04 08:56

使用haproxy做impala的负载均衡

1.IMPALA组件概述Impala组件包含3个子模块（ImpalaCatalogServer、ImpalaStateStore、ImpalaDaemon），如图所示：其中ImpalaCatalogServer

要树立远大的理想·2024-02-04 08:22

linux系统haproxy负载均衡工具的介绍以及使用

haproxy概述haproxy的特点haproxy算法haproxy做四层负载均衡haproxy做七层负载均衡概述ha-proxy是一款高性能的负载均衡软件。

丨析木丨·2024-02-04 08:50

Python flask 表单详解

文章目录1概述1.1request对象2示例2.1目录结构2.2student.html2.3result.html2.4app.py1概述1.1request对象作用：来自客户端网页的数据作为全局请求对象发送到服务器

鱼丸丶粗面·2024-02-04 08:43

Python flask 模板详解

文章目录1概述1.1模板简介1.2templates文件1.3简单应用2模板语法2.1for循环2.2if判断3模板的继承3.1格式要求3.2实现示例3.3复用父模板的内容：super1概述1.1模板简介定义

鱼丸丶粗面·2024-02-04 08:11

论文浅尝 | 动态知识图谱对齐

论文笔记整理：谭亦鸣，东南大学博士生来源：AAAI‘21链接：https://ojs.aaai.org/index.php/AAAI/article/view/16585概述本文提出了一种动态图谱(KG

开放知识图谱·2024-02-04 07:05

论文浅尝 | 大型语言模型的人类对齐

笔记整理：方润楠、习泽坤，浙江大学硕士，研究方向为自然语言处理链接：https://arxiv.org/abs/2307.12966概述这份综述探讨了针对大型语言模型（LLMs）的人类期望进行对齐的技术

开放知识图谱·2024-02-04 07:04

【微服务】skywalking自定义链路追踪与日志采集

链路追踪几个关键概念三、skywalking自定义链路追踪实现3.1环境准备3.2集成过程3.2.1导入核心依赖3.2.2几个常用注解3.2.3方法集成3.2.4上报追踪信息四、skywalking自定义日志采集4.1概述

小码农叔叔·2024-02-04 07:00

计网19：数据链路层基本概念

数据链路层功能概述：数据链路层在物理层提供服务

hpnes·2024-02-04 07:14

Vue3/ Vue3组合式API(reactive 函数) 、 Vue3组合式API(ref 函数)

API(reactive函数)语法:const代理对象=reactive(源对象)1.state需要有返回值只有返回的值才能在模板中使用2.默认普通的数据不是响应式的作用:用来定义一个对象类型响应式数据概述

春暖花开.,·2024-02-04 07:23

服务容错Sentinel入门笔记

qq_39040378·2024-02-04 07:19

Ansible概述、Ansible环境准备、Ansibleadhoc临时命令语法、命令模块、文件模块、用户模块、综合练习

ansible批量管理服务器的工具2015年被红帽公司收购使用Python语言编写的基于ssh进行管理，所以不需要在被管端安装任何软件ansible在管理远程主机的时候，主要是通过各种模块进行操作的环境准备主机名IP地址角色web1192.168.88.11被控制节点（webserver）web2192.168.88.12被控制节点（webserver）db1192.168.88.13被控制节点（

Mick方·2024-02-04 07:15

推荐频道

大数据-概述