TianYap_大数据

Hadoop-MapReduce使用说明

MapReduce是一个开源的分布式软件框架，可以让你很容易的编写程序（继承Mapper和Reducer，重写map和reduce方法）去处理大数据。
隔着天花板看星星·2024-01-25 09:52

从零实现RPC框架之 5.序列化

序列化：序列化以及编解码属于七层网络中的表示层序列化和反序列化的选型却是系统设计或重构一个重要的环节，在分布式、大数据量系统设计里面更为显著。
Seajunnn·2024-01-25 09:48

ElasticSearch基本api操作

ElaticsearchElasticSearch概述Elaticsearch,简称为es,es是一个开源的高扩展的分布式全文检索引擎,它可以近乎实时的存储、检索数据;本身扩展性很好，可以扩展到上百台服务器,处理PB级别(大数据时代
陈平安＂·2024-01-25 08:38

学习大数据所以需要的java基础（2）

这里写自定义目录标题String介绍String概述String的实现原理String的创建String拓展构造面试题判断方法String的Get方法String的转换方法分割功能StringBulider介绍StringBuilder的使用String和StringBuilder以及StringBuffer区别Stream流stream介绍及示例Stream流的获取几个重要的类Math类BigI
龙俊俊·2024-01-25 08:38

AWS实战(二)之Java连接AWS的 Kinesis Data Firehose，实现数据上传S3中

上文已经提到了KinesisDataFirehose在我的设计中处在我的client和S3之间实现了大数据信息收集存储的功能；KinesisDataFirehoseAPI提供两种向传输流发送数据的操作：
从北码到南·2024-01-25 07:45

利用 Amazon Lambda 将 Kinesis Data Stream 数据批量自动写入 Amazon MSK

这些应用程序统一从ApacheKafka中拉取实时数据做分析和处理，例如监控系统、大数据分析平台等。由于业务发展需要，用户将这些工作负载部分迁移到了Amazon上，或者在Amazon上构建新的应用。
亚马逊云开发者·2024-01-25 07:15

大数据平台组件日常运维操作说明（Hadoop/Zookeeper/Kafa/ES/Mysql/Spark/Flume/Logstash/Tomcat）

Hadoop日常运维操作说明hdfs生产环境hadoop为30台服务器组成的集群，统一安装配置，版本号为2.7.7部署路径：/opt/hadoop启动用户：hadoop配置文件：/opt/hadoop/config/hdfs-site.xml/opt/hadoop/config/core-site.xmlhadoopy运行环境变量配置文件：hadoop-env.shjournalnode.envd
love6a6·2024-01-25 07:12

ElasticSearch

一、搜索引擎介绍在互联网项目中，涉及到检索的业务需求很多，我们可以通过对数据库的模糊查询实现检索功能，但是针对大数据量的操作，基于数据库的检索就显得力不从心了。
__追梦人·2024-01-25 07:29

ElasticSearch分词器介绍

在大数据时代，搜索技术变得尤为重要。ElasticSearch作为一款强大的开源搜索引擎，提供了丰富的功能来满足各种搜索需求。
Dxy1239310216·2024-01-25 07:20

吴军《信息论》中大数据思维应用之语音识别

生活中，我们总要解决各式各样的问题，我们如何拆解问题，把问题变成关于大数据思维在当下最常见，也是最成功的四类应用。第一类是解决人工智能问题，把那些过去
高高_02c9·2024-01-25 07:44

天津大数据培训班推荐，数据分析过程的常见错误

大数据”是近年来IT行业的热词，目前已经广泛应用在各个行业。大数据，又称海量信息，特点是数据量大、种类多、实时性强、数据蕴藏的价值大。
qq_38453958·2024-01-25 06:57

掌握技术脉搏：程序员如何在技术变革中保持领先，避免被裁员

一、当今的技术变革有哪些当今的技术变革包括移动互联网、大数据、人工智能、区块链、虚拟现实和增强现实等技术的快速发展和应用。
wd90119·2024-01-25 06:15

使用Python和PyTorch库构建一个简单的文本分类大模型：

在当今的大数据时代，文本分类任务在许多领域都有着广泛的应用，如情感分析、垃圾邮件过滤、主题分类等。为了有效地处理这些任务，我们通常需要构建一个强大的文本分类模型。
GT开发算法工程师·2024-01-25 05:57

10年软件测试工程师感悟——写给还在迷茫中的朋友

当然，我说的是最基础的功能测试的岗位需求已经很少了，而自动化、性能、安全乃至于以后可能出现的大数据测试、AI测试仍存在着非常多的机会。“长江后浪推前浪，前浪死在沙滩上”，曾经一句让人会心一笑
程序员阿沐·2024-01-25 05:40

Redis学习——入门篇①

Redis学习——入门篇①1、2：Redis入门概述3：Redis安装配置10安装Redis-cli命令4：Redis——十大数据类型11redis数据类型12命令查阅13key常用命令介绍14类型大小写和帮助命令
_Matthew·2024-01-25 05:15

大数据运维到底是什么 又需要做些什么

疫情期间，大数据的广泛应用发挥了巨大的作用，作为新兴的IT领域技术，大数据行业受到越来越多的人关注，于是想要入行的、转行的纷纷选择大数据学习，那么大数据运维到底是什么？又需要做些什么?
科技资讯快报·2024-01-25 05:38

chatgpt赋能python：Python转C++编译器：将高级语言转换为本地代码的新趋势

Python转C++编译器：将高级语言转换为本地代码的新趋势Python是一门很流行的高级编程语言，随着人工智能、大数据、机器学习等领域的发展，其在实际应用中得到越来越广泛的应用。
李自提·2024-01-25 05:32

2019-01-16（霄）

《大数据环境下群体性事件的智能预警》读后感研究意义：互联网的出现改变了群体性事件的发生发展格局，群体性事件向互联网的转移也使其呈现出不同于以往的新特征、新动态，而传统模式难以应对新时期的群体性事件。
18郎师门·2024-01-25 04:49

深度机器学习满足网络安全

来源：deepmachinelearningmeetscybersecurity一、问题1、恶意软件成指数级增长每个小时有超过100k的恶意代码变种产生2、安全防御是一个大数据问题3、坏的行动者具有自动性能够产生大量的恶意代码
Threathunter·2024-01-25 04:28

城院大讲堂：大数据AI时代的机遇挑战及我们的应对策略

2023年12月18日晚上19点，陈天伟老师在四川城市职业学院眉山校区4A101开展城院大讲堂——《大数据AI时代的机遇挑战及我们的应对策略》专项讲座，各个专业报名150多人参加了讲座。
陈天伟老师·2024-01-25 04:51

一带一路暨金砖国家技能发展国际联盟大数据和人工智能专业委员会名单

四川城市职业学院和陈老师在序号：158，300一带一路暨金砖国家技能发展国际联盟大数据和人工智能专业委员会名单各相关单位：一带一路暨金砖国家技能发展国际联盟大数据和人工智能专业委员会于2023年11月12
陈天伟老师·2024-01-25 04:20

类似66手游的折扣平台有哪些 类似66手游的折扣平台排行榜

现在的手游平台很多，每家几乎都是不一样的福利水准，所以说选择一个靠谱的平台是玩家最基本的原则，本期小编就根据现在的大数据统计来盘点几个值得推荐的内部福利手游平台，一起来瞧瞧有哪些吧！
会飞的鱼儿·2024-01-25 04:27

大数据处理，Pandas与SQL高效读写大型数据集

大家好，使用Pandas和SQL高效地从数据库中读取、处理和写入大型数据集，以实现最佳性能和内存管理，这是十分重要的。处理大型数据集往往是一项挑战，特别是在涉及到从数据库读取和写入数据时。将整个数据集加载到内存中的传统方法可能会导致系统崩溃和处理时间缓慢。本文将探讨一种更好的解决方案：简化分块读写数据的过程。这种技术能够高效地处理大量数据，对于任何与数据库和数据帧一起工作的人来说都是一种宝贵的工具
python慕遥·2024-01-25 03:12

Spark难点 | Join的实现原理

其实，HashJoin算法来自于传统数据库，而Shuffle和Broadcast是大数据在分布式情况下的概念，两者结合的产物。因此可
王知无·2024-01-25 03:35

国内首个！亚信安全获得CCRC数据分类分级产品认证证书

亚信安全信数数据分类分级系统AISDCV1.0，荣获中国网络安全审查认证和市场监管大数据中心颁发的首个数据分类分级产品IT产品信息安全认证证书！
亚信安全官方账号·2024-01-25 03:52

大数据时代的税收

信息时代，大数据时代，什么最重要？人才？钱？都不是是数据！！！国家通过个税扣除获取更加详尽的个人信息。尤其是房租这一块。房屋在中国是一大块，出租房子房东是要交税的，但是很少交，过去不好管理。
追梦者wang·2024-01-25 02:48

【大数据】Flink 系统架构

Flink系统架构1.Flink组件1.1JobManager1.2ResourceManager1.3TaskManager1.4Dispatcher2.应用部署2.1框架模式2.2库模式3.任务执行4.高可用设置4.1TaskManager故障4.2JobManager故障Flink是一个用于状态化并行流处理的分布式系统。它的搭建涉及多个进程，这些进程通常会分布在多台机器上。分布式系统需要应对
G皮T·2024-01-25 02:56

【大数据】流处理基础概念（一）：Dataflow 编程基础、并行流处理

流处理基础概念（一）：Dataflow编程基础、并行流处理流处理基础概念（二）：时间语义（处理时间、事件时间、水位线）流处理基础概念（三）：状态和一致性模型（任务故障、结果保障）如果您觉得这篇文章有用✔️的话，请给博主一个一键三连吧（点赞、关注、收藏）！！！您的支持将激励博主输出更多优质内容！！！流处理基础概念（一）：Dataflow编程基础、并行流处理1.Dataflow编程基础1.1Dataf
G皮T·2024-01-25 02:25

【大数据】流处理基础概念（二）：时间语义（处理时间、事件时间、水位线）

流处理基础概念（一）：Dataflow编程基础、并行流处理流处理基础概念（二）：时间语义（处理时间、事件时间、水位线）流处理基础概念（三）：状态和一致性模型（任务故障、结果保障）如果您觉得这篇文章有用✔️的话，请给博主一个一键三连吧（点赞、关注、收藏）！！！您的支持将激励博主输出更多优质内容！！！流处理基础概念（二）：时间语义1.流处理场景下一分钟的含义2.处理时间3.事件时间4.水位线5.处理时
G皮T·2024-01-25 02:25

【大数据】流处理基础概念（三）：状态和一致性模型（任务故障、结果保障）

流处理基础概念（一）：Dataflow编程基础、并行流处理流处理基础概念（二）：时间语义（处理时间、事件时间、水位线）流处理基础概念（三）：状态和一致性模型（任务故障、结果保障）如果您觉得这篇文章有用✔️的话，请给博主一个一键三连吧（点赞、关注、收藏）！！！您的支持将激励博主输出更多优质内容！！！流处理基础概念（三）：状态和一致性模型1.任务故障1.1什么是任务故障2.结果保障2.1AT-MOST
G皮T·2024-01-25 02:55

【大数据】流处理基础概念（三）：状态和一致性模型（任务故障、结果保障）

流处理基础概念（一）：Dataflow编程基础、并行流处理流处理基础概念（二）：时间语义（处理时间、事件时间、水位线）流处理基础概念（三）：状态和一致性模型（任务故障、结果保障）如果您觉得这篇文章有用✔️的话，请给博主一个一键三连吧（点赞、关注、收藏）！！！您的支持将激励博主输出更多优质内容！！！流处理基础概念（三）：状态和一致性模型1.任务故障1.1什么是任务故障2.结果保障2.1AT-MOST
G皮T·2024-01-25 02:54

【大数据】流处理基础概念（二）：时间语义（处理时间、事件时间、水位线）

流处理基础概念（一）：Dataflow编程基础、并行流处理流处理基础概念（二）：时间语义（处理时间、事件时间、水位线）流处理基础概念（三）：状态和一致性模型（任务故障、结果保障）如果您觉得这篇文章有用✔️的话，请给博主一个一键三连吧（点赞、关注、收藏）！！！您的支持将激励博主输出更多优质内容！！！流处理基础概念（二）：时间语义1.流处理场景下一分钟的含义2.处理时间3.事件时间4.水位线5.处理时
G皮T·2024-01-25 02:24

01-经济

受制裁的包括：两家视频监控公司海康威视及大华股份；人工智能公司科大讯飞、旷视科技、商汤科技和依图科技；还包括自称为中国电子数据取证行业龙头企业、网络空间安全及大数据信息化专家的美亚柏科，以及总部位于上海的微米和纳米制造设备供应商溢鑫科创科技
别醒nice·2024-01-25 01:37

智慧仓储物流远程监控方案分析

智慧仓储物流远程监控方案分析随着物联网、大数据、云计算等技术的快速发展，智慧仓储物流逐渐成为现代物流发展的重要方向。远程监控作为智慧仓储物流的重要组成部分，可以有效提高仓储物流的效率、准确性和安全性。
蓝蜂物联网·2024-01-25 01:48

大数据开发之Spark（累加器、广播变量、Top10热门品类实战）

第3章：累加器累加器：分布式共享只写变量。（executor和executor之间不能读数据）累加器用来把executor端变量信息聚合到driver端。在driver中定义的一个变量，在executor端的每个task都会得到这个变量的一份新的副本，每个task更新这些副本的值后，传回driver端进行合并计算。1、累加器使用1）累加器定义（sparkcontext.accumulator(in
Key-Key·2024-01-25 00:25

大数据开发之SparkSQL

第1章：sparksql概述1.1什么是sparksql1、sparksql是spark用于结构化数据处理的spark模块1）半结构化数据（日志数据）2）结构化数据（数据库数据）1.2为什么要有sparksqlhiveonspark：hive既作为存储元数据又负责sql的解析优化，语法是hql语法，执行引擎编程了spark，spark负责采用rdd执行。sparkonhive：hive只作为存储元
Key-Key·2024-01-25 00:24

毕业设计：python人脸识别考勤系统 签到系统 深度学习 Flask框架 Dlib库 MySQL数据库 大数据（源码+论文）✅

大家好，今天给大家分享一个Python项目，感兴趣的可以先收藏起来，点赞、关注不迷路!大家在毕设选题，项目以及论文编写等相关问题都可以给我留言咨询，希望帮助同学们顺利毕业。1、项目介绍技术栈：Python语言、MySQL数据库、Flask框架、Echarts可视化、Dlib库、刷脸签到、多角色登录课堂考勤签到是教育教学中的重要环节，可以实现学生出勤情况的管理，同时也是学生学习过程中的重要参考。传统
vx_biyesheji0002·2024-01-25 00:18

毕业设计：python人脸识别系统 实时检测 深度学习 Dlib库 大数据 毕业设计（源码）✅

大家好，今天给大家分享一个Python项目，感兴趣的可以先收藏起来，点赞、关注不迷路!大家在毕设选题，项目以及论文编写等相关问题都可以给我留言咨询，希望帮助同学们顺利毕业。1、项目介绍技术栈：Python语言、pyqt5图形界面、opencv、ResNet深度卷积神经网络、Dlib库系统实现了集识别人脸、录入人脸、管理人脸在内的多项功能：包括通过选择人脸图片、视频、摄像头进行已录入人脸的实时识别；
vx_biyesheji0002·2024-01-25 00:17

毕业设计：python商品销售数据采集分析可视化系统 京东商品数据爬取+可视化 大数据 python（源码）✅

大家好，今天给大家分享一个Python项目，感兴趣的可以先收藏起来，点赞、关注不迷路!大家在毕设选题，项目以及论文编写等相关问题都可以给我留言咨询，希望帮助同学们顺利毕业。1、项目介绍技术栈：Python语言、Flask框架、Vue框架、requests爬虫、Echarts可视化、MySQL数据库、HTML使用爬虫爬取京东商品信息数据，对数据进行清洗、存储、分析展示使用爬虫爬取[京东商品信息]数据
vx_biyesheji0002·2024-01-25 00:16

python旅游景点数据爬虫大屏实时监控系统 旅游数据分析可视化 Flask框架+Vue框架 大数据毕业设计（源码+文档）✅

大家好，今天给大家分享一个Python项目，感兴趣的可以先收藏起来，点赞、关注不迷路!大家在毕设选题，项目以及论文编写等相关问题都可以给我留言咨询，希望帮助同学们顺利毕业。1、项目介绍关键技术前端：Vue框架+Echarts+BaiduMap+Axios后端：Flask框架爬虫：python+bs4+去哪儿网站这个旅游数据爬取分析可视化系统是基于Vue框架的前端开发的，使用了Echarts来呈现数
vx_biyesheji0002·2024-01-25 00:46

python商品房数据爬虫分析预测系统+可视化 +商品房数据+Flask框架 大数据 毕业设计（源码+讲解视频）✅

大家好，今天给大家分享一个Python项目，感兴趣的可以先收藏起来，点赞、关注不迷路!大家在毕设选题，项目以及论文编写等相关问题都可以给我留言咨询，希望帮助同学们顺利毕业。1、项目介绍技术栈：python语言、Flask框架、MySQL数据库、Echarts可视化sklearn机器学习多元线性回归预测模型、requests爬虫框架链家一手房一手房数据商品房数据、分析可视化预测系统基于Flask的一
vx_biyesheji0002·2024-01-25 00:46

大数据毕业设计：python人脸识别系统 实时检测 深度学习 Dlib库（源码）✅

毕业设计：2023-2024年计算机专业毕业设计选题汇总（建议收藏）毕业设计：2023-2024年最新最全计算机专业毕设选题推荐汇总感兴趣的可以先收藏起来，点赞、关注不迷路，大家在毕设选题，项目以及论文编写等相关问题都可以给我留言咨询，希望帮助同学们顺利毕业。1、项目介绍技术栈：Python语言、pyqt5图形界面、opencv、ResNet深度卷积神经网络、Dlib库识别人脸、录入人脸、管理人脸
q_3375686806·2024-01-24 23:50

基于MongoDB的气温数据可视化项目

本文是基于大数据方向MongoDB数据库的气温可视化项目，旨在让大家认识到MongDB数据库的使用，以及作为一个数据库该如何存储数据及取出数据，如何连接前后端，将数据展示出来。
小路的蹊·2024-01-24 23:31

【复现】奥威亚视屏云平台文件读取漏洞_27

概述二.漏洞影响三.漏洞复现1.漏洞一：四.修复建议：五.搜索语法：六.免责声明一.概述奥威亚视屏云平台拥有丰富的应用模块，包括结对帮扶、网络教研、教研共同体、优课汇聚、教学资源、在线巡课、AI课堂分析、大数据看板等
穿着白衣·2024-01-24 22:44

java

Java的两大数据类型:内置数据类型引用数据类型内置数据类型Java语言提供了八种基本类型。六种数字类型（四个整数型，两个浮点型），一种字符类型，还有一种布尔
bb54676a07b6·2024-01-24 21:04

基于Python Django的大数据招聘数据分析系统，包括数据大屏和后台管理

基于PythonDjango的大数据招聘数据分析系统是一个综合利用大数据技术和数据可视化技术的招聘行业解决方案。
叫我：松哥·2024-01-24 21:19

心耳大数据让风水大师显出原形（二）

现代人们一提起风水师，普遍都会担心，这个人到底靠不靠谱，大家都不敢得罪风水师，就是害怕万一对方提出需要购买的东西价格太高，自己讨价还价让人不高兴了，人家在风水上做什么手脚，自己还看不出来。当然了，解决这个问题的关键，就在于你找的是不是真正的风水大师，一般来说，真正的高人只要干好自己本职工作就好了，甚至他们有自己的主业，风水只是副业而已。为此，心耳君也采访了心耳在线的一些风水大师们。心耳君：大师，您
心耳在线·2024-01-24 20:19

加入007我看到了自己的变化

任大咖们讲那么多写作技巧，套路，大数据，干货，我都当自己听不懂，我知道自己的水平，写作就是为了让我更好的看清自己，知道自己想要什
ABCVian金老师·2024-01-24 20:35

代码随想录算法训练营day13|239.滑动窗口最大值、347.前K个高频元素

题目链接/文章讲解/视频讲解：代码随想录347.前K个高频元素（一刷至少需要理解思路）大/小顶堆的应用，在C++中就是优先级队列本题是大数据中取前k值的经典思路，了解想法之后，不算难。
万事大吉CC·2024-01-24 20:17

数字游戏：艺术家如何用大数据展现艺术

掌握最新科技的艺术家正在利用这些「大数据」创造一种新的信息视觉语言。亚伦·科布林AaronKoblin的很多作品都是基于大数据的视觉创作。
极小光·2024-01-24 19:45
上一页 44 45 46 47 48 49 50 51 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他