【大数据技术】

大数据技术栈-Hadoop3.3.4-完全分布式集群搭建部署-centos7（完全超详细-小白注释版）虚拟机安装+平台部署

目录环境条件：1、安装虚拟机（已安装好虚拟机的可跳转至二、安装JDK与Hadoop）（1）直接新建一台虚拟机（2）首次启用虚拟机，进行安装一、集群前置环境搭建（三台机器分别设置hostname、网卡（ip）配置、ssh免密登录）1、查看一下本机与虚拟机的网卡和ip信息（1）首先，查看本机的网卡配置，使用cmd查看ipconfg，找到VMware的虚拟网卡，查看ip（2）查看虚拟机的网卡配置和网络信
Hao.715·2023-11-15 05:43

微服务系列-使用 RestTemplate 的 Spring Boot 微服务通信示例

公众号「架构成长指南」，专注于生产实践、云原生、分布式系统、大数据技术分享。概述下面我们将学习如何创建多个Springboot微服务以及如何使用RestTemplate类在多个微服务之间进行同步通信。
架构成长指南·2023-11-14 21:33

Lambda 表达式各种用法，你都会了吗

公众号「架构成长指南」，专注于生产实践、云原生、分布式系统、大数据技术分享。前言Lambda表达式是Java8中引入的最有影响力的功能之一。
架构成长指南·2023-11-14 21:56

大数据背景下的信息资源管理

简言之，从各种各样类型的数据中，快速获得有价值信息的能力就是大数据技术，这也是一个企业所需要必备的技术。“大数据”一词越来越地别提及与使用，我们用它来描述和定义信息爆炸时代产生的海量数据。
荣华富贵8·2023-11-14 11:52

开发者眼中的向量数据库应用领域

目录引言向量数据库概念向量数据库优势应用领域亚马逊云科技向量数据库向量数据库的使用步骤最后引言随着人工智能和大数据技术的快速发展，越来越多的技术倾向于数据存储方面，数据库领域也随着人工智能和大数据的发展而发展
三掌柜666·2023-11-14 02:36

Apache Airflow (五) ：DAG调度触发时间

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-11-13 23:33

【大数据技术】爆肝3天 7个章节 Hive 3.1.3详解

大数据技术之Hive01hive入门1.1什么是Hive1）Hive简介Hive是由Facebook开源，基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。
左美美 ￣　　·2023-11-13 21:10

大数据技术之Hive

大数据之Hive学习（这个教程比较详细微信公众号有简洁版笔记）版本：V3.1.3文章目录大数据之Hive学习第1章Hive入门1.1什么是Hive1）Hive简介2）Hive本质1.2Hive架构原理1）用户接口：Client2）元数据：Metastore3）驱动器：Driver4）Hadoop第2章Hive安装2.1Hive安装地址1）Hive官网地址2）文档查看地址3）下载地址4）github
夜玫瑰·2023-11-13 21:05

大数据技术与原理实验报告（MapReduce 初级编程实践）

MapReduce初级编程实践验环境：操作系统：Linux（建议Ubuntu16.04）；Hadoop版本：3.2.2；（一）编程实现文件合并和去重操作对于两个输入文件，即文件A和文件B，请编写MapReduce程序，对两个文件进行合并，并剔除其中重复的内容，得到一个新的输出文件C。下面是输入文件和输出文件的一个样例供参考。输入文件A的样例如下：20170101x20170102y20170103
麦与陌生人·2023-11-13 03:18

云计算、大数据技术的智慧工地，实现对建筑工地实时监测、管理和控制的一种新型建筑管理方式

智慧工地是利用物联网、云计算、大数据等技术，实现对建筑工地实时监测、管理和控制的一种新型建筑管理方式。智慧工地架构：1、终端层：充分利用物联网技术、移动应用、智能硬件设备提高现场管控能力。通过RFID、传感器、摄像头、手机等终端设备，实现对项目建设过程的实时监控、智能感知、数据采集和高效协同，提高作业现场的管理能力。2、平台层：各系统中处理复杂的业务，互相提供数据基础，产生大量数据，如何高效处理这
源码集结号·2023-11-11 15:13

智慧城市建设解决方案分享【完整】

章智慧城市建设的背景2.1智慧城市的发展现状2.2智慧城市的发展趋势第3章智慧城市“十二五”规划要点3.1国民经济和社会发展“十二五”规划要点3.2“十二五”信息化发展规划要点第4章大数据：智慧城市的智慧引擎4.1大数据技术
叶绿体不忘呼吸·2023-11-11 13:36

农业大棚智能化改造升级与远程视频监管方案，助力智慧农业建设发展

二、方案设计旭帆科技基于AI视频识别技术、流媒体视频技术、网络通信传输技术、云计算及大数据技术等
EasyCVR·2023-11-11 10:42

Apache Airflow (三) ：Airflow WebUI操作介绍

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-11-11 09:19

Apache Airflow (四) ：Airflow 调度shell命令

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-11-11 09:46

MaxCompute，基于Serverless的高可用大数据服务

2019年1月18日，由阿里巴巴MaxCompute开发者社区和阿里云栖社区联合主办的“阿里云栖开发者沙龙大数据技术专场”走近北京联合大学，本次技术沙龙上，阿里巴巴高级技术专家吴永明为大家分享了MaxCompute
迷你芊宝宝·2023-11-11 05:38

农业大棚智能化改造升级与远程视频监管方案，助力智慧农业建设发展

二、方案设计旭帆科技基于AI视频识别技术、流媒体视频技术、网络通信传输技术、云计算及大数据技术等
Black蜡笔小新·2023-11-11 02:54

扬州晶澳-年产3GW高性能太阳能光伏组件项目 Acrel-3000WEB电能管理系统的设计及应用

随着国家电网改革政策的逐步推进和落实，Acrel-3000WEB电能管理系统运用互联网和大数据技术，为电力运维公司和售配电公司提供变电所运维云平台。
Acrellee·2023-11-10 15:14

医疗行业大数据应用的三个案例

案例一：华大基因推出肿瘤基因检测服务应用背景：伴随着生物技术、大数据技术的发展，个体基因检测治疗疾病已经成为现实。其中，最广为人知的是美国好莱坞女星安吉丽娜•朱莉，在2013年经过检测她发现自身
数控小J·2023-11-10 00:17

数据产品五花八门，究竟什么才是企业需要的？

随着大数据技术如火如荼的发展，企业纷纷建设自有的数据平台，转型数据化运营，在国家层面政府同样在大力推动大数据战略，建设数字中国、数字经济、城市大脑，“数据产品”也成为近两年的热门词汇。
nayun123·2023-11-09 18:03

Spark文件的读取和保存

目录前言文件保存文件读取结语大家好，我是风云，欢迎大家关注我的个人原创公众号【笑看风云路】获取更多大数据技术干货，在未来的日子里我们一起来学习大数据相关的技术，一起努力奋斗，遇见更好的自己！
笑看风云路·2023-11-09 14:27

Flink 的集群部署模式有哪些？

前言本文隶属于专栏《1000个问题搞定大数据技术体系》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！
Shockang·2023-11-09 10:01

利用人工智能和大数据技术，优化IT运维流程和策略

智能运维，即利用人工智能和大数据技术对IT运维进行智能化改造，是解决这一问题的有效途径。
MXsoft618·2023-11-09 08:00

Apache Airflow (二) ： Airflow单机搭建

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-11-09 06:15

2024长三角大数据产业博览会（世亚智博会）数据赋能·智创未来

本届展会以“数据赋能，智创未来”为主题，旨在展示和推广大数据技术在各个领域的应用和实践。展会将涵盖大数据基础设施建设、
高登先生·2023-11-09 04:33

基于大数据的一线城市住房租赁影响因素分析

摘要：2017年10月党的十九大报告提出“加快建立多主体供给、多渠道保障、租购并举的住房制度”然而从现有的《房地产估价规范》来看，影响住房租赁价格的影响因素并未形成体系，本文将借助大数据技术分析北上广深四个城市的住房租赁影响因素
tsyzySorrymaker·2023-11-09 03:04

大数据技术之Flink容错机制--检查点与保存点的比较（上）

#大数据技术之Flink–检查点与保存点的比较在flink中有一套完整的容错机制来保证故障后的恢复，其中最重要的就是检查点。检查点（checkPoint）1.什么是检查点？
I披荆斩棘I·2023-11-08 21:08

云计算和大数据技术

一、云计算技术的概述云计算是一种基于互联网的计算模式，它将计算资源（包括硬件和软件）通过网络提供给用户，使用户能够方便地访问和使用这些资源。云计算技术可以分为三个层次：基础设施即服务(IaaS)，平台即服务(PaaS)和软件即服务(SaaS)。基础设施即服务(IaaS)IaaS是云计算中最底层的一层，它提供了云计算基础设施的构建和管理，包括网络、存储、计算资源等。IaaS可以让用户更加灵活地使用计
Kali与编程～·2023-11-08 11:11

大数据技术之基础篇-Java 并发编程 78 讲-01线程与线程安全

大数据技术之基础篇——Java并发编程78讲-01线程与线程安全文章目录前言开篇为什么并发编程这么重要呢如何学好并发编程学习了本门课，你会有以下收获第01讲：为何说只有1种实现线程的方法？
爱学大树锯·2023-11-08 07:52

Apache Airflow (一) ： Airflow架构及

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-11-08 06:00

大数据技术之 Spark 优化

第1章Spark性能调优1.1常规性能调优1.1.1常规性能调优一：最优资源配置Spark性能调优的第一步，就是为任务分配更多的资源，在一定范围内，增加资源的分配与性能的提升是成正比的，实现了最优的资源配置后，在此基础上再考虑进行后面论述的性能调优策略。资源的分配在使用脚本提交Spark任务时进行指定，标准的Spark任务提交脚本如下所示：bin/spark-submit\--classcom.a
大数据翻身·2023-11-08 06:38

数智融合，亚马逊云科技给你打个样儿

数智融合重塑数据洞察人工智能浪潮的又一次兴起，在很大程度上得益于大数据技术与产业的飞速发展。大数据为人工智能应用提供了大规模、高质量、多源化和异构的数据支撑。
中国云报·2023-11-08 05:50

基于Hadoop与Electron的京东商品评论词云统计系统

一、综合设计目的与要求合肥工业大学软件工程专业《云计算、大数据技术与应用》课程综合设计报告。
没头发的米糊·2023-11-07 15:06

工程云平台源码 建筑工地劳务实名制、危大工程监管平台源码

同时，智慧工地还可以通过人工智能和大数据技术，对工地数据进行深度分析和挖掘，发现潜在问题和规律，提出优化建议和预测预警，
淘源码A·2023-11-07 14:54

2023年高校大数据实训平台需求

随着大数据技术的不断普及和应用，越来越多的企业和高校意识到大数据人才培养的重要性。因此，对大数据实训平台的需求量不断增加。
泰迪智能科技·2023-11-07 09:15

Apache Doris (五十三）： Doris Join类型 - Shuffle Join

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-11-07 08:10

Apache Doris (五十二）： Doris Join类型 - Broadcast Join

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-11-07 03:53

大数据组件 in K8S

大数据的发展历史大数据技术起源于Google在2004年前后发表的三篇论文，分布式文件系统GFS、分布式计算框架MapReduce和NoSQL数据库系统BigTable，俗称"三驾马车"。
无精疯·2023-11-06 23:22

大数据技术在企业数据分析中的应用

大数据技术在企业数据分析中的应用随着大数据技术的快速发展，越来越多的企业开始意识到利用大数据进行数据分析的重要性。
后端架构魔术骑士·2023-11-06 20:45

数据主义与人文主义

随着人工智能和大数据技术的不断进步，人们越来越发觉很多人常中的行为习惯被数据化，失去了温度变得冷冰冰的。
余白日志·2023-11-06 19:12

大数据HADOOP框架

②Hadoop发展历史③Hadoop的三大发行版本④Hadoop的优势⑤Hadoop的组成（重点）⑥大数据技术生态体系⑦推荐系统案例3、模拟虚拟机准备①安装`epel-releaes`②安装`net-tools
FangSai_ovo·2023-11-06 16:18

计算机大数据毕设选题推荐Hadoop项目，Spark，Hive，Flink

2、基于大数据的在线广告投放效果分析：分析在线广告数据，使用大数据技术来了解广告投放效果、广告点击率和受众定位。
大数据毕设辅导员·2023-11-06 05:52

Elasticsearch 集群分片出现 unassigned 其中一种原因详细还原

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-11-06 02:16

Apache Doris (五十一）： Doris数据缓存

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-11-06 02:12

数据平台、大数据平台、数据中台

数字化运营不同阶段，运营手段各尽所能随着大数据技术的不断更新与迭代，数据管理工具得到了飞速的发展，从数据库、数据仓库、数据集市与数据湖，再到大数据平台与如今的数据中台，其实将它们比喻成一场“数据的旅程”
DemonHunter211·2023-11-05 23:37

大数据技术中的数据存储

大数据技术中的数据存储在大数据领域，数据存储是一个关键的环节。随着数据量的不断增长和数据多样性的增加，有效地管理和存储大规模数据变得尤为重要。
幻想世界中的绚丽色彩·2023-11-05 22:58

Hadoop环境搭建

前言Hadoop在大数据技术体系中的地位至关重要，Hadoop是大数据技术的基础，对Hadoop基础知识的掌握的扎实程度，会决定在大数据技术道路上走多远。
Super乐·2023-11-05 20:55

史上最详细的hadoop环境搭建

转自：https://blog.csdn.net/hliq5399/article/details/78193113前言Hadoop在大数据技术体系中的地位至关重要，Hadoop是大数据技术的基础，对Hadoop
xk_一步一步来·2023-11-05 20:17

史上最详细的Hadoop环境搭建

10月10日15:23:59阅读数：37070GitChat作者：鸣宇淳原文：史上最详细的Hadoop环境搭建关注公众号：GitChat技术杂谈，一本正经的讲技术【不要错过文末活动哦】前言Hadoop在大数据技术体系中的地位至关重要
p312011150·2023-11-05 20:16

Flink入门与源码解析

欢迎关注‘大数据技术与架构’，微信搜索import_bigdata
王知无(import_bigdata)·2023-11-05 18:47

hive分桶_Hive介绍与核心知识点大数据技术栈12

回顾：大数据平台技术栈(ps:可点击查看)，今天就来说说其中的Hive！作者：高广超，多年一线互联网研发与架构设计经验，擅长设计与落地高可用、高性能、可扩展的互联网架构。目前从事大数据相关研发与架构工作。https://www.jianshu.com/p/e9ec6e14fe52Hive简介Facebook为了解决海量日志数据的分析而开发了Hive，后来开源给了Apache软件基金会。官网定义：T
weixin_39622138·2023-11-05 16:09
上一页 8 9 10 11 12 13 14 15 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他