hadoop体系结构

系统架构26 - 软件架构设计（5）

特定领域软件体系结构定义不同定义必备特征领域基本活动领域分析领域设计领域实现参与人员建立过程特定领域软件体系结构的主要目的是在一组相关的应用中共享软件体系结构。
银龙丶裁决·2024-02-14 22:56

HDFS用户及权限配置

HDFS用户及权限配置使用linux用户bruce，格式化hadoop的namenode，那么bruce成为hdfs的超级用户在bruce用户下运行命令：#创建/user/hadoop目录hadoopfs-mkdir-p
wpheternal·2024-02-14 21:42

Hadoop(HDFS)的超级用户

Hadoop(HDFS)的超级用户超级用户超级用户即运行namenode进程的用户。宽泛的讲，如果你启动了namenode，你就是超级用户。超级用户干任何事情，因为超级用户能够通过所有的权限检查。
zinger.wang·2024-02-14 21:12

HDFS的超级用户

一.解释原因HDFS(HadoopDistributedFileSystem)和linux文件系统管理一样，也是存在权限控制的。
重剑DS·2024-02-14 21:41

vivado HDL编码技术

•充分利用AMD设备的体系结构功能。•模板可从AMDVivado™设计套件集成设计环境中获得（侧面）。要访问模板，请在“窗口”菜单中，选择“语言模板”。本章包括编码示例。
cckkppll·2024-02-14 14:35

Linux内核系统篇——内核的5个重要子系统？

首先一张熟悉的图来说明GNU/linux的基本体系结构：体系的上部分是用户（或应用程序）空间，这是用户应用程序执行的地方。用户空间之下是内核空间，Linux内核正是位于这里。
极致Linux内核·2024-02-14 13:23

Linux_进程概念

硬件系统软件系统进程概念进程状态孤儿进程进程优先级一.硬件系统1.1冯诺依曼体系结构数学家冯·诺依曼提出了计算机制造的三个基本原则，即采用二进制逻辑、程序存储执行以及计算机由五个部分组成（运算器、控制器
bhbca·2024-02-14 07:39

Hadoop+Spark+MongoDB+MySQL+C#大数据开发项目最佳实践

一、前言随着IT技术的飞速发展，各行各业都已在广泛尝试使用大数据技术提供更稳健和优质的服务。目前，医疗IT系统收集了大量极具价值的数据，但这些历史医疗数据并没有发挥出其应有的价值。为此，本文拟利用医院现有的历史数据，挖掘出有价值的基于统计学的医学规则、知识，并基于这些信息构建专业的临床知识库，提供诊断、处方、用药推荐功能，基于强大的关联推荐能力，极大地提高医疗服务质量，减轻医疗人员的工作强度。二、
yiyidsj·2024-02-14 07:08

学习总结 - swift适配器 为 Hadoop 的存储层增加对 OpenStack Swift 的支持

虽然文档内所涉及的版本有点旧，但内容很精彩，值得推荐背景在Hadoop中有一个抽象文件系统的概念，它有多个不同的子类实现，由DistributedFileSystem类代表的HDFS便是其中之一。
天地不仁以万物为刍狗·2024-02-14 07:37

C# Hadoop学习笔记

记录一下学习地址http://www.360doc.com/content/14/0607/22/3218170_384675141.shtml转载于:https://www.cnblogs.com/TF12138/p/4170558.html
第八个猴子·2024-02-14 07:37

hadoop HDFS的API封装

Configuration类：该类的对象封装了客户端或者服务端的配置。FileSystem类：该类的对象是一个文件系统对象，可以用该队想的一些方法来对文件进行操作。FSDataInputStream和FSDataOutputStream：这两个类是HDFS中的输入输出流。基本流程：得到Configuration对象得到FileSystem对象进行文件操作（读写、删除、改名）所需引入的库import
Cynicism_Kevin·2024-02-14 07:37

ble原理（1）蓝牙ble协议知识

1蓝牙技术联盟2：窝窝科技3.网友参考11：协议体系结构图2：协议部分说明控制器：基本是一个物理设备，能发射和接收无线电信号，且如何能将这些信号翻译成携带信息数据包主机：是一个软件栈，管理两台以上的设备间如何进行通信
深圳-剑影·2024-02-14 07:54

Hive的小文件问题

Reduce的数量3.2已存在的小文件合并3.2.1方式一：insertoverwrite(推荐)3.2.2方式二：concatenate3.2.3方式三：使用hive的archive归档3.2.4方式四：hadoopgetmerge
爱吃辣条byte·2024-02-14 06:11

从Hadoop框架与MapReduce模式中谈海量数据处理（含淘宝技术架构）

从Hadoop框架与MapReduce模式中谈海量数据处理（含淘宝技术架构）前言几周前，当我最初听到，以致后来初次接触Hadoop与MapReduce这两个东西，我便稍显兴奋，觉得它们很是神秘，而神秘的东西常能勾起我的兴趣
Dimple七·2024-02-14 06:41

系统架构25 - 软件架构设计（4）

定义软件复用是指系统化的软件开发过程：开发一组基本的软件构造模块，以覆盖不同的需求/体系结构之间的相似性，从而提高系统开发的效率、质量和性
银龙丶裁决·2024-02-14 04:11

计算机网络

计算机网络第1章绪论1.1计算机网络概述1.2计算机网络体系结构1.2.1分层结构、协议、接口、服务1.2.2OSI参考模型1.2.3TCP/IP参考模型和5层参考模型-----------------
folielxx·2024-02-14 02:33

计算机网络总结

文章目录第一章：概述杂概念计算机网络性能计算机网络体系结构第二章：物理层基本概念数据通信的基础知识有关信道的基本概念物理层下面的传输媒体信道复用技术第三章：数据链路层使用点对点信道的数据链路层点对点协议
aafz1·2024-02-14 02:00

大数据开发之Sqoop详细介绍

备注:测试环境CDH6.3.1Sqoop1.4.7一.Sqoop概述ApacheSqoop（SQL-to-Hadoop）项目旨在协助RDBMS与Hadoop之间进行高效的大数据交流。
只是甲·2024-02-14 01:17

深入 Java 调试体系，第 3 部分: JDWP 协议及实现

深入Java调试体系，第3部分:JDWP协议及实现虞俊杰,软件工程师,IBM徐睿智,软件工程师,IBM简介：JPDA(JavaPlatformDebuggerArchitecture)是Java平台调试体系结构的缩写
killmice·2024-02-14 00:15

Leach协议

这些扩展包括MAC协议，用于计算和交互的能量分配模型和leach协议的体系结构。网络拓扑结构可以通过简单的Nodes,Links,Agents和Applications描述。
fpga和matlab·2024-02-14 00:08

Ubuntu16.04下HBase安装笔记

基础准备JDKHadoopSSHServer下载HBasehttps://hbase.apache.org/tar-zxvfhbase-1.4.2-bin.tar.gzsudomvhbase-1.4.2
bluexiii·2024-02-13 22:48

利用 Docker 安装 Hadoop 集群并通过 Java API 访问 HDFS

前言最近刚好在学习Hadoop，在安装过程中遇到了一些小麻烦，正好将此次过程记录并分享出来，希望能对准备学习本块内容的读者们有所帮助。本次操作在Ubuntu中完成，如何安装Ubuntu本文不再赘述。
qq_33419925·2024-02-13 21:38

hadoop(十三)—自定义排序

这节课我们一起学习Hadoop的自定义排序，Hadoop是有一套默认的排序规则的，但是这往往不能满足我们多样化的需求，为了让排序更多样化，这就需要用到我们本节课所要学习的自定义排序功能。
文子轩·2024-02-13 20:13

计算机网络——08应用层原理

服务器软件与浏览器软件通信网络核心中没有应用层软件网络核心没有应用层功能网络应用只能在端系统上存在快速网络应用开发和部署网络应用的体系架构可能的应用架构客户-服务器模式（C/S）对等模式（P2P）混合体：客户-服务器和对等体系结构客户
Aubyn11·2024-02-13 19:51

YARN体系结构指南

1.简介hadoop-0.23引入的新体系结构将JobTracker的两个主要功能：资源管理和作业生命周期管理分为不同的组件。
盗梦者_56f2·2024-02-13 16:45

大数据处理为何选择Spark，而不是Hadoop

Spark的各个组件2.HadoopHad
嘿嘿海海·2024-02-13 14:00

Java+springboot+MYSQL停车场管理系统的设计与实现82061-计算机毕业设计项目选题推荐（免费领源码）

其体系结构，将由专用的服务器/客户方式向广域网发展，使更多的系统间能够互相交流数据，带动整
QQ_3376098506·2024-02-13 13:45

hadoop 分布式集群安装与原理

对很多人来说，学习大数据都止步于集群搭建，即使是那些工作过很多年的JAVA程序员也不例外，我们分享一套能让您轻松完成集群搭建的方法，包括Hadoop的源码编译、企业级环境安装与配置和常用大数据组件的基本原理
海牛大数据_青牛老师·2024-02-13 12:44

初识子域名

目录子域名子域名的作用：如何创建子域名：注意事项：子域名收集工具个人推荐主要特点使用方法安装注意事项使用示例注意事项子域名子域名是域名体系结构中的一个概念，用于在主域名下创建层次或分类。
TJ-周月年·2024-02-13 11:11

「软件设计师」计算机组成与体系结构

数据的表示最小的数据单位：b最小的存储单位：byte进制的转换R进制转十进制:将每一位数字用RkR^kRk表示然后相加，k与该位与小数点的距离有关，小数点左边第一位为0，右边第一位为-1，往左递增，往右递减如：二进制数10100.01=1∗24+1∗22+1∗2−210100.01=1*2^4+1*2^2+1*2^{-2}10100.01=1∗24+1∗22+1∗2−2十进制转R进制:整数位使用短
PinHsin·2024-02-13 09:44

小猿圈之Hadoop优化

Hadoop框架是现在最主流的的框架之一，越来越多的人去学习，那么你对hadoop的理解是什么？hadoop一定要会优化，那怎么优化呢，小猿圈今天说一下，感兴趣的朋友可以看看小猿圈写的这篇文章。
小猿圈加加·2024-02-13 05:38

Java从入门到精通

JavaSE，掌握Java语言本身、Java核心开发技术以及Java标准库的使用；2、如果继续学习JavaEE，那么Spring框架、数据库开发、分布式架构就是需要学习的；3、如果要学习大数据开发，那么Hadoop
nightluo·2024-02-13 01:52

Datax ETL工具源码研究

Kittle优点：与大数据Hadoop结合比较好，功能比较齐全，强大，支持数据库，文件数据读写，界面拖拽方式操作；缺点：
Spring1985·2024-02-13 01:57

【后端高频面试题--Linux篇】

Linux的体系结构BASH和DOS之间的基本区别是什么？简单Linux文件系统？简述一下“一切皆文件”的概念Linux的目录结构是怎样的？并阐述每个目录的作用？什么是inode？怎
码上有前·2024-02-12 22:36

2018-07-19 sqoop

sqoop:数据从传统数据库到到hadoop的导入,导出安装：1.解压2.修改配置文件cdSQOOP_HOME/conf$mvsqoop-env-template.shsqoop-env.sh打开sqoop-env.sh
江江江123·2024-02-12 20:10

【解决方案】pyspark 初次连接mongo 时报错Class not found exception:com.mongodb.spark.sql.DefaultSource

=spark.read.format("com.mongodb.spark.sql.DefaultSource").load()   File"/home/cisco/spark-2.4.1-bin-hadoop2
能白话的程序员♫·2024-02-12 19:33

使用 C++23 从零实现 RISC-V 模拟器（1）：最简CPU

1.冯诺依曼结构冯·诺依曼结构是现代计算机体系结构的基础，由约翰·冯·诺依曼在1945年提出。这种结构也称为冯·诺依曼体系结构，其核心特点是将程序指令和数据存储在同一个读写存储器（内存）中，计算机的
everystep_·2024-02-12 17:57

《强化文体意识 落实语文要素》有感

杨老师提到提到语文要素是建构统编教科书体系结构的基石。语文要素明确了单元教学目标。每个单元的语文要素，都是教科书环环相扣的体系结构中一环。我们备课时，重视语文要素。杨老师强调语文老师要有文体意识。
做带光行走的人·2024-02-12 17:19

Hadoop分布式系统架构-MapReduce-02

1、MapReduce介绍MapReduce思想在生活中处处可见。或多或少都曾接触过这种思想。MapReduce的思想核心是“分而治之”，适用于大量复杂的任务处理场景（大规模数据处理场景）。Map负责“分”，即把复杂的任务分解为若干个“简单的任务”来并行处理。可以进行拆分的前提是这些小任务可以并行计算，彼此间几乎没有依赖关系。Reduce负责“合”，即对map阶段的结果进行全局汇总。MapRedu
一直上上签X·2024-02-12 16:41

（一）Docker 在线部署和离线部署

环境：CentOS7.31.在线部署[root@hadoop004~]#yuminstall-yhttpd[root@hadoop004~]#servicehttpdstartRedirectingto
白面葫芦娃92·2024-02-12 15:51

【译】用纯JavaScript写一个简单的MVC App

我想使用model-view-controller体系结构模式并用纯JavaScript编写一个简单的应用程序。所以我着手做了，下面就是。
Ming_Hu·2024-02-12 14:44

【ug572】UltraScale体系结构时钟资源手册节选（一）

概述时钟架构概述TheUltraScalearchitectureclockingresourcesmanagecomplexandsimpleclockingrequirementswithdedicatedglobalclocksdistributedonclockroutingandclockdistributionresources.Theclockmanagementtiles(CMTs
wjh776a68·2024-02-12 11:58

【ug572】UltraScale体系结构时钟资源手册节选（二）

时钟缓冲区ThePHYglobalclockingcontainsseveralsetsofBUFGCTRLs,BUFGCEs,andBUFGCE_DIVs.EachsetcanbedrivenbyfourGCpinsfromtheadjacentbank,MMCMs,PLLsinthesamePHY,andinterconnect.Theclockbuffersthendrivetherouti
wjh776a68·2024-02-12 11:58

zk01

zookeeper基础ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Hadoop和Hbase的重要组件。提供的功能包括：命名服务、配置管理、集群管理、分布式锁、队列管理。
矮肥·2024-02-12 11:41

【Linux】进程基础铺垫（一）硬件基础：冯诺依曼体结构

冯诺依曼体结构一、体系结构（硬件上）——冯诺依曼体系结构二、内存的引入：为什么在体系结构中要存在内存??
NiNi_suanfa·2024-02-12 10:26

Mysql Day04

mysql体系结构连接层服务层引擎层（索引）存储层存储引擎存储引擎是基于表建立的，默认是innoDBshowcreatetabletb;查看当前数据库支持的存储引擎showengines;InnoDB特点
临渊羡鱼的猫·2024-02-12 09:04

2018-11-16 hadoop3.1完全分布式部署

Hadoop3.1.0完全分布式集群部署，三台服务器部署结构如下github配置文件源码地址Pdsh使用方法http://kumu-linux.github.io/blog/2013/06/19/pdsh
Albert陈凯·2024-02-12 08:20

hadoop-YARN

ApacheHadoopYARN百度百科：https://baike.baidu.com/item/yarn/16075826?
weixin_33736649·2024-02-12 07:44

Hadoop-MapReduce-Yarn集群搭建

通过官网搭建：hadoop.apache.org/docs/r2.6.5/hadoop-project-dist/hadoop-common/SingleCluster.ht
qq_2368521029·2024-02-12 07:44

搭建 Hadoop-3.1.3 HA 集群

本文目录1.集群部署分布规划2.Zookeepr集群安装3.HDFS-HAⅠ.配置core-site.xmlⅡ.配置hdfs-site.xmlⅢ.配置分发4.YARN-HAⅠ.配置yarn-site.xmlⅡ.配置分发4.启动前的配置5.启动HA集群Ⅰ.单独启动Ⅱ.脚本方式启动HA集群6.HA集群测试
扛麻袋的少年·2024-02-12 07:43
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他