IT外文选刊
IT外文选刊

打造企业级AWS基础架构-架构的脚手架

作者 | MICHAŁ KAPICZYŃSKI
译者 | IT外文选刊

微信原文

外文链接：
https://grapeup.com/blog/read...

硅谷电视系列节目中曾经对Cloud的解释是，“this tiny little area which is becoming super important and in many ways is the future of computing”，中文意思是“这个小小的领域正在变得超级重要，在很多方面是计算的未来” 。这句话应该是准确的，只是现在的云计算已经不渺小了，未来已经到来。所以，让我们来深入了解云计算的世界，学习如何利用AWS平台来构建高可用、安全、容错的云系统，学习它的关键组件是什么以及如何在AWS上部署你的应用。

这篇文章是整个系列中的第一篇，将带领大家了解搭建企业级AWS基础架构的过程。到本系列结束时，我们将搭建一个基础架构，它由在两个不同的可用性区的四个子网组成的VPC组成。里面部署了一个客户端应用、后端服务器和数据库。我们的架构将能够提供现代云系统所需的可扩展性和可用性。我们将解释亚马逊云服务平台的基本概念和组件。在这篇文章中，我们将讨论架构的脚手架，具体来说就是一个虚拟私有云（VPC）、子网、弹性IP地址、NAT网关和路由表。整个系列的文章包括：

第一篇
    - 架构的脚手架（VPC、子网、弹性IP、NAT）
第二篇

    - 应用程序部署和数据库配置（EC2、AMI、Bastion主机、RDS）

第三篇
    - 扩展基础架构（负载均衡、自动扩展）

云计算

在过去几年里，IT产业经历了一场重大变革，大多数全球企业从传统的IT基础设施转向云计算。这背后的主要原因是云计算带来的灵活性和可扩展性，云计算是指通过互联网（云）提供计算服务，如服务器、存储、数据库、网络、分析服务等。在这种模式下，企业只需要为实际使用的云资源付费，不需要管理其背后的物理基础设施。市场上有许多云服务提供商，主要有亚马逊云服务（AWS）、微软Azure和谷歌云。本文将重点介绍AWS上的服务，但请记住，这里介绍的大多数概念在其他平台上都有对应的概念。

基础架构概述

让我们从整个系列中将要构建的内容开始。我们的目标是创建一个真实的、企业级的AWS基础架构，它将能够承载一个由React.js Web应用程序、Java Spring Boot服务器和关系型数据库组成的用户管理系统。

图1

架构如图1所示。它包括一个VPC，有四个子网（2个公共子网和2个私有子网），分布在两个不同的可用性区。在公共子网中托管了一个客户端应用程序、一个NAT网关和一个Bastion主机（后面会有更多介绍），而我们的私有子网包含后端服务器和数据库实例。基础架构还包括互联网网关，以实现从我们的VPC和负载均衡器访问互联网。将后端服务器和数据库放在私有子网中的原因是为了保护这些实例不会直接暴露在互联网上，因为它们可能包含敏感数据。而且它们将只拥有私有IP地址，并且位于NAT网关和面向公共的弹性负载均衡器后面。目前的基础架构通过将实例部署在两个不同的可用性区，并使用Auto Scaling组，提供系统的自动扩展和健康管理，从而提供了高水平的可扩展性和可用性。

图2展示了我们将在AWS上托管的用户管理系统的界面。

图2

这个应用可以在GitHub上找到：

客户端：

https://github.com/mkapiczy/r...

服务端：

https://github.com/mkapiczy/u...

在这一篇，我们将重点介绍基础架构的脚手架，即分配弹性IP地址、设置VPC、创建子网、配置NAT网关和路由表。

AWS免费套餐说明

AWS为新用户提供了12个月的免费套餐，让客户可以在指定限制内免费使用其服务。这些限制包括每月750小时的t2.micro EC2实例、5GB的Amazon S3存储、每月750小时的Amazon RDS等。在AWS管理控制台中，亚马逊通常会提示哪些资源属于免费套餐，在整个本系列中，我们将使用这些免费的服务。如果你想确保自己不会超过免费套餐的限制，记得每当你在AWS上完成工作时，就停止你的EC2和RDS实例。你还可以设置一个计费提醒，如果超过了指定的限制，就会通知你。

AWS概念

1. VPC

我们进入AWS基础架构的广阔世界的第一步是了解亚马逊虚拟私有云（VPC）。VPC 允许开发人员创建一个虚拟网络，他们可以在其中启动资源，并使其与其他 VPC 和外部世界进行逻辑隔离。在VPC中，您的资源拥有私有IP地址，它们可以相互通信。你可以控制对VPC内所有这些资源的访问权限，并根据你的喜好来路由传出流量。

图3

对VPC的访问是通过使用几个关键功能来配置的：

安全组：它们基本上像迷你防火墙一样工作，定义了允许传入和传出的IP地址和端口。它们可以在实例级别设置，在许多实例之间共享，并提供了允许从其他安全组而不是IP访问的可能性。

路由表：路由表负责决定来自子网或网关的网络流量应该被引导到哪里。有一个与VPC关联的主路由表，您可以为您的子网和网关定义自定义路由表。

网络访问控制列表（网络ACL）：它作为一个用于入站和出站流量的IP过滤表，可以作为安全组之上的附加安全层。网络ACL的作用类似于安全组，但不是在实例层应用规则，而是将其应用到整个VPC或子网。

2. 子网

实例不能直接在VPC中启动。它们需要运行在子网中。子网是一个额外的隔离区域，它有自己的CIDR块、路由表和网络访问控制列表。子网允许你在同一个VPC中有不同的行为。例如，你可以创建一个可以访问互联网和被互联网访问的公共子网和一个不能通过互联网访问的私有子网，私有子网必须通过NAT（网络地址转换）网关才能访问外部世界。

图4

3. NAT(网络地址转换)  网关

NAT 网关用于使位于私有子网中的实例能够连接到互联网或其他 AWS 服务，同时仍然防止从互联网直接连接到这些实例。例如，当您需要在私有子网中运行的 EC2 实例上安装或升级软件或操作系统时，NAT 可能很有用。AWS提供了一个NAT网关管理服务，只需要很少的管理工作量。我们在设置基础架构的时候会使用它。

4. 弹性IP

AWS提供了一个弹性IP地址的概念，用于方便动态云计算的管理。弹性IP地址是一个公共的、静态的IP地址，它与你的AWS账户相关联，可以轻松分配到你的EC2实例中的一个实例。其背后的想法是，该地址并不与您的实例紧密关联，相反，该地址的弹性特性允许在系统出现任何故障的情况下，迅速将该地址重新映射到您账户中的另一个健康实例。

5. AWS区域

AWS 区域是指 AWS 设有数据中心的地理区域。区域被划分为可用性区（AZ），这些区域是独立的数据中心，相互之间的位置相对较近。可用性区用于提供冗余和数据复制。为您的基础设施选择 AWS 区域时，应考虑以下因素。

就近：出于延迟或监管原因，您通常希望您的应用部署在靠近您的运营区域的地方。

成本：不同的区域有不同的定价。

功能选择：并非所有地区的服务都是可用的，这对于新推出的功能来说尤其如此。

可用区：所有地区至少有2个AZ，但有些地区有更多。根据您的需求，这可能是一个关键因素。

练习

AWS区域

首先，让我们开始选择要操作的AWS区域。在 AWS 管理控制台的右上角，你可以选择一个区域。在这一点上，你选择哪个区域其实并不重要。但是，需要注意的是，您将始终只查看在当前选择的区域中启动的资源。

弹性IP

下一步就是分配一个弹性IP地址。为此，进入AWS管理控制台，找到VPC服务。在左侧菜单栏的虚拟私有云选项下，应该可以看到弹性IP服务。在那里，你可以分配一个由你自己拥有的新地址，也可以从AWS的可用地址池中分配。

图5

配置可用性区A

接下来，我们来创建我们的VPC和子网。现在，我们将只设置可用性区A，在创建VPC之后，我们将在高可用性上下功夫。所以再次进入VPC服务，点击启动VPC向导按钮。在接下来的页面上，您可以选择您希望 AWS为您设置的 VPC 配置类型。为了尽可能的匹配我们的目标架构，我们将选择VPC与公共子网和私有子网的VPC。

图6

在下一个页面中，您可以设置VPC的配置细节，如

- 名称。

- CIDR区块：

- 子网的详细信息。

- 名称：

- IP地址范围----VPC CIDR范围的一个子集。

- 可用区。

如架构图（图1）所示，我们需要在2个不同的可用性区（Availability Zone）中设置4个子网。因此，让我们把VPC的CIDR设置为10.0.0.0.0.0/22，子网如下：

-公共子网-a: 10.0.0.0.0.0/24 (A区)

-私有子网-a: 10.0.1.0/24 (A区)

-公共子网-b: 10.0.2.0.0/24 (B区)

-私有子网-b: 10.0.3.0/24 (B区)

设置好一切，如图7所示。这里需要注意的重要的点是选择公共子网和私有子网的可用性区域（Availability Zone）相同，而且AWS会自动为我们设置一个NAT网关，我们只需要指定之前分配的弹性IP地址即可。现在，点击 "创建VPC "按钮，AWS就会对你的VPC进行配置。

图7

NAT网关

创建VPC结束后，进入到NAT网关部分，应该可以看到AWS为你创建的网关。为了让它更有辨识度，让我们把它的名称标签设置为nat-a。


图8

路由表

AWS还为您的 VPC 配置了路由表。接下来是路由表部分，您应该有两个与您的VPC关联的路由表。其中一个是你的VPC的主路由表，第二个是目前与你的公共子网-a关联的路由表。我们修改一下这个设置。

首先，选择主路由表，进入路由选项，点击编辑路由。目前有两个条目。第一个是指任何引用本地VPC CIDR的IP地址都应该在本地解析，我们不用修改它。第二个是指向NAT网关的，我们要修改它来配置我们VPC的Internet网关，以便让出站流量到达外部网络世界。

图9

接下来是子网关联选项，将主路由表与公共子网-a关联。你也可以将其名称标签编辑为main-rt。然后，选择与VPC关联的第二个路由表，编辑它的路由，将每一个出网请求都路由到nat-a网关，如图10所示。将此路由表与私有子网-a关联，并将其名称标签设置为private-a-rt。

图10

配置可用性区B

为了提供高可用性，我们需要在第二个可用性区也设置好一切。第一步是创建子网。再次转到AWS管理控制台中的VPC服务，在左侧菜单栏中找到子网部分。现在，单击 "创建子网 "按钮并配置一切，如图11和12所示。

公共子网-b

图11

私有子网-b

图12

NAT网关

对于可用性区B，我们需要手动创建NAT网关。为此，在 VPC 控制面板左侧菜单栏中找到 NAT 网关部分，点击创建 NAT 网关。选择公共子网-b，分配弹性IP，并添加NAT-b为名称标签。

路由表

最后一步是配置可用性区B中的子网的路由表。我们的公共子网-b要和公共子网-a有相同的路由规则，所以让我们为公共子网-b的main-rt表添加一个新的关联。然后，点击创建路由表按钮，命名为private-b-rt，选择我们的VPC并点击创建。接下来，选择新创建的表，进入路由选项，通过类似于private-a-rt表的方式编辑路由，但不是将每一个外部请求引导到nat-a网关，而是将其引导到nat-b（图13）。

图13

最后，你应该有三个路由表与你的VPC关联，如图14所示。

图14

总结

就这样，我们的VPC的脚手架已经准备好了。图15所示的图是刚刚创建的整个基础架构。现在，它已经准备好了，可以创建所需的EC2实例、Bastion主机、配置RDS数据库和部署我们的应用程序了，这将在本系列的下一篇中介绍。

图15

参考

https://azure.microsoft.com/e...
https://aws.amazon.com/what-i...
https://docs.aws.amazon.com/A...
https://docs.aws.amazon.com/v...
https://docs.aws.amazon.com/v...
https://docs.aws.amazon.com/v...
https://medium.com/@datapath_...
https://cloudacademy.com/blog...
https://aws.amazon.com/blogs/...
https://aws.amazon.com/quicks...
https://aws.amazon.com/blogs/...
http://thebluenode.com/exposi...
https://app.pluralsight.com/l...
https://app.pluralsight.com/l...
https://app.pluralsight.com/l...
https://datanextsolutions.com...
https://docs.aws.amazon.com/v...

你可能感兴趣的:(架构,架构设计,服务器端,可扩展性)

  • 【iOS】MVC设计模式 Magnetic_h iosmvc设计模式objective-c学习ui
    MVC前言如何设计一个程序的结构，这是一门专门的学问，叫做"架构模式"（architecturalpattern），属于编程的方法论。MVC模式就是架构模式的一种。它是Apple官方推荐的App开发架构，也是一般开发者最先遇到、最经典的架构。MVC各层controller层Controller/ViewController/VC（控制器）负责协调Model和View，处理大部分逻辑它将数据从Mod
  • 微服务下功能权限与数据权限的设计与实现 nbsaas-boot 微服务java架构
    在微服务架构下，系统的功能权限和数据权限控制显得尤为重要。随着系统规模的扩大和微服务数量的增加，如何保证不同用户和服务之间的访问权限准确、细粒度地控制，成为设计安全策略的关键。本文将讨论如何在微服务体系中设计和实现功能权限与数据权限控制。1.功能权限与数据权限的定义功能权限：指用户或系统角色对特定功能的访问权限。通常是某个用户角色能否执行某个操作，比如查看订单、创建订单、修改用户资料等。数据权限：
  • 腾讯云技术深度探索：构建高效云原生微服务架构 我的运维人生 云原生架构腾讯云运维开发技术共享
    腾讯云技术深度探索：构建高效云原生微服务架构在当今快速发展的技术环境中，云原生技术已成为企业数字化转型的关键驱动力。腾讯云作为行业领先的云服务提供商，不断推出创新的产品和技术，助力企业构建高效、可扩展的云原生微服务架构。本文将深入探讨腾讯云在微服务领域的最新进展，并通过一个实际案例展示如何在腾讯云平台上构建云原生应用。腾讯云微服务架构概览腾讯云微服务架构基于云原生理念，旨在帮助企业快速实现应用的容
  • PHP环境搭建详细教程 好看资源平台 前端php
    PHP是一个流行的服务器端脚本语言，广泛用于Web开发。为了使PHP能够在本地或服务器上运行，我们需要搭建一个合适的PHP环境。本教程将结合最新资料，介绍在不同操作系统上搭建PHP开发环境的多种方法，包括Windows、macOS和Linux系统的安装步骤，以及本地和Docker环境的配置。1.PHP环境搭建概述PHP环境的搭建主要分为以下几类：集成开发环境：例如XAMPP、WAMP、MAMP，这
  • 关于提高复杂业务逻辑代码可读性的思考 编程经验分享 开发经验java数据库开发语言
    目录前言需求场景常规写法拆分方法领域对象总结前言实际工作中大部分时间都是在写业务逻辑，一般都是三层架构，表示层（Controller）接收客户端请求，并对入参做检验，业务逻辑层（Service）负责处理业务逻辑，一般开发都是在这一层中写具体的业务逻辑。数据访问层（Dao）是直接和数据库交互的，用于查数据给业务逻辑层，或者是将业务逻辑层处理后的数据写入数据库。简单的增删改查接口不用多说，基本上写好一
  • 18、架构-可观测性之聚合度量 大树~~ 架构javapython后端架构
    聚合度量聚合度量是指对系统运行时产生的各种指标数据进行收集、聚合和分析，以了解系统的健康状况和性能表现。聚合度量是可观测性的关键组成部分，通过对度量数据的分析，可以及时发现系统中的异常和瓶颈。以下是对聚合度量各个方面的详细解析，并结合具体的数据案例和技术支撑。指标收集收集系统运行时产生的各种指标数据是聚合度量的基础。常见的指标包括CPU使用率、内存使用率、请求处理时间、请求数、错误率等。以下是指标
  • BART&BERT Ambition_LAO 深度学习
    BART和BERT都是基于Transformer架构的预训练语言模型。模型架构：BERT(BidirectionalEncoderRepresentationsfromTransformers)主要是一个编码器（Encoder）模型，它使用了Transformer的编码器部分来处理输入的文本，并生成文本的表示。BERT特别擅长理解语言的上下文，因为它在预训练阶段使用了掩码语言模型（MLM）任务，即
  • 系统架构设计师 需求分析篇二 AmHardy 软件架构设计师系统架构需求分析面向对象分析分析模型UML和SysML
    面向对象分析方法1.用例模型构建用例模型一般需要经历4个阶段：识别参与者：识别与系统交互的所有事物。合并需求获得用例：将需求分配给予其相关的参与者。细化用例描述：详细描述每个用例的功能。调整用例模型：优化用例之间的关系和结构，前三个阶段是必需的。2.用例图的三元素参与者：使用系统的用户或其他外部系统和设备。用例：系统所提供的服务。通信关联：参与者和用例之间的关系，或用例与用例之间的关系。3.识别参
  • Java爬虫框架（一）--架构设计 狼图腾-狼之传说 java框架java任务html解析器存储电子商务
    一、架构图那里搜网络爬虫框架主要针对电子商务网站进行数据爬取，分析，存储，索引。爬虫：爬虫负责爬取，解析，处理电子商务网站的网页的内容数据库：存储商品信息索引：商品的全文搜索索引Task队列：需要爬取的网页列表Visited表：已经爬取过的网页列表爬虫监控平台：web平台可以启动，停止爬虫，管理爬虫，task队列，visited表。二、爬虫1.流程1)Scheduler启动爬虫器，TaskMast
  • Armv8.3 体系结构扩展--原文版 代码改变世界ctw ARM-TEE-Androidarmv8嵌入式arm架构安全架构芯片TrustzoneSecureboot
    快速链接:.ARMv8/ARMv9架构入门到精通-[目录]付费专栏-付费课程【购买须知】:个人博客笔记导读目录(全部)TheArmv8.3architectureextensionTheArmv8.3architectureextensionisanextensiontoArmv8.2.Itaddsmandatoryandoptionalarchitecturalfeatures.Somefeat
  • 【ARM Cortex-M 系列 2.3 -- Cortex-M7 Debug event 详细介绍】 主公讲 ARM #ARM系列arm开发debugevent
    请阅读【嵌入式开发学习必备专栏】文章目录Cortex-M7DebugeventDebugeventsCortex-M7Debugevent在ARMCortex-M7架构中，调试事件（DebugEvent）是由于调试原因而触发的事件。一个调试事件会导致以下几种情况之一发生：进入调试状态：如果启用了停滞调试（HaltingDebug），一个调试事件会使处理器在调试状态下停滞。通过将DHCSR.C_DE
  • 基于STM32与Qt的自动平衡机器人：从控制到人机交互的的详细设计流程 极客小张 stm32qt机器人物联网人机交互毕业设计c语言
    一、项目概述目标和用途本项目旨在开发一款基于STM32控制的自动平衡机器人，结合步进电机和陀螺仪传感器，实现对平衡机器人的精确控制。该机器人可以用于教育、科研、娱乐等多个领域，帮助用户了解自动控制、机器人运动学等相关知识。技术栈关键词STM32单片机步进电机陀螺仪传感器AD采集电路Qt人机界面实时数据监控二、系统架构系统架构设计本项目的系统架构设计包括以下主要组件：控制单元:STM32单片机传感器
  • JAVA·一个简单的登录窗口 MortalTom java开发语言学习
    文章目录概要整体架构流程技术名词解释技术细节资源概要JavaSwing是Java基础类库的一部分，主要用于开发图形用户界面（GUI）程序整体架构流程新建项目，导入sql.jar包（链接放在了文末），编译项目并运行技术名词解释一、特点丰富的组件提供了多种可视化组件，如按钮（JButton）、文本框（JTextField）、标签（JLabel）、下拉列表（JComboBox）等，可以满足不同的界面设计
  • ARMV8体系结构简介：概述 简单同学 ARMV8体系结构ARMV8
    1.前言本文主要概括的介绍ARMV8体系结构定义了哪些内容，概括的说：ARM体系结构定义了PE的行为，不会定义具体的实现ARM体系结构也定义了debug体系结构和trace体系结构ARM体系结构采用RISC指令集（1）长度一致的寄存器；（2）load/store架构，数据处理操作只能对寄存器内容进行处理，不会直接对内存的内容进行处理；（3）简单寻址方式，load/store地址来源于寄存器或指令域
  • Table列表复现框实现【勾选-搜索-再勾选】 ～四时春～ java开发语言elementuivue
    Table列表复现框实现【勾选-搜索-再勾选】概要整体架构流程代码实现技术细节注意参考文献概要最近在开发时遇到一个问题，在进行表单渲染时，正常选中没有问题，单如果需要搜索选中时，一个是已选中的不会回填，二是在搜索的结果中进行选中，没有实现，经过排查，查找资料后实现。例如：整体架构流程具体的实现效果如下：代码实现{{scope.row.userName}}已选区{{userItem.userName
  • 深入浅出 -- 系统架构之负载均衡Nginx的性能优化 xiaoli8748_软件开发 系统架构系统架构负载均衡nginx
    一、Nginx性能优化到这里文章的篇幅较长了，最后再来聊一下关于Nginx的性能优化，主要就简单说说收益最高的几个优化项，在这块就不再展开叙述了，毕竟影响性能都有多方面原因导致的，比如网络、服务器硬件、操作系统、后端服务、程序自身、数据库服务等，对于性能调优比较感兴趣的可以参考之前《JVM性能调优》中的调优思想。优化一：打开长连接配置通常Nginx作为代理服务，负责分发客户端的请求，那么建议开启H
  • AI大模型的架构演进与最新发展 季风泯灭的季节 AI大模型应用技术二人工智能架构
    随着深度学习的发展，AI大模型（LargeLanguageModels,LLMs）在自然语言处理、计算机视觉等领域取得了革命性的进展。本文将详细探讨AI大模型的架构演进，包括从Transformer的提出到GPT、BERT、T5等模型的历史演变，并探讨这些模型的技术细节及其在现代人工智能中的核心作用。一、基础模型介绍：Transformer的核心原理Transformer架构的背景在Transfo
  • 信息系统安全相关概念(上) YuanDaima2048 课程笔记基础概念安全信息安全笔记
    文章总览：YuanDaiMa2048博客文章总览下篇:信息系统安全相关概念(下)信息系统安全相关概念[上]信息系统概述信息系统信息系统架构信息系统发展趋势：信息系统日趋大型化、复杂化信息系统面临的安全威胁信息系统安全架构设计--以云计算为例信息系统安全需求及安全策略自主访问控制策略DAC强制访问控制策略MAC信息系统概述信息系统用于收集、存储和处理数据以及传递信息、知识和数字产品的一组集成组件。几
  • 程序员架构师主要是做什么_程序员架构师：职责、技能与挑战 绿色小猪
    免费备考资料（2024年11月软考）：历年试题+视频课合集+电子讲义点击领取>>>免费刷题：2024年11月软考备考刷题点此进入>>>程序员架构师的角色定位在软件开发领域，程序员架构师是一个至关重要的角色。他们不仅需要深入理解业务需求，还要将其转化为技术上的解决方案。程序员架构师是项目中的技术领航者，负责制定和维护软件系统的整体架构，确保系统的可扩展性、可维护性和性能。他们的工作涉及从概念化到实现
  • metaRTC8.0，一个全新架构的webRTC SDK库 metaRTC webrtc音视频
    概述metaRTC8.0是metaRTC开源以来架构变化最大的一个版本，是metaIPC3.0等高性能的基础。metaRTC8.0是一个全新架构版本，并非在metaRTC7.0版本上简单升级，在QOS/语音对讲/内存占用/视频文件录制读取等方面新增多个模块，在弱网对抗/语音对讲/内存优化等效果上有显著提升。metaRTC8.0在一年多的开发中进行了近200次迭代，metaRTC8.0社区版计划在2
  • 鲲鹏 ARM 架构 麒麟 Lylin v10 安装 Nginx (离线) 焚木灵 arm开发架构nginx服务器
    最近做一个银行的项目，银行的服务器是鲲鹏ARM架构的服务器，并且是麒麟v10的系统，这里记录一下在无法访问外网安装Nginx的方法。其他文章：鲲鹏ARM架构麒麟Lylinv10安装Mysql8.3(离线)-CSDN博客鲲鹏ARM架构麒麟Lylinv10安装Node和NVM(离线)-CSDN博客鲲鹏ARM架构麒麟Lylinv10安装Pm2(离线)-CSDN博客鲲鹏ARM架构麒麟Lylinv10安装P
  • Hadoop 傲雪凌霜，松柏长青 后端大数据hadoop大数据分布式
    ApacheHadoop是一个开源的分布式计算框架，主要用于处理海量数据集。它具有高度的可扩展性、容错性和高效的分布式存储与计算能力。Hadoop核心由四个主要模块组成，分别是HDFS（分布式文件系统）、MapReduce（分布式计算框架）、YARN（资源管理）和HadoopCommon（公共工具和库）。1.HDFS（HadoopDistributedFileSystem）HDFS是Hadoop生
  • Nginx的使用场景：构建高效、可扩展的Web架构 张某布响丸辣 nginx前端架构
    Nginx，作为当今最流行的Web服务器和反向代理软件之一，凭借其高性能、稳定性和灵活性，在众多Web项目中扮演着核心角色。无论是个人博客、中小型网站，还是大型企业级应用，Nginx都能提供强大的支持。本文将探讨Nginx的几个主要使用场景，帮助读者理解如何在实际项目中充分利用Nginx的优势。1.静态文件服务对于包含大量静态文件（如HTML、CSS、JavaScript、图片等）的网站，Ngin
  • Hadoop架构 henan程序媛 hadoop大数据分布式
    一、案列分析1.1案例概述现在已经进入了大数据(BigData)时代，数以万计用户的互联网服务时时刻刻都在产生大量的交互，要处理的数据量实在是太大了，以传统的数据库技术等其他手段根本无法应对数据处理的实时性、有效性的需求。HDFS顺应时代出现，在解决大数据存储和计算方面有很多的优势。1.2案列前置知识点1.什么是大数据大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的大量数据集合，
  • Web安全:Web体系架构存在的安全问题和解决方室 程序员-张师傅 前端安全web安全前端
    Web体系架构在提供丰富功能和高效服务的同时，也面临着诸多安全问题。这些问题可能涉及数据泄露、服务中断、系统被控制等多个方面，对企业和个人造成不可估量的损失。以下是对Web体系架构中存在的安全问题及解决方案的详细分析：Web体系架构存在的安全问题注入攻击SQL注入：攻击者通过在输入字段中插入恶意SQL代码，操控后台数据库，窃取、篡改或删除数据。OS命令注入：攻击者通过输入字段插入恶意代码，执行系统
  • Gobelieve 架构 weixin_34099526 数据库golangjson
    Gobelievegithub地址声明:转简书JackieF的文章,为了自己方便copy了一份,加一些自己的东西.链接：https://www.jianshu.com/p/8121d6e85282IMCore主要分三大块:im客户连接服务器（可分布式部署，暂无负载均衡模块)imr路由查询服务器（主要解决im分布式部署的问题）ims存储服务器(主从部署)基础模块1.数据包协议包：header(12)
  • Go 面向包的设计和架构分层 云满笔记 golang架构directorylayoutsrcproject
    标题Go面向包的设计和架构分层序前项目架构分层工具包项目应用项目cmd/internal/internal/pkg/pkg/vendor/面向包的设计和验证包的位置依赖包导入应用级别的策略数据的发送和接收错误处理测试捕获错误不建议的目录结论Go面向包的设计和架构分层序本篇内容主要讲解golang项目的面向包设计准则和基础的架构分层。信息来自原文ArdanLabs:Package-Oriented-
  • Go 语言基本架构 Fe_cow丿 Go
    Go基本架构一、Go基本架构：packagemainimport"fmt"funcmain(){fmt.Println("hello,world")}go文件的后缀是.go；packagemain：表示文件所在的包是main；每个Go应用程序都包含一个为main的包；所有包名都应该使用小写字母；import“fmt”：表示引入一个包，包名为fmt，引入该包后，就可以使用fmt包的函数；比如：fmt
  • 从单体到微服务：FastAPI ‘挂载’子应用程序的转变 黑金IT fastapi微服务fastapi架构
    在现代Web应用开发中，模块化架构是一种常见的设计模式，它有助于将大型应用程序分解为更小、更易于管理的部分。FastAPI，作为一个高性能的PythonWeb框架，提供了强大的支持来实现这种模块化设计。通过“挂载”子应用程序，我们可以为不同的功能区域（如前端接口、管理员接口和用户中心）创建独立的应用程序，并将它们整合到一个主应用程序中。本文将详细介绍如何在FastAPI中使用“挂载”子应用程序的方
  • Kafka详细解析与应用分析 芊言芊语 kafka分布式
    Kafka是一个开源的分布式事件流平台（EventStreamingPlatform），由LinkedIn公司最初采用Scala语言开发，并基于ZooKeeper协调管理。如今，Kafka已经被Apache基金会纳入其项目体系，广泛应用于大数据实时处理领域。Kafka凭借其高吞吐量、持久化、分布式和可靠性的特点，成为构建实时流数据管道和流处理应用程序的重要工具。Kafka架构Kafka的架构主要由
  • ztree异步加载 3213213333332132 JavaScriptAjaxjsonWebztree
    相信新手用ztree的时候,对异步加载会有些困惑，我开始的时候也是看了API花了些时间才搞定了异步加载，在这里分享给大家。 我后台代码生成的是json格式的数据，数据大家按各自的需求生成，这里只给出前端的代码。 设置setting，这里只关注async属性的配置 var setting = { //异步加载配置
  • thirft rpc 具体调用流程 BlueSkator 中间件rpcthrift
    Thrift调用过程中，Thrift客户端和服务器之间主要用到传输层类、协议层类和处理类三个主要的核心类，这三个类的相互协作共同完成rpc的整个调用过程。在调用过程中将按照以下顺序进行协同工作：         （1）     将客户端程序调用的函数名和参数传递给协议层（TProtocol），协议
  • 异或运算推导, 交换数据 dcj3sjt126com PHP异或^
    /* * 5 0101 * 9 1010 * * 5 ^ 5 * 0101 * 0101 * ----- * 0000 * 得出第一个规律: 相同的数进行异或, 结果是0 * * 9 ^ 5 ^ 6 * 1010 * 0101 * ---- * 1111 * * 1111 * 0110 * ---- * 1001
  • 事件源对象 周华华 JavaScript
    <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> <html xmlns="http://www.w3.org/1999/xhtml&q
  • MySql配置及相关命令 g21121 mysql
            MySQL安装完毕后我们需要对它进行一些设置及性能优化，主要包括字符集设置，启动设置，连接优化，表优化，分区优化等等。           一 修改MySQL密码及用户      
  • [简单]poi删除excel 2007超链接 53873039oycg Excel
          采用解析sheet.xml方式删除超链接，缺点是要打开文件2次,代码如下:      public void removeExcel2007AllHyperLink(String filePath) throws Exception { OPCPackage ocPkg = OPCPac
  • Struts2添加 open flash chart 云端月影
    准备以下开源项目： 1. Struts 2.1.6 2. Open Flash Chart 2 Version 2 Lug Wyrm Charmer (28th, July 2009) 3. jofc2，这东西不知道是没做好还是什么意思，好像和ofc2不怎么匹配，最好下源码，有什么问题直接改。 4. log4j 用eclipse新建动态网站，取名OFC2Demo，将Struts2 l
  • spring包详解 aijuans spring
    下载的spring包中文件及各种包众多，在项目中往往只有部分是我们必须的，如果不清楚什么时候需要什么包的话，看看下面就知道了。 aspectj目录下是在Spring框架下使用aspectj的源代码和测试程序文件。Aspectj是java最早的提供AOP的应用框架。 dist 目录下是Spring 的发布包，关于发布包下面会详细进行说明。 docs&nb
  • 网站推广之seo概念 antonyup_2006 算法Web应用服务器搜索引擎Google
       持续开发一年多的b2c网站终于在08年10月23日上线了。作为开发人员的我在修改bug的同时，准备了解下网站的推广分析策略。     所谓网站推广，目的在于让尽可能多的潜在用户了解并访问网站，通过网站获得有关产品和服务等信息，为最终形成购买决策提供支持。     网站推广策略有很多，seo，email，adv
  • 单例模式,sql注入,序列 百合不是茶 单例模式序列sql注入预编译
      序列在前面写过有关的博客,也有过总结,但是今天在做一个JDBC操作数据库的相关内容时 需要使用序列创建一个自增长的字段  居然不会了,所以将序列写在本篇的前面    1,序列是一个保存数据连续的增长的一种方式; 序列的创建; CREATE SEQUENCE seq_pro 2 INCREMENT BY 1 -- 每次加几个 3
  • Mockito单元测试实例 bijian1013 单元测试mockito
    Mockito单元测试实例： public class SettingServiceTest { private List<PersonDTO> personList = new ArrayList<PersonDTO>(); @InjectMocks private SettingPojoService settin
  • 精通Oracle10编程SQL(9)使用游标 bijian1013 oracle数据库plsql
    /* *使用游标 */ --显示游标 --在显式游标中使用FETCH...INTO语句 DECLARE CURSOR emp_cursor is select ename,sal from emp where deptno=1; v_ename emp.ename%TYPE; v_sal emp.sal%TYPE; begin ope
  • 【Java语言】动态代理 bit1129 java语言
      JDK接口动态代理 JDK自带的动态代理通过动态的根据接口生成字节码(实现接口的一个具体类)的方式，为接口的实现类提供代理。被代理的对象和代理对象通过InvocationHandler建立关联   package com.tom; import com.tom.model.User; import com.tom.service.IUserService;
  • Java通信之URL通信基础 白糖_ javajdkwebservice网络协议ITeye
    java对网络通信以及提供了比较全面的jdk支持，java.net包能让程序员直接在程序中实现网络通信。 在技术日新月异的现在，我们能通过很多方式实现数据通信，比如webservice、url通信、socket通信等等，今天简单介绍下URL通信。 学习准备：建议首先学习java的IO基础知识   URL是统一资源定位器的简写，URL可以访问Internet和www，可以通过url
  • 博弈Java讲义 - Java线程同步 (1) boyitech java多线程同步锁
      在并发编程中经常会碰到多个执行线程共享资源的问题。例如多个线程同时读写文件，共用数据库连接，全局的计数器等。如果不处理好多线程之间的同步问题很容易引起状态不一致或者其他的错误。    同步不仅可以阻止一个线程看到对象处于不一致的状态，它还可以保证进入同步方法或者块的每个线程，都看到由同一锁保护的之前所有的修改结果。处理同步的关键就是要正确的识别临界条件（cri
  • java-给定字符串，删除开始和结尾处的空格，并将中间的多个连续的空格合并成一个。 bylijinnan java
    public class DeleteExtraSpace { /** * 题目：给定字符串，删除开始和结尾处的空格，并将中间的多个连续的空格合并成一个。 * 方法1.用已有的String类的trim和replaceAll方法 * 方法2.全部用正则表达式，这个我不熟 * 方法3.“重新发明轮子”，从头遍历一次 */ public static v
  • An error has occurred.See the log file错误解决！ Kai_Ge MyEclipse
    今天早上打开MyEclipse时，自动关闭！弹出An error has occurred.See the log file错误提示！ 很郁闷昨天启动和关闭还好着！！！打开几次依然报此错误，确定不是眼花了！ 打开日志文件！找到当日错误文件内容： --------------------------------------------------------------------------
  • [矿业与工业]修建一个空间矿床开采站要多少钱? comsci
           地球上的钛金属矿藏已经接近枯竭...........        我们在冥王星的一颗卫星上面发现一些具有开采价值的矿床.....        那么,现在要编制一个预算,提交给财政部门..
  • 解析Google Map Routes dai_lm google api
    为了获得从A点到B点的路劲，经常会使用Google提供的API，例如 [url] http://maps.googleapis.com/maps/api/directions/json?origin=40.7144,-74.0060&destination=47.6063,-122.3204&sensor=false [/url] 从返回的结果上，大致可以了解应该怎么走，但
  • SQL还有多少“理所应当”？ datamachine sql
    转贴存档，原帖地址：http://blog.chinaunix.net/uid-29242841-id-3968998.html、http://blog.chinaunix.net/uid-29242841-id-3971046.html！ ------------------------------------华丽的分割线--------------------------------
  • Yii使用Ajax验证时，如何设置某些字段不需要验证 dcj3sjt126com Ajaxyii
    经常像你注册页面,你可能非常希望只需要Ajax去验证用户名和Email,而不需要使用Ajax再去验证密码,默认如果你使用Yii 内置的ajax验证Form,例如: $form=$this->beginWidget('CActiveForm', array(        'id'=>'usuario-form',&
  • 使用git同步网站代码 dcj3sjt126com crontabgit
    转自:http://ued.ctrip.com/blog/?p=3646?tn=gongxinjun.com   管理一网站，最开始使用的虚拟空间，采用提供商支持的ftp上传网站文件，后换用vps，vps可以自己搭建ftp的，但是懒得搞，直接使用scp传输文件到服务器，现在需要更新文件到服务器，使用scp真的很烦。发现本人就职的公司，采用的git+rsync的方式来管理、同步代码，遂
  • sql基本操作 蕃薯耀 sqlsql基本操作sql常用操作
    sql基本操作 >>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>> 蕃薯耀 2015年6月1日 17:30:33 星期一     &
  • Spring4+Hibernate4+Atomikos3.3多数据源事务管理 hanqunfeng Hibernate4
    Spring3+后不再对JTOM提供支持，所以可以改用Atomikos管理多数据源事务。Spring2.5+Hibernate3+JTOM参考：http://hanqunfeng.iteye.com/blog/1554251Atomikos官网网站：http://www.atomikos.com/   一.pom.xml <dependency> <
  • jquery中两个值得注意的方法one()和trigger()方法 jackyrong trigger
      在jquery中，有两个值得注意但容易忽视的方法，分别是one()方法和trigger()方法,这是从国内作者<<jquery权威指南》一书中看到不错的介绍 1） one方法     one方法的功能是让所选定的元素绑定一个仅触发一次的处理函数，格式为    one(type,${data},fn) &nb
  • 拿工资不仅仅是让你写代码的 lampcy 工作面试咨询
    这是我对团队每个新进员工说的第一件事情。这句话的意思是，我并不关心你是如何快速完成任务的，哪怕代码很差，只要它像救生艇通气门一样管用就行。这句话也是我最喜欢的座右铭之一。 这个说法其实很合理：我们的工作是思考客户提出的问题，然后制定解决方案。思考第一，代码第二，公司请我们的最终目的不是写代码，而是想出解决方案。 话粗理不粗。 付你薪水不是让你来思考的，也不是让你来写代码的，你的目的是交付产品
  • 架构师之对象操作----------对象的效率复制和判断是否全为空 nannan408 架构师
    1.前言。   如题。 2.代码。 (1)对象的复制，比spring的beanCopier在大并发下效率要高，利用net.sf.cglib.beans.BeanCopier Src src=new Src(); BeanCopier beanCopier = BeanCopier.create(Src.class, Des.class, false);
  • ajax 被缓存的解决方案 Rainbow702 JavaScriptjqueryAjaxcache缓存
    使用jquery的ajax来发送请求进行局部刷新画面，各位可能都做过。 今天碰到一个奇怪的现象，就是，同一个ajax请求，在chrome中，不论发送多少次，都可以发送至服务器端，而不会被缓存。但是，换成在IE下的时候，发现，同一个ajax请求，会发生被缓存的情况，只有第一次才会被发送至服务器端，之后的不会再被发送。郁闷。 解决方法如下： ① 直接使用 JQuery提供的 “cache”参数，
  • 修改date.toLocaleString()的警告 tntxia String
      我们在写程序的时候，经常要查看时间，所以我们经常会用到date.toLocaleString()，但是date.toLocaleString()是一个过时 的API，代替的方法如下：   package com.tntxia.htmlmaker.util; import java.text.SimpleDateFormat; import java.util.
  • 项目完成后的小总结 xiaomiya js总结项目
    项目完成了，突然想做个总结但是有点无从下手了。 做之前对于客户端给的接口很模式。然而定义好了格式要求就如此的愉快了。 先说说项目主要实现的功能吧 1，按键精灵 2，获取行情数据 3，各种input输入条件判断 4，发送数据（有json格式和string格式） 5，获取预警条件列表和预警结果列表， 6，排序， 7，预警结果分页获取 8，导出文件（excel，text等） 9，修
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他