lantianjialiang
lantianjialiang

AWS的虚拟化技术

AWS的虚拟化技术

提到aws的底层的虚拟化的技术的时候，大家可能总是能看到这张图。
但是我一直没有看的太懂，于是今天花点时间仔细看看了。
这里详细解释一下。
AWS的虚拟化技术_第1张图片先解释一下图中的术语：
上面颜色部分由于我是色盲所以不说颜色了，下面的颜色的性能最差，上面颜色的性能最高

VM：虚拟机 HW：硬件
VS：软件虚拟化 VH：硬件虚拟化 P：半虚拟化，没有包含所有的组合
SR-IOV（net）：网络组件的硬件虚拟化技术，ixgbe/ena driver SR-IOV（store）：存储组件的硬件虚拟化技术 nvme driver

第一条不是aws使用的技术，作者列到这里只是为了对比。
第二条是虚拟机上的宿主机软件需要修改和适配，也就是说宿主机是能知道自己是在虚拟环境下允许的，这时候还没有Intel VT-x, AMD-V之类的虚拟机特权指令
第三条就是使用了Intel VT-x, AMD-V特权指令，硬件支持了CPU和内存的虚拟化
第四条增加了中断和计时器的半虚拟化
第五条在第四条的基础上加了网络的硬件虚拟化技术SR-IOV
第六条在第五条的基础上提供了存储的硬件虚拟化技术SR-IOV
第七条就是aws现在使用的Nitro系统，把缩减的kvm封到专有硬件中去，实现虚拟机的可以打到裸机性能。

这里先说一下SR-IOV的技术：

由于VT-x技术只是提供了CPU和内存的虚拟化支持，所以虚拟机访问网卡或者存储的时候，必须经过xen的虚拟交换机来中转，降低了效率。
AWS的虚拟化技术_第2张图片
AWS的虚拟化技术_第3张图片
aws刚开始使用的时候Intel 82599 网卡达到这个功能，最后收购了以色列的一家公司 Annapurna Labs，把网卡的速度提高到了25Gbps。
AWS的虚拟化技术_第4张图片
Nitro的hypervisor就是缩减版本的kvm，只负责管理CPU和内存，其他的事情都有自己的专业硬件去管理，通过控制器来协调和通信。
AWS的虚拟化技术_第5张图片

使用Nitro之后的性能提示

AWS的虚拟化技术_第6张图片2017年的时候，hypervisor还是放在和和宿主机一起的服务器上
AWS的虚拟化技术_第7张图片2018年的时候hypervisor也被放到了硬件中去了。
AWS的虚拟化技术_第8张图片AWS的虚拟化技术_第9张图片

参考
https://www.brendangregg.com/blog/2017-11-29/aws-ec2-virtualization-2017.html
https://cloudierthanthou.wordpress.com/2014/11/20/ec2-enhanced-networking/
https://medium.com/@paccattam/aws-enhanced-networking-an-overview-aee8a852cf5c
https://cloud.tencent.com/developer/article/1452583
https://twosixtech.com/running-thousands-of-kvm-guests-on-amazons-new-i3-metal-instances/

你可能感兴趣的:(Openstack,计算机相关,aws,运维,云计算)

  • 低代码平台架构设计 LINGYI_WEN 低代码前端开发语言
    1.整体架构概述1.1技术栈选择前端：React+Redux/Vue+Vuex后端：Node.js+Express/SpringBoot数据库：MySQL/PostgreSQL/MongoDB云服务：AWS/Azure/GoogleCloud容器化：Docker+Kubernetes1.2模块划分前端模块：可视化编辑器：用于拖拽和配置组件预览器：实时预览页面效果发布器：将设计好的页面发布到生产环境
  • 全响应式物联网平台（JetLinks） deepdata_cn IOT物联网
    JetLinks是一个基于Java8、SpringBoot2.x、WebFlux、Netty等开发的物联网基础平台，可用于快速建立物联网相关业务系统。JetLinks定位为PaaS服务的物联网平台，旨在降低物联网企业研发、运营和运维成本，提高物联网项目的落地能力。支持私有化或容器化以单机、集群或微服务的方式部署在任意平台服务器上，可横向拓展。能支持千万级设备连接、百万级数据并发，通过自研React
  • KVM 虚拟化技术性能测试与调优 wespten OpenStackvSphere虚拟化云平台SDN服务器测试工具运维
    系统虚拟化有很多的好处，如提高物理资源利用率、让系统资源更方便监控和管理、提高系统运维的效率、节约硬件投入的成本等等。那么，在真正实施生产环境的虚拟化时，到底选择哪种虚拟化方案呢？选择商业软件VMwareESXi、开源的KVM和Xen，还是微软的Hyper-V，或者有其他的虚拟化方案？在进行虚拟化方案的选择时，需要重点考虑的因素中至少有两个至关重要：虚拟化方案的功能和性能，这二者缺一不可。功能是实
  • Java 程序员必备的 26 个 Linux 命令，常用 + 面试两手抓 库库林_沙琪马 Linuxlinux面试运维
    有人问我：日常开发中最常用的Linux命令有哪些？我不假思索地就列出了26个，涵盖开发、调试、运维场景，每一个都值得收藏+实战。内容速览26个高频Linux命令详解面试官常问的重点命令实操建议&学习指引一、开发者高频使用的26个Linux命令1️⃣cd-切换目录cd/usr/local/bincd..cd~Tips：~表示当前用户主目录，..表示上级目录。2️⃣mkdir-创建目录mkdirmyd
  • 腾讯 iOA 零信任产品：安全远程访问的革新者 scuter_yu 安全
    在当今数字化时代，企业面临着前所未有的挑战与机遇。随着远程办公、多分支运营以及云计算的广泛应用，传统的网络安全架构逐渐暴露出诸多不足。腾讯iOA零信任产品凭借其创新的安全理念和强大的功能特性，为企业提供了一种全新的解决方案，尤其在安全远程访问方面，展现出卓越的优势。一、零信任架构：重塑安全边界传统的网络安全架构依赖于固定的边界，一旦边界被突破，内部网络将面临巨大风险。而腾讯iOA零信任产品基于零信
  • AWS OIDC 详解：告别长期密钥，拥抱安全高效的云身份验证 ivwdcwso 安全aws安全云计算OIDCCI/CDSTSjwt
    想象一下：你的CI/CD流水线每次部署时，不再需要保管那些令人提心吊胆的AWS长期访问密钥。取而代之的是一种自动、安全且基于信任的身份验证方式——这就是AWSOIDC带来的变革。一、什么是AWSOIDC？身份验证的“信任传递”OIDC（OpenIDConnect）是建立在OAuth2.0之上的现代身份认证协议。AWSOIDC的核心是允许你信任外部身份提供商（如GitHub,GitLab,Googl
  • 数字孪生：未来城市管理的革命性技术 大有数据可视化 信息可视化
    一、数字孪生技术概述数字孪生技术是一种通过创建虚拟模型与物理实体之间实时交互的技术。它借助物联网、大数据、云计算、人工智能等前沿技术，实现对物理实体的精准映射与动态仿真。数字孪生的核心在于构建一个与物理世界相对应的虚拟模型，该模型能够实时反映物理实体的状态，并通过数据分析与模拟优化其性能。在城市管理领域，数字孪生技术为城市管理者提供了一种全新的视角和工具。城市是一个复杂的巨系统，涉及基础设施、交通
  • 数字孪生：变电站监测和运维的智能化实践 数字孪生家族 数字孪生视频孪生数据可视化
    随着夏季高温天气的到来，我国用电也迎来了高峰。用电负荷持续走高，对全国各地电网运维也迎来了挑战。电力系统作为现代社会的基础设施，其稳定性和可靠性至关重要，变电站则是实现电力系统电力互联互通的枢纽。在传统变电站中，由于依赖人工巡检和定期维护，存在效率低下和响应迟缓等问题。大量的人力投入，同时也使违章操作、疏忽大意等众多人为操作失误隐患大大提升。近年来，我国在智慧电网建设方面取得了显著成果，其中最为典
  • 信创领域的十大网络安全威胁有哪些 极创信息 信创产品兼容性互认证国产化信创安全eclipsejavatomcathibernateopencv数据挖掘
    在信创（信息技术应用创新）领域，由于其涉及自主可控软硬件、核心技术与基础设施，网络安全威胁尤为突出，其网络安全威胁不仅涉及传统IT系统的共性问题，还因技术生态的独特性面临特殊挑战。结合信创环境的特点，以下是信创领域面临的十大主流网络安全威胁。一.人员安全意识不足真实的网络攻击可能并不需要多么高深的技术，更多的是针对人员的安全意识不足发起的攻击。在信创项目建设和运营过程中，涉及大量研发、实施、运维和
  • 关于AWS使用（一）——申请付费版亚马逊云服务器的详细流程 m0_63984008 linux服务器mysql
    一、创建账号：注册准备：1，一个在用邮箱2，一张在用的有Visa或者Master标志的信用卡（要支持美元预授权）3，一部在用的电话4,一个支持key文件导入的ssh客户端（我后面只介绍linux下使用ssh命令行客户端）5，最好是有软件（不是必要的，主要是访问速度的问题。耐心不好的人一定要访问）步骤1,注册：亚马逊云计算中心的网址：https://aws.amazon.com/cn(如果英文可以的
  • 微软服务器安全问题 国际云1688 微软云云计算服务器云原生运维azure
    微软云服务器安全深度解析：挑战、应对与未来展望——构建韧性“安全之盾”的持续博弈！在当今数字化时代，云计算已成为众多企业和组织运行业务的核心基础设施和“数字生命线”，而微软云（Azure）作为全球领先的云服务提供商之一，其安全性无疑是全球数十万企业客户最为关注的焦点。然而，近年来，我们不得不承认，微软云服务器却频繁出现安全事故，从配置错误引发的数据泄露到DDoS攻击下的防护困境，再到软件更新导致的
  • 没有VISA怎么注册AWS？ 国际云1688 aws云原生人工智能云计算服务器大数据aws
    没有VISA怎么注册AWS？跨境卖家、开发者与学生党必看的“AWS账号开通终极指南”！在云计算日益普及的今天，AmazonWebServices（AWS）作为全球领先的云服务提供商，以其服务广度、技术深度和生态系统成熟度，吸引了众多开发者、企业和初创公司的目光。然而，对于一些用户，特别是初学者、学生、或身处国际支付不便地区的个人和中小企业来说，注册AWS账号时遇到的第一个“拦路虎”就是：没有VIS
  • 华为数通认证：适合谁的技术进阶之路？ 博睿谷IT99_ 华为服务器运维
    在当今高度互联的世界里，数据通信网络构成了信息流动的基石。华为数通认证（HuaweiCertifiedICTAssociate/Professional/Expert-Datacom）正是华为公司推出的、针对数据通信网络领域构建、运维与优化的专业能力认证体系。一、划分三个层级，为不同阶段的从业者提供进阶路径1.HCIA-Datacom(华为认证ICT工程师-数据通信)：基础起点。聚焦于中小型网络的
  • 云效DevOps vs Gitee vs 自建GitLab的技术选型 天机️灵韵 编程语言开发工具开源项目GIT
    针对「云效DevOpsvsGiteevs自建GitLab」的技术选型，我们从核心需求、成本、运维、扩展性四个维度进行深度对比，并给出场景化决策建议：一、核心能力对比表能力维度云效DevOpsGitee自建GitLab（社区版/企业版）代码托管✅基础托管+深度集成✅优秀（国内最优GitHub替代）✅⭐完全自主可控CI/CD流水线✅⭐企业级流水线（开箱即用）⚠️基础CI（GiteeGo）✅高度灵活（需
  • zabbix监控jmx 寰宇001 监控/自动化工具
    介绍背景：目前公司用的主要语言就是java，然后在运维过程中会遇到频繁的内存溢出的情况，之前使用过elk日志分析系统可以实时的判断出内存溢出的情况，但是无法查看内存的使用情况，只能通过dump文件查看内存溢出的时候dump下来的文件去分析。这样也无法准确的判断出问题。zabbix可以监控java，并且将内存的使用情况实时的展现出来，这是一个不错的选择。JMX的全称是JavaManagementEx
  • Linux云计算和云计算运维的区别! 老男孩IT教育 Linux云计算
    Linux云计算和云计算运维对于很多人来讲并不陌生，而且它们都涉及到云计算技术，那么二者之间有何区别?主要区别在于职责、技能要求、工作领域和发展趋势，接下来通过这篇文章来看看吧。职责与技能要求：Linux云计算的工作内容主要包括公司运维团队和运维系统的建设，制定并不断优化各项工作流程，深入了解各种云计算产品，建立运维规范，保证运维质量。此外，还需要熟练掌握Linux操作系统和相关命令行工具，以及网
  • 从零到云：我在达内一年的Linux云计算培训之旅
    博客简介本篇博文中，我将从学员身份去分享过去一年里在达内教育培训有关Linux云计算的学习经历和收获，旨在为那些渴望踏入云计算领域的初学者提供一份指南参考，同时也尝试把笔记内容进行整理输出并分享给大家。无论你是刚接触IT的新手，还是希望通过报名培训机构转型的职场人，希望这份笔记能为你揭示关于培训机构里的Linux云计算基础知识和实践技巧。大纲概览培训笔记将按照机构课程顺序由简入深进行分享，总共分为
  • 国外VPS环境中Linux系统内存压缩技术与交换效率优化指南 cpsvps linux运维服务器
    在云计算和虚拟化技术日益普及的今天，已成为许多企业和开发者的首选。Linux系统作为VPS的主流操作系统，其内存管理机制直接影响着服务器的性能表现。本文将深入探讨Linux系统在VPS环境下的内存压缩技术与交换效率优化策略，帮助用户更好地理解和管理服务器资源。国外VPS环境中Linux系统内存压缩技术与交换效率优化指南Linux内存管理基础与VPS环境特性在国外的VPS环境中，Linux系统的内存
  • Redis 实现消息队列 雾缘枯 redis数据库缓存
    一、为什么选择Redis作为消息队列？在分布式系统架构中，消息队列是实现异步通信和解耦的核心组件。Redis作为一个高性能的内存数据库，凭借其卓越的速度和丰富的数据结构，成为轻量级消息队列的理想选择：1.1核心优势超高性能：10万+QPS的处理能力毫秒级延迟：内存操作带来的极致响应速度丰富数据结构：多种队列实现模式可选零外部依赖：无需额外中间件，降低运维复杂度持久化支持：可配置持久化保证消息可靠性
  • AWS Cognito vs. IAM Identity Center：别再混淆了！理清“用户身份”与“员工身份”的区别 运维开发王义杰 aws信息安全系统运维aws云计算
    大家好，在AWS庞大的服务家族中，身份管理是构建安全、可扩展应用的核心。而提到身份管理，很多人常常会对AWSCognito和AWSIAMIdentityCenter(曾用名AWSSSO)感到困惑，特别是当看到它们都支持SAML时，会觉得功能似乎有所重合。这种困惑非常正常！它们确实都是处理“谁可以访问什么”的问题，但服务的对象和核心场景却截然不同。简单来说，一句话总结它们的核心区别就是：AWSCog
  • 从用户到权限：解密 AWS IAM Identity Center 的授权之道 运维开发王义杰 aws信息安全系统运维aws云计算
    大家好，今天我们来解决一个非常具体的实战问题：如何让IAMIdentityCenter中创建的用户真正获得AWS账户的操作权限，从而取代老旧的IAM用户管理模式？如果我们盯着用户详情页，想找一个“附加角色”的按钮，那我们可能会失望。因为IAMIdentityCenter的魔法发生在更高一个层级。核心理念：解耦“人”与“权限”传统IAM用户模式下，“人”（用户）和“权限”（策略）是紧密绑定的。而在I
  • 深入浅出：AWS Cognito 认证机制详解 运维开发王义杰 信息安全系统运维awsaws云计算
    在当今的互联网应用中，用户认证和管理是不可或缺的一环。无论是Web应用还是移动App，都需要一套安全、可靠且易于扩展的认证系统。AWSCognito正是亚马逊云科技（AWS）提供的一项强大服务，旨在简化用户身份验证、授权和用户管理流程。作为一名科技博主，今天我将带大家深入了解Cognito的认证机制，并通过具体示例和实用建议，助大家轻松构建安全的应用。Cognito核心概念：用户池(UserPoo
  • 6、 AWS认证与授权：深入理解IAM 李开机呢 AWSIAM认证工具密钥管理
    AWS认证与授权：深入理解IAM1.IAM身份在云计算环境中，确保只有授权用户和应用程序可以访问特定资源至关重要。AWSIdentityandAccessManagement(IAM)是AWS提供的核心服务之一，用于管理和控制对AWS资源的访问。IAM通过定义身份（Identities）和权限（Permissions）来实现这一目标。1.1根用户每个AWS账户都有一个默认的根用户，这是创建账户时自
  • AWS Cognito项目实战指南：集成用户管理与自定义电子邮件功能 一一MIO一一
    本文还有配套的精品资源，点击获取简介：本项目涉及利用AWSCognito服务，创建一个基于云端的用户身份验证和管理应用。通过集成Cognito用户池，项目支持社交登录和自定义用户身份保护，同时涉及通过AWSLambda发送自定义电子邮件通知，增强用户体验。项目采用TypeScript编程语言，提升代码的可维护性和可读性，为开发者提供一个学习AWS无服务器认证解决方案的实践案例。1.AWSCogni
  • aws mfa 认证_为受MFA保护的联合身份设置程序化AWS访问 weixin_26722031 httpspythonjava
    awsmfa认证IamcurrentlyworkingonimprovingthesecurityofcloudoperationsforoneofmyclientsandwantedtoshareaninterestingsolutionIdevelopedtohelpprovideprogrammaticaccesstoAWSfromlocaldeveloperenvironmentsusin
  • 3、 使用Cognito加强应用程序安全性 一一MIO一一 AmazonCognito用户池身份验证
    使用Cognito加强应用程序安全性1.创建AmazonCognito用户池AmazonCognito是亚马逊提供的无服务器用户身份管理服务，它不仅可以用作身份提供者，还可以作为身份代理。在这一节中，我们将详细介绍如何通过控制台创建一个Cognito用户池，并对其基本信息进行设置和管理。准备工作为了创建用户池，你需要一个有效的工作AWS账户。如果你还没有AWS账户，可以先去官网注册一个。操作步骤登
  • 揭秘 IAM Identity Center 的两种模式：为什么我的控制台没有“权限集”？ 运维开发王义杰 aws信息安全系统运维aws运维
    大家好，今天我们来破解一个IAMIdentityCenter的“谜题”：为什么有时候登录进去，控制台功能齐全，有用户、组、AWS账户、权限集等所有选项；而有时候，却像下面这位朋友遇到的情况一样，只有用户、组和应用，关键的“权限集”和“AWS账户分配”功能消失了？答案是，我们可能正在体验IAMIdentityCenter的两种不同“工作模式”之一。这并非Bug，而是一种特性的体现，其根源在于它的预置
  • 2025年全球数据安全发展趋势 jinan886 人工智能大数据安全数据分析
    随着云计算、大数据、人工智能等技术的迅猛发展，数据已成为驱动经济社会发展的关键生产要素。然而，数据泄露、网络攻击等安全事件频发，给个人隐私、企业利益乃至国家安全带来了前所未有的挑战。全球数据安全发展趋势正随着技术进步和威胁演变而不断变化，以下是主要趋势：1.数据隐私法规加强GDPR（欧盟《通用数据保护条例）和CCPA（加州消费者隐私法案）等法规推动了全球对数据隐私的重视，更多国家和地区正在制定或更
  • Oracle应急处理：Oracle RAC 集群节点进程通信出现报错
    小亦平台会持续给大家科普一些Oracle数据库的应急处理方案，运维朋友们可以在往期文章中查看更多案例。问题概述•核心问题：监控日志中出现IPCSENDTimeout错误。•主要现象：RAC集群监控日志中报告了Inter-ProcessCommunication(IPC)发送超时错误。问题分析IPCSENDTimeout错误通常表明OracleRAC集群中节点间进程通信（IPC）出现了问题。IPC是
  • 告别固定密钥！在单一账户下用 Cognito 实现 AWS CLI 的 MFA 单点登录 运维开发王义杰 aws信息安全系统运维aws云计算运维安全架构
    大家好，很多朋友，特别是通过合作伙伴或服务商使用AWS的同学，可能会发现自己的IAMIdentityCenter功能受限，无法像在组织管理账户里那样轻松配置CLI的SSO(awsconfiguresso)。那么，我们就要放弃治疗，退回使用古老的、不安全的静态IAM用户密钥吗？绝对不行！今天，我就教大家如何利用AWSCognito，在自己的单一账户内，从零开始打造一个支持MFA的CLI登录门户，彻底
  • jdk tomcat 环境变量配置 Array_06 javajdktomcat
    Win7 下如何配置java环境变量 1。准备jdk包，win7系统，tomcat安装包（均上网下载即可） 2。进行对jdk的安装，尽量为默认路径（但要记住啊！！以防以后配置用。。。） 3。分别配置高级环境变量。   电脑-->右击属性-->高级环境变量-->环境变量。 分别配置 : path    &nbs
  • Spring调SDK包报java.lang.NoSuchFieldError错误 bijian1013 javaspring
            在工作中调另一个系统的SDK包，出现如下java.lang.NoSuchFieldError错误。 org.springframework.web.util.NestedServletException: Handler processing failed; nested exception is java.l
  • LeetCode[位运算] - #136 数组中的单一数 Cwind java题解位运算LeetCodeAlgorithm
    原题链接：#136 Single Number 要求： 给定一个整型数组，其中除了一个元素之外，每个元素都出现两次。找出这个元素 注意：算法的时间复杂度应为O(n)，最好不使用额外的内存空间 难度：中等 分析： 题目限定了线性的时间复杂度，同时不使用额外的空间，即要求只遍历数组一遍得出结果。由于异或运算 n XOR n = 0, n XOR 0 = n，故将数组中的每个元素进
  • qq登陆界面开发 15700786134 qq
    今天我们来开发一个qq登陆界面，首先写一个界面程序，一个界面首先是一个Frame对象，即是一个窗体。然后在这个窗体上放置其他组件。代码如下： public class First {         public void initul(){        jf=ne
  • Linux的程序包管理器RPM 被触发 linux
    在早期我们使用源代码的方式来安装软件时，都需要先把源程序代码编译成可执行的二进制安装程序，然后进行安装。这就意味着每次安装软件都需要经过预处理-->编译-->汇编-->链接-->生成安装文件--> 安装，这个复杂而艰辛的过程。为简化安装步骤，便于广大用户的安装部署程序，程序提供商就在特定的系统上面编译好相关程序的安装文件并进行打包，提供给大家下载，我们只需要根据自己的
  • socket通信遇到EOFException 肆无忌惮_ EOFException
    java.io.EOFException at java.io.ObjectInputStream$PeekInputStream.readFully(ObjectInputStream.java:2281) at java.io.ObjectInputStream$BlockDataInputStream.readShort(ObjectInputStream.java:
  • 基于spring的web项目定时操作 知了ing javaWeb
    废话不多说，直接上代码，很简单 配置一下项目启动就行 1，web.xml <?xml version="1.0" encoding="UTF-8"?> <web-app xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns="h
  • 树形结构的数据库表Schema设计 矮蛋蛋 schema
    原文地址： http://blog.csdn.net/MONKEY_D_MENG/article/details/6647488     程序设计过程中，我们常常用树形结构来表征某些数据的关联关系，如企业上下级部门、栏目结构、商品分类等等，通常而言，这些树状结构需要借助于数据库完成持久化。然而目前的各种基于关系的数据库，都是以二维表的形式记录存储数据信息，
  • maven将jar包和源码一起打包到本地仓库 alleni123 maven
    http://stackoverflow.com/questions/4031987/how-to-upload-sources-to-local-maven-repository <project> ... <build> <plugins> <plugin> <groupI
  • java IO操作 与 File 获取文件或文件夹的大小，可读，等属性！！！ 百合不是茶
    类 File File是指文件和目录路径名的抽象表示形式。 1，何为文件： 标准文件（txt doc mp3...） 目录文件（文件夹） 虚拟内存文件   2，File类中有可以创建文件的 createNewFile（）方法,在创建新文件的时候需要try{} catch(）{}因为可能会抛出异常；也有可以判断文件是否是一个标准文件的方法isFile();这些防抖都
  • Spring注入有继承关系的类（2） bijian1013 javaspring
    被注入类的父类有相应的属性，Spring可以直接注入相应的属性，如下所例：1.AClass类 package com.bijian.spring.test4; public class AClass { private String a; private String b; public String getA() { retu
  • 30岁转型期你能否成为成功人士 bijian1013 成长励志
            很多人由于年轻时走了弯路，到了30岁一事无成，这样的例子大有人在。但同样也有一些人，整个职业生涯都发展得很优秀，到了30岁已经成为职场的精英阶层。由于做猎头的原因，我们接触很多30岁左右的经理人，发现他们在职业发展道路上往往有很多致命的问题。在30岁之前，他们的职业生涯表现很优秀，但从30岁到40岁这一段，很多人
  • 【Velocity四】Velocity与Java互操作 bit1129 velocity
    Velocity出现的目的用于简化基于MVC的web应用开发，用于替代JSP标签技术，那么Velocity如何访问Java代码.本篇继续以Velocity三http://bit1129.iteye.com/blog/2106142中的例子为基础，      POJO    package com.tom.servlets; public
  • 【Hive十一】Hive数据倾斜优化 bit1129 hive
    什么是Hive数据倾斜问题   操作：join,group by,count distinct 现象：任务进度长时间维持在99%（或100%），查看任务监控页面，发现只有少量（1个或几个）reduce子任务未完成；查看未完成的子任务，可以看到本地读写数据量积累非常大，通常超过10GB可以认定为发生数据倾斜。 原因：key分布不均匀 倾斜度衡量：平均记录数超过50w且
  • 在nginx中集成lua脚本：添加自定义Http头，封IP等 ronin47 nginx lua csrf
    Lua是一个可以嵌入到Nginx配置文件中的动态脚本语言，从而可以在Nginx请求处理的任何阶段执行各种Lua代码。刚开始我们只是用Lua 把请求路由到后端服务器，但是它对我们架构的作用超出了我们的预期。下面就讲讲我们所做的工作。 强制搜索引擎只索引mixlr.com Google把子域名当作完全独立的网站，我们不希望爬虫抓取子域名的页面，降低我们的Page rank。 location /{
  • java-3.求子数组的最大和 bylijinnan java
    package beautyOfCoding; public class MaxSubArraySum { /** * 3.求子数组的最大和 题目描述： 输入一个整形数组，数组里有正数也有负数。 数组中连续的一个或多个整数组成一个子数组，每个子数组都有一个和。 求所有子数组的和的最大值。要求时间复杂度为O(n)。 例如输入的数组为1, -2, 3, 10, -4,
  • Netty源码学习-FileRegion bylijinnan javanetty
    今天看org.jboss.netty.example.http.file.HttpStaticFileServerHandler.java 可以直接往channel里面写入一个FileRegion对象，而不需要相应的encoder： //pipeline（没有诸如“FileRegionEncoder”的handler）： public ChannelPipeline ge
  • 使用ZeroClipboard解决跨浏览器复制到剪贴板的问题 cngolon 跨浏览器复制到粘贴板Zero Clipboard
    Zero Clipboard的实现原理 Zero Clipboard 利用透明的Flash让其漂浮在复制按钮之上，这样其实点击的不是按钮而是 Flash ，这样将需要的内容传入Flash，再通过Flash的复制功能把传入的内容复制到剪贴板。 Zero Clipboard的安装方法 首先需要下载 Zero Clipboard的压缩包，解压后把文件夹中两个文件：ZeroClipboard.js
  • 单例模式 cuishikuan 单例模式
    第一种（懒汉，线程不安全）： public class Singleton {   2     private static Singleton instance;   3     pri
  • spring+websocket的使用 dalan_123
    一、spring配置文件 <?xml version="1.0" encoding="UTF-8"?><beans xmlns="http://www.springframework.org/schema/beans"    xmlns:xsi="http://www.w3.or
  • 细节问题：ZEROFILL的用法范围。 dcj3sjt126com mysql
    1、zerofill把月份中的一位数字比如1，2，3等加前导0 mysql> CREATE TABLE t1 (year YEAR(4), month INT(2) UNSIGNED ZEROFILL,    -> day
  • Android开发10——Activity的跳转与传值 dcj3sjt126com Android开发
    Activity跳转与传值，主要是通过Intent类，Intent的作用是激活组件和附带数据。   一、Activity跳转 方法一Intent intent = new Intent(A.this, B.class); startActivity(intent)   方法二Intent intent = new Intent();intent.setCla
  • jdbc 得到表结构、主键 eksliang jdbc 得到表结构、主键
    转自博客：http://blog.csdn.net/ocean1010/article/details/7266042 假设有个con DatabaseMetaData dbmd = con.getMetaData(); rs = dbmd.getColumns(con.getCatalog(), schema, tableName, null); rs.getSt
  • Android 应用程序开关GPS gqdy365 android
    要在应用程序中操作GPS开关需要权限： <uses-permission android:name="android.permission.WRITE_SECURE_SETTINGS" /> 但在配置文件中添加此权限之后会报错，无法再eclipse里面正常编译，怎么办？ 1、方法一：将项目放到Android源码中编译； 2、方法二：网上有人说cl
  • Windows上调试MapReduce zhiquanliu mapreduce
    1.下载hadoop2x-eclipse-plugin https://github.com/winghc/hadoop2x-eclipse-plugin.git 把 hadoop2.6.0-eclipse-plugin.jar 放到eclipse plugin 目录中。 2.下载 hadoop2.6_x64_.zip http://dl.iteye.com/topics/download/d2b
  • 如何看待一些知名博客推广软文的行为？ justjavac 博客
    本文来自我在知乎上的一个回答：http://www.zhihu.com/question/23431810/answer/24588621 互联网上的两种典型心态： 当初求种像条狗，如今撸完嫌人丑 当初搜贴像条犬，如今读完嫌人软 你为啥感觉不舒服呢？ 难道非得要作者把自己的劳动成果免费给你用，你才舒服？ 就如同 Google 关闭了 Gooled Reader，那是
  • sql优化总结 macroli sql
    为了是自己对sql优化有更好的原则性，在这里做一下总结，个人原则如有不对请多多指教。谢谢！   要知道一个简单的sql语句执行效率，就要有查看方式，一遍更好的进行优化。   一、简单的统计语句执行时间 declare @d datetime ---定义一个datetime的变量set @d=getdate() ---获取查询语句开始前的时间select user_id
  • Linux Oracle中常遇到的一些问题及命令总结 超声波 oraclelinux
    1.linux更改主机名   (1)#hostname oracledb　　　　临时修改主机名 (2) vi /etc/sysconfig/network 　　修改hostname (3) vi /etc/hosts　　　　　　　　修改IP对应的主机名   2.linux重启oracle实例及监听的各种方法 （注意操作的顺序应该是先监听，后数据库实例） &nbs
  • hive函数大全及使用示例 superlxw1234 hadoophive函数
      具体说明及示例参 见附件文档。     文档目录：   目录 一、关系运算： 4 1. 等值比较: = 4 2. 不等值比较: <> 4 3. 小于比较: < 4 4. 小于等于比较: <= 4 5. 大于比较: > 5 6. 大于等于比较: >= 5 7. 空值判断: IS NULL 5
  • Spring 4.2新特性-使用@Order调整配置类加载顺序 wiselyman spring 4
    4.1 @Order Spring 4.2 利用@Order控制配置类的加载顺序 4.2 演示 两个演示bean package com.wisely.spring4_2.order; public class Demo1Service { } package com.wisely.spring4_2.order; public class
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他