vak
vak

BitLocker磁盘加密

注:本文不涉及专业技术细节,放心食用

Why

为什么要加密磁盘?

  • 电脑丢失/硬盘丢失的情况下,
    bitlocker可以保护数据,不被人轻易访问到.
    保护硬盘中的操作系统免受篡改.

  • 没有开启bitlocker的情况下,Windows的开机密码可被轻易绕过,
    但如果开了bitlocker,一般的黑阔选手也就没辙了,可以拦住绝大部分人登录你的操作系统.

  • 硬盘或存储器中,常常保存着我们其他账号的信息,
    磁盘和系统这一层面的沦陷,可能导致个人所有账号密码都被泄露.
    比如我们习惯在使用Chrome时,选择记住账号密码,这些内容基本上等于明文可见的状态.
    这意味着,要保障我们各种Web门户账号的安全,绕不开硬盘加密和操作系统的安全问题.


How

  • 从Windows Vista时代,
    微软开始提供BitLocker功能,
    支持用户对磁盘进行加密.


What

启用BitLocker

  • 管理好个人的解锁密码,是正确安全的使用BitLocker的关键所在.
    为了适用各种场景和用户习惯,微软给用户提供了多种方式或组合,来进行BitLocker的验证解锁
    如 纯口令 | USB密钥 | TPM | (TPM + PIN) | (TPM + PIN + USB密钥)等等

  • 每种验证方式的BitLocker开启步骤略有不同,
    这里笔者介绍了其中两种方式开启BitLocker.

    U盘+BitLocker方式
    https://www.jianshu.com/p/e06f8683009b

    Yubikey+BitLocker方式
    (Yubikey是一种看起来像U盾一样的USB设备,但功能丰富)
    https://www.jianshu.com/p/5b091212e84d

    还有个TPM+BitLocker的方式,
    由于很多电脑没有配TPM模块,
    不同TPM的设置方式也各异,
    因此笔者只对TPM的性质进行了简单说明:
    https://www.jianshu.com/p/088c8ac885ea


BitLocker周边的安全威胁

  • BitLocker加密本身是安全的/经过验证的,
    对于普通用于来说做好口令/密钥的保存工作,通常不会有太大问题.
    但这并非万无一失,在整个启动或解密的过程中,
    仍可能存在其他的安全问题,导致绕过BitLocker的验证.

  • 密钥管理环节出问题
    如口令泄露,
    USBKey设备丢失/被复制,
    TPM存在漏洞/后门导致被攻破.
    (可以做的:管理好密钥,或选择不信任TPM)


    Snipaste_2020-10-04_23-40-15.png


  • 邪恶女佣攻击(Evil maid attack)


    Snipaste_2020-10-04_21-29-17.png

在BIOS UEFI没有保护的情况下,
恶意软件有能力篡改BIOS UEFI,修改启动流程,
接着模仿Bitlocker验证弹出密码界面,
诱导用户输入,截获密码后发送到黑客的邮箱.
然后才进入真正的Bitlocker验证界面.

总结来说,
Bitlocker本身是安全的,
但是在Bitlocker之前的位置,
UEFI/BIOS环节出了问题.
(需要提升UEFI安全)

  • 冷启动攻击(Cold boot attack)


    Snipaste_2020-10-04_21-20-50.png

PC断电后,
内存中的数据不会立刻消失,
并且内存在低温状态下,数据残留的时间会被延长.

利用这个特性,
有物理权限的黑阔,冷启动计算机,
启动其他磁盘上另一个轻量级的操作系统,
将此时内存状态转储到文件中,
接着展开内容分析,从中挖掘出密钥或敏感信息.

总结来说,
冷启动攻击的目标是内存,
硬盘中一些加密的数据,
读取到内存时,总有解密的时候,
黑阔可以抓住这个时机,展开冷启动攻击,
因为问题出在内存,
全盘加密/TPM等安全方案,
对这种攻击是无效的.
(一些应对措施 开箱监控 物理安全 全内存加密 IntelSGX安全区)

  • DMA攻击

在提起DMA攻击之前,
首先得说清啥是DMA设备(Direct memory access)
在PC上,出于性能等一些原因,有这么一类硬件,
可以不经过CPU直接的访问内存.

基于这个特性,
黑阔从这些接口进行突破,
绕开操作系统的各种安全机制,
直接访问内存,完成窃取其中的数据密钥等.(1394 M2 PCIE 雷电等...)

  • DMA之火线攻击


    Snipaste_2020-10-04_22-15-28.png

年代比较久远的DMA攻击,
通过1394接口完成.

  • DMA之Thunderspy


    Snipaste_2020-10-05_00-24-14.png

近一年两出现的DMA攻击,
基于雷电接口的漏洞,
炒的沸沸扬扬.

  • DMA之PCILeech

此外还有些通过PCIE M2等接口进行的.
(甚至还有人尝试从内存和主板连接处飞线,展开DMA攻击)

  • 硬盘自身漏洞之Self-Encrypting Deception


自加密特性:
有的硬盘自带加解密功能,
不需要经过CPU内存操作系统,
可独立完成加解密.

廉价的信任:
让硬盘独自完成加解密工作,
节约一大笔CPU内存资源.
当bitlocker发现硬盘有自加密的能力,
就让硬盘自己做加密了,没去用软件方式.

问题所在:
一些硬盘厂商的加密方案做的稀烂,
被研究员和黑客找到漏洞,
还原了加密数据.
(解决方案:在Win10注册表中,禁用"为固定数据驱动器配置基于硬件的加密使用”)


参考

How It Works: Bitlocker

https://www.youtube.com/watch?v=n_B_FCKLyH0

Bitlocker、TPM和系统安全

https://zhuanlan.zhihu.com/p/29840740

The Evil Maid Attack

https://www.youtube.com/watch?v=0uRxRIJc8zU

Cold Boot Attacks on Encryption Keys

https://www.youtube.com/watch?v=Ej-Nr79bVjg

FireWire Memory Attack

https://www.youtube.com/watch?v=Ek-uwQ7qiso
https://www.youtube.com/watch?v=tle4vis_Aes

Thunderspy

https://www.youtube.com/watch?v=7uvSZA1F9os
https://www.zhihu.com/question/394207624/answer/1216679902

基于PCILeech的UEFI DMA攻击

https://www.anquanke.com/post/id/86840

PCILeech - ufrisk

https://github.com/ufrisk/pcileech

Ulf Frisk - Memory Forensics and DMA Attacks with MemProcFS and PCILeech

https://www.youtube.com/watch?v=5DbQr3Zo-XY

Taking DMA Attacks to the Next Level

https://www.youtube.com/watch?v=QeIPcA8zsHk

Self-Encrypting Deception: Weaknesses in the Encryption of Solid State Drives

https://www.youtube.com/watch?v=uE_Q2em9cFM
https://www.howtogeek.com/fyi/you-cant-trust-bitlocker-to-encrypt-your-ssd-on-windows-10/
https://www.computerworld.com/article/3319736/bitlocker-on-self-encrypted-ssds-blown-microsoft-advises-you-switch-to-software-protection.html

你可能感兴趣的:(BitLocker磁盘加密)

  • 【加密算法基础——对称加密和非对称加密】 XWWW668899 网络安全服务器笔记
    对称加密与非对称加密对称加密和非对称加密是两种基本的加密方法，各自有不同的特点和用途。以下是详细比较：1.对称加密特点密钥:使用相同的密钥进行加密和解密。发送方和接收方必须共享这个密钥。速度:通常速度较快，适合处理大量数据。实现:算法相对简单，计算效率高。常见算法AES(高级加密标准)DES(数据加密标准)3DES(三重数据加密标准)RC4(流密码)应用场景文件加密磁盘加密传输大量数据时的加密2.
  • 磁盘一把锁一个感叹号_电脑C盘出现一把锁和黄色感叹号是什么原因，求大神赐教。... 铁骨铮铮的汉子 磁盘一把锁一个感叹号
    bitlocker功能要到控制面板bitlocker里面关闭www.mh456.com防采集。1、打开2113控制面板--进入bitlocker磁盘加密。5261Chkdsk命令，是微软提供的在DOS(包括系统里面的MS-DOS)下使用的，用于修复逻辑性坏道(也就是文件损坏)的一个dos命令。1.具体用法是：在DOS窗口下，输入：chkdsk盘符:/F。如下图。回车后即可自动开始检测(并修复)“偷
  • Windows10磁盘带锁黄色三角感叹号怎么去掉？Bitlocker提示等待激活的解决方法 风随心飞飞 操作系统windows
    文章目录1.问题描述：2.相关其他命令：1.问题描述：Windows10系统中磁盘图标带锁（黄色三角感叹号），可以正常访问。解决办法：使用命令取消加密，并关闭bitblocker：manage-bde-offc:执行时，通过Windows+X快捷键打开菜单，选择WindowsPowershell（管理员），在弹窗的蓝色窗口中执行以上命令。其中C:代表C盘，如果是其他盘，则将C改为其他盘符。执行完成
  • windows10重装系统后, 磁盘目录上出现了一个黄色三角感叹号和一把锁（BitLocker解锁） 脚大江山稳 系统安全
    BitLocker解锁通过cmd命令窗口关闭Bitlocker锁通过cmd命令窗口关闭Bitlocker锁manage-bde-offD:执行这个命令之后会发现提示【解密正在进行中】，但是一般来说对于这种所谓的进行中都会想要明确的看到进度显示那么就需要用到下一个命令了manage-bde-statusmanage-bde-status想要查看的盘符:在等到已加密百分比变为：0.0%，就证明已经解密
  • 博主用树莓派绕过 Windows Bitlocker 加密，用时不到一分钟 诗者才子酒中仙 云计算/大数据/安全/数据库物联网/互联网/人工智能/其他安全
    近日YouTube博主stacksmashing发现Bitlocker存在一个巨大的安全漏洞，他利用价值不到10美元的树莓派Pico在不到一分钟内成功绕过了该加密。2月7日消息，微软Windows10和11专业版内置的Bitlocker加密功能一直被认为是方便易用的安全解决方案。然而，近日YouTube博主stacksmashing发现Bitlocker存在一个巨大的安全漏洞，他利用价值不到10美
  • 内存取证分析基础，命令整理，包含vol2和vol3 modest —YBW 内存训练安全
    内存取证是什么？内存镜像就是本机的内存，把它存储在介质里面。什么时候需要：比武，bitlocker密钥分析，微信密钥，恶意软件分析。制作内存镜像：FTK（mem格式），弘连刀锋现场快区，Dumplit分析内存镜像：volaitlity，有2,3两个版本，美亚，弘连小工具，axiom制作时间注意，一个是utc时间，一个是本地时间。分享一下我自己的命令快速一把唆：首先写volatility.exe-f
  • 戴尔电脑恢复系统后，D盘被加密Bitlocker，要求输入48位密钥，才能打开D盘---解决过程 ba_wang_mao WIN10戴尔电脑恢复系统D盘被加密Bitlocker48位密钥
    一、前言今天DELL电脑恢复系统后，D盘被加密（D盘图标上有一把黄色的锁），鼠标双击准备打开D盘，提示了一个密钥ID，让输入48位码解密，被microsoft添加了Bitlocker密码。原因是新版win10系统采用了新的加密机制，当使用微软账户登录系统后，会自动开启设备加密功能。此时进行一键恢复或重置系统，D盘被加密，要想进入D盘，会提示“BitLocker恢复，输入此驱动器的恢复密钥”。二、发
  • win10 home版本升级为win10pro Marshall_Fred
    场景：安装的home版本win10系统，想用bitlocker功能，但是home版本不支持bitlocker,又不想重装系统，快速过渡到pro版本的win10解决方法：1.进入C:\WINDOWS\system32文件夹，找到并运行sysprep.exe，2.选择"进入系统审核模式"，然后选择重启；3.重启之后进入win10以管理员身份运行cmd,在命令行中执行如下命令：dism.exe/onli
  • Win10恢复环境是什么？ 洛水如云 #数据安全守护者电脑windows
    Win10恢复环境概述Win10恢复环境（WinRE）是Windows10中预加载的恢复环境，允许您在电脑无法启动时修复、重置或诊断电脑。这个过程可以手动也可以自动。其中，WinRE在检测到以下问题后会自动启动：连续两次启动失败。引导完成后两分钟内连续两次意外关机或重新引导系统启动。安全启动错误（与Bootmgr.efi相关的问题除外）。触控设备上的BitLocker错误。WinRE基于Windo
  • 电脑技巧：BitLocker是啥，有啥用，看完本文你就懂了 IT技术分享社区 电脑技巧微软技术电脑软件windows运维
    目录一、介绍二、BitLocker用途三、工作原理四、配置和管理五、安全性和适用性六、总结一、介绍BitLocker是由微软开发的全磁盘加密工具，它旨在保护计算机上的数据免受未经授权的访问或窃取。BitLocker通过对整个磁盘进行加密，可以在计算机被丢失或被盗时确保数据的保密性。二、BitLocker用途BitLocker主要用于以下几个方面：数据保护：通过对硬盘进行加密，BitLocker可以
  • 如何使用Jamf管理Apple文件保险箱 SolutionKeys macos安全运维
    在当今的移动工作和教育环境中，Apple设备的一个关键功能是内置的macOS加密技术，该技术保护组织数据和用户隐私。配备AppleM1芯片的最新计算机还具有额外的加密功能。虽然这些安全层有助于保护最终用户手中的设备，无论他们在哪里工作或学习，但这也意味着Mac管理员需要加密特权来访问数据和管理用户帐户。MacOSFileVault是苹果在Mac上进行全磁盘加密的原生解决方案，它保留了您对用户密码加
  • linux读写权限解析,linux文件权限详解 weixin_39983404 linux读写权限解析
    #前言我们知道，无论什么东西，涉及到安全性的，比如文件、文件夹、磁盘(就如window系统的磁盘，我们就可以通过bitlocker技术将磁盘给加密锁起来)、服务器，等都需要设置权限管理，以保证安全性，接下来让我们来探讨以下Linux的文件权限。1.权限概述权限是操作系统用来限制对资源访问的机制，权限一般分为读、写、执行。系统中的每个文件都拥有特定的权限、所属用户及所属组，通过这样的机制来限制哪些用
  • 家庭基建不完全指南 8bc078de8ad4
    建设需求出于兴趣爱好，更出于是对自己劳动成果的数字化保留，易雾君经历过惨痛的数据丢失，很2地将Excel的主密码放到了Excel里边，由于主密码是随机的，也是临时产生，还未记住，当然磁盘加密的密码也存储在了Excel里，自己给自己锁住了，导致2017年和2018年积攒的数据全给弄没了，故期望建设一套完善的家庭网络系统来提升生活便利性，同时能保障生活中积攒的点滴长久保存。建设发展历史2018年：初来
  • Windows进入PE后发现C盘被锁定的解决办法 Evain_Wang windowsc语言开发语言
    C盘被锁定是因为新版系统中内置了Bitlocker对硬盘进行了锁定.每次开机时从C盘中取出秘钥自动解密,关机后一旦从外部进入系统就只能是锁定状态.可以有两种解决方案格式化硬盘,重新分区重装系统，这种会清除所有资料,不推荐；关闭BitLocker服务,推荐；以管理员模式打开WindowsPowerShell1.输入manage-bde-status查看硬盘加密状态(注意-status前有一个**空格
  • 中科2023 modest —YBW 取证精华学习
    1、检材一硬盘的MD5值为多少？（1分）80518BC0DBF3315F806E9EDF7EE13C122、检材一bitlocker的恢复密钥是多少？（5分）看了一下不解密寸步难行，必须解密。18中科一样的，老题目一样出感觉这个有点慢，下面看到潘姐的1小时。然后我自己的我自己的，1小时18分钟终于是恢复出来了密码：juED0ALF41jkA4d+QFiu5iQFyDtkJcN1Iyi5qAmopo
  • 四招让你每天只需工作2小时 SolutionKeys macos运维安全
    拥有了Jamf以后，阿忙在工作上如履平地，一帆风顺。本期我们就来介绍一下他是如何通过Jamf大转变的吧！1随时随地管理设备阿忙发现Jamf竟可以通过任何设备来登录，管理他的设备组。他悠闲地躺在床上，拿起iphone，直接登录Jamf系统，远程下发系统和用户级别的配置，例如涉及数据安全方面的磁盘加密、固件锁、账户密码、SSL证书、软件更新、数据备份等策略。在确保了客户的设备都拥有了极高的安全级别，就
  • 四招让你在疫情期间每天只需工作2小时~ SolutionKeys Jamf移动设备管理macosiosipad运维移动开发
    上期我们说到阿忙拥有了Jamf以后，工作如履平地，一帆风顺。本期我们就来介绍一下他是如何通过Jamf大转变的吧！1随时随地管理设备阿忙发现Jamf竟可以通过任何设备来登录，管理他的设备组。他悠闲地躺在床上，拿起iphone，直接登录Jamf系统，远程下发系统和用户级别的配置，例如涉及数据安全方面的磁盘加密、固件锁、账户密码、SSL证书、软件更新、数据备份等策略。在确保了客户的设备都拥有了极高的安全
  • win11 与 kali 的双系统重装 三杯两盏淡酒(゜▽゜*) 软件安装笔记linuxwindows
    2023.12.1（血与泪的教训(┳Д┳)）演示环境：惠普暗影精灵9笔记本重装前的必要的准备工作安装顺序：随便关闭磁盘的bitlocker（如果加密了的话可能会遇到需要恢复秘钥的情况）1、点击管理bitlocker2、点击关闭bitlocker关闭主板的安全模式，并更改启动引导顺序在开机时按进入BIOS界面（我的是按F10进入，不知道自己是什么按键的可以从F1试到F12）进入后关闭安全模式，仔细找
  • Win10磁盘目录上出现了一个黄色三角感叹号和一把锁（BitLocker解锁） l&WK Windows技巧windows
    文章目录1、目的与需求2、打开设置查看具体的BitLocker设置3、通过cmd命令窗口关闭Bitlocker锁3.1通过Win+R快捷键打开Windows命令运行框3.2命令文档查看3.3根据帮助文档关闭BirLocker锁1、目的与需求最近放了一个假回来打开电脑发现磁盘目录上多了一个黄色三角感叹号和一把小锁，如下图所示：(PS：图是网上抠下来的，因为我电脑上的已经解决的，想到要记录的时候已经没
  • 如何啟用 BitLocker來加密硬盤 hu5566798 运维
    概述什麼是BitLocker：BitLocker磁碟機加密是一項本機安全性功能，可對安裝Windows的磁碟機上的所有內容進行加密。設備加密透過加密來幫助保護您的資料。只有擁有正確加密金鑰（例如個人識別碼）的人才能解密它。它是如何運作的：BitLocker與稱為可信任平台模組(TPM)的硬體組件結合使用。TPM是主機板上類似智慧卡的模組，由電腦製造商安裝在許多較新的電腦中。BitLocker將其復
  • [Azure]azure磁盘加密（Windows/Linux） ADE(Azure Disk Encryption) 光陰矢の如し Azure加密azurelinuxflask
    Azure磁盘加密用于保护数据，对于Windows使用BitLocker对磁盘进行加密，同时与KeyVault集成，控制和管理Key和Secret。本文利用Potal对磁盘进行加密注：AzureDIskEncryption可能会导致VM重启，对VM造成影响，在加密前最好为VM磁盘创建Snapshot或者进行备份。本文也同样适用于对Linux进行加密。一创建AzureKeyVault1在Potal检
  • 计算机文档加密如何解锁,bitlocker怎么解锁_bitlocker解锁方法 精准撩男 计算机文档加密如何解锁
    许多用户为了保护电脑文件安全不被偷看，都会喜欢使用bitlocker加密功能来进行加密，Bitlocker是一种独特的为磁盘添加密码的工具，但是很多用户使用bitlocke加密完之后，不知道要怎么解锁，为此小编这就给大家带来bitlocker解锁方法供大家参考。1、打开控制面板-进入bitlocker磁盘加密；2、选中启用加密的分区，点击关闭bitlocker；3、接着将会提示你输入解锁密码，如果
  • linux文件权限详解 老油条IT记
    #前言我们知道，无论什么东西，涉及到安全性的，比如文件、文件夹、磁盘(就如window系统的磁盘，我们就可以通过bitlocker技术将磁盘给加密锁起来)、服务器，等都需要设置权限管理，以保证安全性，接下来让我们来探讨以下Linux的文件权限。1.权限概述权限是操作系统用来限制对资源访问的机制，权限一般分为读、写、执行。系统中的每个文件都拥有特定的权限、所属用户及所属组，通过这样的机制来限制哪些用
  • 电脑磁盘怎么设置密码？磁盘加密软件哪个好？ 夏冰加密软件 电脑
    电脑磁盘经常被用于存放各种重要数据，而为了避免数据泄露，我们需要为磁盘设置密码，以防止未授权人员使用磁盘。那么，电脑磁盘怎么设置密码呢？下面我们就一起来了解一下。如何设置磁盘密码？想要为磁盘设置密码，我们可以使用BitLocker加密功能来设置磁盘密码。我们在电脑资源管理器中右键点击磁盘，选择“启用BitLocker”，在弹窗中勾选“使用密码解锁驱动器”，设置密码后，点击“下一步”，随后根据提示完
  • 关闭bitlocker加密 red-fly bitlocker
    windows11的笔记本电脑买回来发现分驱都处于bitlocker状态，上网上搜索都是说进入控制面板的安全项进行关闭，包括去搜索栏搜索“管理BitLocker”，对搜索出来的项打开，经过试验，它们进入的是同一个位置，只有对密钥进行备份的选项，而没有关闭的选项。后面经过反复的观察，才发现了从哪里关闭它。在“我的电脑”上点右键，选择“属性”，然后点左边的“隐私和安全性”，在右侧点“设备加密”，就出来
  • U盘怎么加密？U盘数据该怎么加密？ 夏冰加密软件 安全
    在使用U盘的过程中，我们会将很多重要数据存放在电脑中，但为了保护文件的安全性，我们需要使用加密来进行保护。那么，U盘数据该怎么加密呢？U盘数据加密方法想要将普通U盘变成加密U盘，我们需要使用专业的U盘加密软件，比如Windows的磁盘加密工具BitLocker。BitLocker可以用于U盘加密，只需要将U盘连接电脑，随后在资源管理器中右键点击U盘盘符，在菜单中选择“启用BitLocker”。随后
  • BitLocker是个什么东东？密钥丢了怎么办 Hyde Greg Windows文件加密windows系统安全
    呃，BitLocker不是什么妖魔桂冠，就更小区里的保安大叔一样，熟悉了很亲切，不熟悉却很可怕BitLocker是一个Windows自带的加密软件，帮你保护你的数据。不过，当你忘记密码的时候，可以使用BitLocker恢复密钥恢复。不过，当你忘记密钥的时候，那麻烦可就大了……简介解决方法：登录Microsoft账户，找到密钥即可。什么，你说你没有Microsoft账户？？？你先看看谁用他的MS（M
  • BitLocker恢复获取密钥官方操作指南 Jason_Lee155 科普问题与硬件问题安全windows
    下载驱动安装禁用签名，进入Bios一堆骚操作出现下图问题:BitLocker恢复下面的识别密钥是不能直接用，真正的恢复密钥是一串四十多位的数字序列！第一步：用另一台电脑浏览器进入aka.ms/myrecoverykey这个网址(就是图里那个网址)：第二步：邮箱账号及密码，登陆进去（邮箱账号密码为需要解锁bitlocker的windos邮箱账号）点击相应电脑查看详细信息，验证邮箱。得到驱动器解锁密码
  • ubuntu的系统安装与软件安装 mc_故事与你 ubuntulinux运维
    文章目录1.准备系统u盘1.下载镜像2.下载rufus3.制作系统盘2.电脑进行分区3.Ubuntu的安装1.高级启动2.安装系统3.进入系统后4.window与Ubuntu时间不匹配问题5.进入window遇到磁盘加密问题6.修改文档权限不够问题7.联想小新pro14进入ubuntu系统键盘未响应问题1.问题2.准备工作3.开始修改8.安装搜狗输入法1.下载软件包2.安装fcitx框架及相关依赖
  • bitlocker恢复保护时出现 驱动器加密错误 向导初始化失败 系统找不到指定文件 玩电脑的辣条哥 #Windows10#Windows安全Win10bitlocker
    环境：Win10专业版联想E14Gen2问题描述：bitlocker恢复保护时出现驱动器加密错误向导初始化失败系统找不到指定文件电脑更换主板后，重新恢复保护出现驱动器加密错误解决方案：1.尝试重启电脑（未解决）2.cmd输入manage-bde-onc:（未解决）3.想到之前有个案例：Win10开启BitLocker无法加密系统盘，提示正在启动Bitlocker，系统找不到指定的文件4.进入ReA
  • Enum用法 不懂事的小屁孩 enum
    以前的时候知道enum，但是真心不怎么用，在实际开发中，经常会用到以下代码: protected final static String XJ = "XJ"; protected final static String YHK = "YHK"; protected final static String PQ = "PQ";
  • 【Spark九十七】RDD API之aggregateByKey bit1129 spark
    1. aggregateByKey的运行机制   /** * Aggregate the values of each key, using given combine functions and a neutral "zero value". * This function can return a different result type
  • hive创建表是报错： Specified key was too long; max key length is 767 bytes daizj hive
    今天在hive客户端创建表时报错，具体操作如下   hive> create table test2(id string); FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:javax.jdo.JDODataSto
  • Map 与 JavaBean之间的转换 周凡杨 java自省转换反射
    最近项目里需要一个工具类，它的功能是传入一个Map后可以返回一个JavaBean对象。很喜欢写这样的Java服务，首先我想到的是要通过Java 的反射去实现匿名类的方法调用，这样才可以把Map里的值set 到JavaBean里。其实这里用Java的自省会更方便，下面两个方法就是一个通过反射，一个通过自省来实现本功能。 1：JavaBean类 1 &nb
  • java连接ftp下载 g21121 java
    有的时候需要用到java连接ftp服务器下载，上传一些操作，下面写了一个小例子。 /** ftp服务器地址 */ private String ftpHost; /** ftp服务器用户名 */ private String ftpName; /** ftp服务器密码 */ private String ftpPass; /** ftp根目录 */ private String f
  • web报表工具FineReport使用中遇到的常见报错及解决办法（二） 老A不折腾 finereportweb报表java报表总结
      抛砖引玉，希望大家能把自己整理的问题及解决方法晾出来，Mark一下，利人利己。   出现问题先搜一下文档上有没有，再看看度娘有没有，再看看论坛有没有。有报错要看日志。下面简单罗列下常见的问题，大多文档上都有提到的。   1、没有返回数据集： 在存储过程中的操作语句之前加上set nocount on 或者在数据集exec调用存储过程的前面加上这句。当S
  • linux 系统cpu 内存等信息查看 墙头上一根草 cpu内存liunx
    1 查看CPU 　　1.1 查看CPU个数 　　# cat /proc/cpuinfo | grep "physical id" | uniq | wc -l 　　2 　　**uniq命令：删除重复行;wc –l命令：统计行数** 　　1.2 查看CPU核数 　　# cat /proc/cpuinfo | grep "cpu cores" | u
  • Spring中的AOP aijuans springAOP
      Spring中的AOP Written by Tony Jiang @ 2012-1-18 （转）何为AOP AOP，面向切面编程。 在不改动代码的前提下，灵活的在现有代码的执行顺序前后，添加进新规机能。 来一个简单的Sample: 目标类： [java]  view plain copy print ? package&nb
  • placeholder(HTML 5) IE 兼容插件 alxw4616 JavaScriptjquery jQuery插件
    placeholder 这个属性被越来越频繁的使用. 但为做HTML 5 特性IE没能实现这东西. 以下的jQuery插件就是用来在IE上实现该属性的. /** * [placeholder(HTML 5) IE 实现.IE9以下通过测试.] * v 1.0 by oTwo 2014年7月31日 11:45:29 */ $.fn.placeholder = function
  • Object类,值域,泛型等总结(适合有基础的人看) 百合不是茶 泛型的继承和通配符变量的值域Object类转换
    java的作用域在编程的时候经常会遇到,而我经常会搞不清楚这个 问题,所以在家的这几天回忆一下过去不知道的每个小知识点   变量的值域;   package 基础; /** * 作用域的范围 * * @author Administrator * */ public class zuoyongyu { public static vo
  • JDK1.5 Condition接口 bijian1013 javathreadConditionjava多线程
    Condition 将 Object 监视器方法（wait、notify和 notifyAll）分解成截然不同的对象，以便通过将这些对象与任意 Lock 实现组合使用，为每个对象提供多个等待 set （wait-set）。其中，Lock 替代了 synchronized 方法和语句的使用，Condition 替代了 Object 监视器方法的使用。 条件（也称为条件队列或条件变量）为线程提供了一
  • 开源中国OSC源创会记录 bijian1013 hadoopsparkMemSQL
    一.Strata+Hadoop World（SHW）大会         是全世界最大的大数据大会之一。SHW大会为各种技术提供了深度交流的机会，还会看到最领先的大数据技术、最广泛的应用场景、最有趣的用例教学以及最全面的大数据行业和趋势探讨。          二.Hadoop   &nbs
  • 【Java范型七】范型消除 bit1129 java
    范型是Java1.5引入的语言特性，它是编译时的一个语法现象，也就是说，对于一个类，不管是范型类还是非范型类，编译得到的字节码是一样的，差别仅在于通过范型这种语法来进行编译时的类型检查，在运行时是没有范型或者类型参数这个说法的。 范型跟反射刚好相反，反射是一种运行时行为，所以编译时不能访问的变量或者方法(比如private)，在运行时通过反射是可以访问的，也就是说，可见性也是一种编译时的行为，在
  • 【Spark九十四】spark-sql工具的使用 bit1129 spark
    spark-sql是Spark bin目录下的一个可执行脚本，它的目的是通过这个脚本执行Hive的命令，即原来通过 hive>输入的指令可以通过spark-sql>输入的指令来完成。 spark-sql可以使用内置的Hive metadata-store，也可以使用已经独立安装的Hive的metadata store   关于Hive build into Spark
  • js做的各种倒计时 ronin47 js 倒计时
    第一种：精确到秒的javascript倒计时代码      HTML代码:   <form name="form1">   <div align="center" align="middle"
  • java-37.有n 个长为m+1 的字符串，如果某个字符串的最后m 个字符与某个字符串的前m 个字符匹配，则两个字符串可以联接 bylijinnan java
    public class MaxCatenate { /* * Q.37 有n 个长为m+1 的字符串，如果某个字符串的最后m 个字符与某个字符串的前m 个字符匹配，则两个字符串可以联接， * 问这n 个字符串最多可以连成一个多长的字符串，如果出现循环，则返回错误。 */ public static void main(String[] args){
  • mongoDB安装 开窍的石头 mongodb安装 基本操作
    mongoDB的安装          1:mongoDB下载   https://www.mongodb.org/downloads         2:下载mongoDB下载后解压     
  • [开源项目]引擎的关键意义 comsci 开源项目
         一个系统，最核心的东西就是引擎。。。。。       而要设计和制造出引擎，最关键的是要坚持。。。。。。       现在最先进的引擎技术，也是从莱特兄弟那里出现的，但是中间一直没有断过研发的    
  • 软件度量的一些方法 cuiyadll 方法
    软件度量的一些方法http://cuiyingfeng.blog.51cto.com/43841/6775/在前面我们已介绍了组成软件度量的几个方面。在这里我们将先给出关于这几个方面的一个纲要介绍。在后面我们还会作进一步具体的阐述。当我们不从高层次的概念级来看软件度量及其目标的时候，我们很容易把这些活动看成是不同而且毫不相干的。我们现在希望表明他们是怎样恰如其分地嵌入我们的框架的。也就是我们度量的
  • XSD中的targetNameSpace解释 darrenzhu xmlnamespacexsdtargetnamespace
    参考链接: http://blog.csdn.net/colin1014/article/details/357694 xsd文件中定义了一个targetNameSpace后，其内部定义的元素，属性，类型等都属于该targetNameSpace,其自身或外部xsd文件使用这些元素，属性等都必须从定义的targetNameSpace中找： 例如：以下xsd文件，就出现了该错误，即便是在一
  • 什么是RAID0、RAID1、RAID0+1、RAID5，等磁盘阵列模式? dcj3sjt126com raid
    RAID 1又称为Mirror或Mirroring，它的宗旨是最大限度的保证用户数据的可用性和可修复性。 RAID 1的操作方式是把用户写入硬盘的数据百分之百地自动复制到另外一个硬盘上。由于对存储的数据进行百分之百的备份，在所有RAID级别中，RAID 1提供最高的数据安全保障。同样，由于数据的百分之百备份，备份数据占了总存储空间的一半，因而，Mirror的磁盘空间利用率低，存储成本高。 Mir
  • yii2 restful web服务快速入门 dcj3sjt126com PHPyii2
    快速入门 Yii 提供了一整套用来简化实现 RESTful 风格的 Web Service 服务的 API。 特别是，Yii 支持以下关于 RESTful 风格的 API： 支持 Active Record 类的通用API的快速原型 涉及的响应格式（在默认情况下支持 JSON 和 XML) 支持可选输出字段的定制对象序列化 适当的格式的数据采集和验证错误
  • MongoDB查询(3)——内嵌文档查询（七） eksliang MongoDB查询内嵌文档MongoDB查询内嵌数组
    MongoDB查询内嵌文档 转载请出自出处：http://eksliang.iteye.com/blog/2177301 一、概述        有两种方法可以查询内嵌文档：查询整个文档；针对键值对进行查询。这两种方式是不同的，下面我通过例子进行分别说明。   二、查询整个文档 例如:有如下文档 db.emp.insert({ &qu
  • android4.4从系统图库无法加载图片的问题 gundumw100 android
    典型的使用场景就是要设置一个头像，头像需要从系统图库或者拍照获得，在android4.4之前，我用的代码没问题，但是今天使用android4.4的时候突然发现不灵了。baidu了一圈，终于解决了。 下面是解决方案： private String[] items = new String[] { "图库","拍照" }; /* 头像名称 */
  • 网页特效大全 jQuery等 ini JavaScriptjquerycsshtml5ini
    HTML5和CSS3知识和特效 asp.net ajax jquery实例 分享一个下雪的特效 jQuery倾斜的动画导航菜单 选美大赛示例 你会选谁 jQuery实现HTML5时钟 功能强大的滚动播放插件JQ-Slide 万圣节快乐！！！ 向上弹出菜单jQuery插件 htm5视差动画 jquery将列表倒转顺序 推荐一个jQuery分页插件 jquery animate
  • swift objc_setAssociatedObject block(version1.2 xcode6.4) 啸笑天 version
      import UIKit class LSObjectWrapper: NSObject { let value: ((barButton: UIButton?) -> Void)? init(value: (barButton: UIButton?) -> Void) { self.value = value
  • Aegis 默认的 Xfire 绑定方式，将 XML 映射为 POJO MagicMa_007 javaPOJOxmlAegisxfire
          Aegis 是一个默认的 Xfire 绑定方式，它将 XML 映射为 POJO, 支持代码先行的开发.你开发服 务类与 POJO,它为你生成 XML schema/wsdl XML 和 注解映射概览       默认情况下，你的 POJO 类被是基于他们的名字与命名空间被序列化。如果
  • js get max value in (json) Array qiaolevip 每天进步一点点学习永无止境max纵观千象
    // Max value in Array var arr = [1,2,3,5,3,2];Math.max.apply(null, arr); // 5 // Max value in Jaon Array var arr = [{"x":"8/11/2009","y":0.026572007},{"x"
  • XMLhttpRequest 请求 XML,JSON ,POJO 数据 Luob. POJOjsonAjaxxmlXMLhttpREquest
    在使用XMlhttpRequest对象发送请求和响应之前，必须首先使用javaScript对象创建一个XMLHttpRquest对象。 var xmlhttp； function getXMLHttpRequest(){ if(window.ActiveXObject){ xmlhttp:new ActiveXObject("Microsoft.XMLHTTP
  • jquery wuai jquery
    以下防止文档在完全加载之前运行Jquery代码，否则会出现试图隐藏一个不存在的元素、获得未完全加载的图像的大小 等等 $(document).ready(function(){ jquery代码; }); <script type="text/javascript" src="c:/scripts/jquery-1.4.2.min.js&quo
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他