网络存储(1)行业会议

【游戏神通:云存储带动了存储领域的热潮】

 

 

如果说2000~2005年是网络设备技术的浪潮,一大批硅谷和全世界Startup公司都借网络技术之名得以成功IPO,那么继网络概念之后,存储可能是下一个 very promising 的方向,又造就了一批借存储概念得以/即将上市或者成功卖出的公司 (DataDomain, MAID, Falconstor, Panasas, 北京龙存科技,深圳创新科存储,还有少不了的华三、华赛);对各位广大技术工作者而言,这就意味着这个方向已经成为了热点职业,对于即将转战存储领域或者已经身在存储行业的同学位而言,就不得不紧密跟踪了解存储技术的最新前沿发展方向,而追踪最新技术的最好方法就是查看近期相关 行业会议 成果,下载和阅读学习 slides 和 papers:

(更好的是亲身参与其中一两个,但你的公司可能不够 sponsor 你或自己资金不够付”门票+机票+酒店”旅行费用或者时间精力上也不够时,你至少可以下载这些 slides 和 papers 来学习、研究)

 

工业界

SNIA, 全称存储网络工业协会 (Storage Netwokring Industry Association),是总部在硅谷,最初由几家存储行业(EMC,NetApp,…)巨头联合成立的工业协会,其组织的一年一度的 Storage Developer Conference 可能是这个领域最大规模的行业会议了,差不多固定每年九月份在硅谷小城 Santa Clara 召开,虽然门票不菲 USD$1,400, 可每年仍然吸引了 world wide 数千人参与,最近三年的成果在

 

http://www.snia.org/events/storage-developer2009/presentations

 

http://www.snia.org/events/storage-developer2008/presentations

 

http://www.snia.org/events/storage-developer2007/presentations

 

每年都有 EMC,NetApp,SUN,IBM,HP,Dell,LSI, … 话题按照 CIFS/NFS/iSCSI/本地文件系统/备份技术 等分别组织,近年来又加入了热点话题 Cloud 和 固态存储 (Solid State Storage), Data Deduplication 技术,

值得关注的是 09 年 “CIFS Acceleration Techniques”, 08 年 “Accelerating iSCSI Proxy I/O” 等话题对 WAN Optimizer 网络设备公司 (深圳市深信服、新加坡 Jitcomm) 同样有启示意义,而 2007年的其中一位 Keynote Speaker 是 GNU 的 Richard Stallman, 讲述 Free Software in Ethics, Practice, and Licensing, 这在一个侧面暗中显示了在自由/开源软件领域,存储方向的软件也在成熟:在史前时代,由于自由/开源的软件不丰富让相关领域只能由大公司才有成本掌控研发,初创公司无从进入;2000年后,Linux-2.4网络netfilter/iptables技术的成熟和Freeswan/OpenVPN软件的成熟开始降低了网络技术的入行门槛,也让Netscreen/Fortinet成为了可能,能够敢于挑战Cisco去一较高下,同时伴随的是GPL侵权事件也在同步增加,如Netscreen德国GPL侵权案,美国 Tivolization 侵权案。同样,大概05年后 Linux上 Software RAID/LVM 虚拟卷管理/XFS 的成熟,配合 Samba/iSCSI Target/open-iscsi 系列软件的成熟也让存储行业的入行门槛大为降低,初创公司的成长也往往伴随着GPL侵权事件,因此 GNU, FSF, Richard Stallman 有必要在各界呼吁大家采用自由软件的所需要注意的法律问题,当然最好的实践就是把软件全部都GPL了,源码之前了无秘密~

 

有意今年前往的同学不妨关注 SDC2010 网站,争取个 Early Bird 价,

 

http://www.snia.org/events/storage-developer2010

 

September 18 – 23, 2010, Hyatt Regency Hotel Santa Clara, CA

 

Storage-Academy 是SNIA的下属机构,和分散在世界各地的驻点,包括中国区、南亚(新加坡)、EMEA区(欧洲、中东、非洲),选择东南亚的中心当然就是新加坡了,前不久二月份活动才过,本人申请了免费参加(有免费领取纪念品和750GB移动硬盘的抽奖机会谁想错过呢?),会场无非也就是 EMC,NetApp,Dell,HP 存储大厂各自表述一番, Data Dedeuplication/Solid State Storage/Amazon Cloud S3 最新技术前景,值得注意的是会场还包括 Cisco, 不知何时加入存储战团的,其FCoE技术看起来不错的说,其意图在局域网领域取代iSCSI,不过 iSCSI vs. FCoE vs. ATAoE 谁最终胜出还很难说;另一个值得关注的是 新加坡国家数据存储实验室 DSI, 属于 ASTAR (新加坡科技局)下属机构,这个小国家的科技发展势头不错,待后续篇幅再说。

 

http://www.storage-academy.com/singapore/

 

http://www.storage-academy.com/south_asia/

 

接下来 Storage-Academy 在三、四、五、六月份还会在 Dubai UAE(阿联酋)、德国、英国、意大利有后续活动,有兴趣的同学不妨关注是否经过所在城市,也可以申请免费参会;

 

http://www.storage-academy.com/

 

这次 Storage Academy Singapore 的会议资料是保密下载,不过我在此把它公开了,密码是 sgdel10 地址在

 

http://www.storage-academy.com/presentations/sg/

 

Linux Storage & Filesystem workshop, 这个LSF在08年以前一直是在 usenix 举办的,自 09 年转移到 Linux Foundation 举办,以前是偏学术方式研究 Linux 的 Storage & Filesystem 技术,现在是直接由工业界的 LF 直接承办了,内容也是 Filesystem (local filesystem, networking filesystem), iSCSI/NFS/CIFS, Data Deduplication/SSD 等话题,但偏重只在 Linux 上的代码实现,相对于 SNIA 会综合讨论 Linux/BSD/Solaris/Windows 或平台无关的存储技术而言;

 

http://www.usenix.org/event/lsf08/tech/

 

http://www.usenix.org/event/lsf07/tech/

 

自2010年起的 LSF Workshop 改成了LSF Summit, 邀请制

August 8 – 9, 2010 · Renaissance Boston Waterfront, Boston, MA

 

http://events.linuxfoundation.org/events/lsf-summit

 

学术界

Usenix FAST, 全称为文件与存储技术会议 (Conference on File and Storage Technologies), 自03年开始,到今年的 FAST’10 已是第8届,也是刚刚二月份才在硅谷 San Jose 才开过,入场费每年约USD$900,如果非usenix会员另+$125;

 

http://www.usenix.org/events/fast10/tech/

 

下载到 FAST’10 Proceedings 从目录上看起来尝试解决 SSD Lifetime /Data Deduplication 问题的 idea 很多,但能付诸工业实践的恐怕不多,学术界就是这样,有些人甚至只发 paper 而什么代码都不给,去信问到能不能给一份 Evaluation 数据的代码,回复是不能、或者根本没有回复;就是没有 GNU 的境界;

 

DFS: A File System for Virtualized Flash Storage” 来自 Princeton University 的 William K. Josephson,指导教授中包含有 原 DataDomain 李凯 Li Kai , 其针对 Flash 存储(也就是SSD) 发明了一种 Direct File System, 与 现有 yaffs, jffs2, ext3 的不同在于引入了一种新式的Flash存储抽象层,比现有 Flash Translation Layer 更简单和高效,称为 VFSL (Virtualized Flash Storage Layer), 在这个抽象层的基础之上再实现一个遵照传统的POSIX文件系统;整个 paper 说的看起来很完美,还作了 Benchmark 数据显示其与 ext3 比较的 性能提升,不爽的是没有找到其DFS源代码,似乎是不公布的。而且其 References 引用多是80,90年代的资料,殊不知 Linux 的发展日新月异, yaffs,jffs2,ext3 早过时了, 在 Raw Flash (NOR/NAND) 方面,有 2.6.27 内核引入的 由 Nokia 贡献的 Ubi/UbiFS, 其 Ubi 就是超越 FTL 的新的Flash抽象层,在 SSD 方面有 2.6.30 引入的 NilFS2, 最新的 btrfs 也包含针对 SSD 的支持。通用文件系统方面 Ext4 已经远胜 ext3 了。

 

Extending SSD Lifetimes with Disk-Based Write Caches” 这篇来自 Toronto 大学的 Gokul Soundararajan 介绍了其延长 SSD 寿命的技术,基本思想是使用 硬盘 HDD 作为缓冲,再基于策略(定时、定量)作数据迁移。看起来技术很具有颠覆性,颠覆了我们日常对SSD技术应用的看法,现代 Segate 等大厂已经在改进 温彻斯特硬盘 技术,利用内置少量 SSD 的高性能随机访问来改进硬盘整体随机访问性能;没想到这位高人能够想到反其道而用之,利用硬盘来延长 SSD 寿命。

 

IEEE Storage Conference IEEE 组织的存储技术会议,尚了解不多,待后续报道。

 

http://storageconference.org/

 

总体上还是很赞 usenix 的说,不管什么会议,会后总能找到 papers/slides 资料免费下载,而且有永久存档站,错过了时间点还是能下载到;不像其它有些会议,资料不给下载或是要收费下载,很颓废地说。(相比 SNIA 的会议资料是三个月后才免费开放。)

 

另类存储:

二月份在 SMU 有一个学术研讨会, 来自 NTU (南洋理工大学) 的 Anwitaman DATTA 教授讲解 p2p storage 方面研究的最新进展, 什么 p2p+storage ? 当时我看到这个标题时也是被当场雷到了, p2p 用来做下载还可以,用来上传备份有用的数据? p2p 用户中谁会愿意贡献自己的存储空间来保存别人的冗余的数据? Storage 需要的是高性能和高可靠的存取数据,很多公司、普通用户甚至使用专用的机器来备份数据还不够,怎么能够信任 Internet 上的陌生人的 存储空间? 这位印度裔教授讲解其基本原理和整个系统能够 run 起来的先决条件,就是冗余度,有足够的 user base, 足够的冗余,整个存储系统 的利用效率是 (1/冗余度R), 通常 p2p 用户是不确定的,随时可能上线和离线,假设上线用户平均是全部用户的 1/N, 整个用户基数 (user base) 必须 >= … 我当时 challenge 了一个问题: “but who has the incentive to be willing to use such a p2p storage system?” 回复 “we don’t care, we just do the research model, but if user base requirements satisfied, people would like to, maybe…”

 

“P2P Storage Systems – Algorithms, Analysis and Applications”

 

http://www.sis.smu.edu.sg/research/diagram/anwitaman_datta.htm

 

from 弯曲评论

 

你可能感兴趣的:(存储,网络,flash,p2p,licensing,emc)