存储行业会议

作者 | 2010-03-13 16:17 | 类型 行业动感 | 28条用户评论 »

Sina WeiboBaiduLinkedInQQGoogle+RedditEvernote分享




如果说2000~2005年是网络设备技术的浪潮，一大批硅谷和全世界Startup公司都借网络技术之名得以成功IPO，那么继网络概念之后，存储可能是下一个 very promising 的方向，又造就了一批借存储概念得以/即将上市或者成功卖出的公司 (DataDomain, MAID, Falconstor, Panasas, 北京龙存科技，深圳创新科存储，还有少不了的华三、华赛)；对各位广大技术工作者而言，这就意味着这个方向已经成为了热点职业，对于即将转战存储领域或者已经身在存储行业的同学位而言，就不得不紧密跟踪了解存储技术的最新前沿发展方向，而追踪最新技术的最好方法就是查看近期相关 行业会议 成果，下载和阅读学习 slides 和 papers：
(更好的是亲身参与其中一两个，但你的公司可能不够 sponsor 你或自己资金不够付”门票+机票+酒店”旅行费用或者时间精力上也不够时，你至少可以下载这些 slides 和 papers 来学习、研究)

工业界

SNIA, 全称 存储网络工业协会 (Storage Netwokring Industry Association)，是总部在硅谷，最初由几家存储行业(EMC,NetApp,…)巨头联合成立的工业协会，其组织的一年一度的 Storage Developer Conference 可能是这个领域最大规模的行业会议了，差不多固定每年九月份在硅谷小城 Santa Clara 召开，虽然门票不菲 USD$1,400, 可每年仍然吸引了 world wide 数千人参与，最近三年的成果在

http://www.snia.org/events/storage-developer2009/presentations

http://www.snia.org/events/storage-developer2008/presentations

http://www.snia.org/events/storage-developer2007/presentations

每年都有 EMC,NetApp,SUN,IBM,HP,Dell,LSI, … 话题按照 CIFS/NFS/iSCSI/本地文件系统/备份技术 等分别组织，近年来又加入了热点话题 Cloud 和 固态存储 (Solid State Storage), Data Deduplication 技术，
值得关注的是 09 年 “CIFS Acceleration Techniques”, 08 年 “Accelerating iSCSI Proxy I/O” 等话题对 WAN Optimizer 网络设备公司 (深圳市深信服、新加坡 Jitcomm) 同样有启示意义，
而 2007年的其中一位 Keynote Speaker 是 GNU 的 Richard Stallman, 讲述 Free Software in Ethics, Practice, and Licensing, 这在一个侧面暗中显示了在自由/开源软件领域，存储方向的软件也在成熟：在史前时代，由于自由/开源的软件不丰富让相关领域只能由大公司才有成本掌控研发，初创公司无从进入；2000年后，Linux-2.4网络netfilter/iptables技术的成熟和Freeswan/OpenVPN软件的成熟开始降低了网络技术的入行门槛，也让Netscreen/Fortinet成为了可能，能够敢于挑战Cisco去一较高下，同时伴随的是GPL侵权事件也在同步增加，如Netscreen德国GPL侵权案，美国 Tivolization 侵权案。同样，大概05年后 Linux上 Software RAID/LVM 虚拟卷管理/XFS 的成熟，配合 Samba/iSCSI Target/open-iscsi 系列软件的成熟也让存储行业的入行门槛大为降低，初创公司的成长也往往伴随着GPL侵权事件，因此 GNU, FSF, Richard Stallman 有必要在各界呼吁大家采用自由软件的所需要注意的法律问题，当然最好的实践就是把软件全部都GPL了，源码之前了无秘密～

有意今年前往的同学不妨关注 SDC2010 网站，争取个 Early Bird 价，

http://www.snia.org/events/storage-developer2010

September 18 – 23, 2010, Hyatt Regency Hotel Santa Clara, CA

Storage-Academy 是SNIA的下属机构，和分散在世界各地的驻点，包括中国区、南亚(新加坡)、EMEA区(欧洲、中东、非洲)，选择东南亚的中心当然就是新加坡了，前不久二月份活动才过，本人申请了免费参加(有免费领取纪念品和750GB移动硬盘的抽奖机会谁想错过呢？)，会场无非也就是 EMC,NetApp,Dell,HP 存储大厂各自表述一番， Data Dedeuplication/Solid State Storage/Amazon Cloud S3 最新技术前景，值得注意的是会场还包括 Cisco, 不知何时加入存储战团的，其FCoE技术看起来不错的说，其意图在局域网领域取代iSCSI，不过 iSCSI vs. FCoE vs. ATAoE 谁最终胜出还很难说；另一个值得关注的是 新加坡国家数据存储实验室 DSI, 属于 ASTAR (新加坡科技局)下属机构，这个小国家的科技发展势头不错，待后续篇幅再说。

http://www.storage-academy.com/singapore/

http://www.storage-academy.com/south_asia/

接下来 Storage-Academy 在三、四、五、六月份还会在 Dubai UAE(阿联酋)、德国、英国、意大利有后续活动，有兴趣的同学不妨关注是否经过所在城市，也可以申请免费参会；

http://www.storage-academy.com/

这次 Storage Academy Singapore 的会议资料是保密下载，不过我在此把它公开了，密码是 sgdel10 地址在

http://www.storage-academy.com/presentations/sg/

Linux Storage & Filesystem workshop, 这个LSF在08年以前一直是在 usenix 举办的，自 09 年转移到 Linux Foundation 举办，以前是偏学术方式研究 Linux 的 Storage & Filesystem 技术，现在是直接由工业界的 LF 直接承办了，内容也是 Filesystem (local filesystem, networking filesystem), iSCSI/NFS/CIFS, Data Deduplication/SSD 等话题，但偏重只在 Linux 上的代码实现，相对于 SNIA 会综合讨论 Linux/BSD/Solaris/Windows 或平台无关的存储技术而言；

http://www.usenix.org/event/lsf08/tech/

http://www.usenix.org/event/lsf07/tech/

自2010年起的 LSF Workshop 改成了LSF Summit, 邀请制
August 8 – 9, 2010 · Renaissance Boston Waterfront, Boston, MA

http://events.linuxfoundation.org/events/lsf-summit

学术界

Usenix FAST, 全称为 文件与存储技术会议 (Conference on File and Storage Technologies), 自03年开始，到今年的 FAST’10 已是第8届，也是刚刚二月份才在硅谷 San Jose 才开过，入场费每年约USD$900,如果非usenix会员另+$125;

http://www.usenix.org/events/fast10/tech/

下载到 FAST’10 Proceedings 从目录上看起来尝试解决 SSD Lifetime /Data Deduplication 问题的 idea 很多，但能付诸工业实践的恐怕不多，学术界就是这样，有些人甚至只发 paper 而什么代码都不给，去信问到能不能给一份 Evaluation 数据的代码，回复是不能、或者根本没有回复；就是没有 GNU 的境界；

“DFS: A File System for Virtualized Flash Storage” 来自 Princeton University 的 William K. Josephson，指导教授中包含有 原 DataDomain 李凯 Li Kai <li@cs.princeton.edu>, 其针对 Flash 存储(也就是SSD) 发明了一种 Direct File System, 与 现有 yaffs, jffs2, ext3 的不同在于引入了一种新式的Flash存储抽象层，比现有 Flash Translation Layer 更简单和高效，称为 VFSL (Virtualized Flash Storage Layer), 在这个抽象层的基础之上再实现一个遵照传统的POSIX文件系统；整个 paper 说的看起来很完美，还作了 Benchmark 数据显示其与 ext3 比较的 性能提升，不爽的是没有找到其DFS源代码，似乎是不公布的。而且其 References 引用多是80,90年代的资料，殊不知 Linux 的发展日新月异, yaffs,jffs2,ext3 早过时了， 在 Raw Flash (NOR/NAND) 方面，有 2.6.27 内核引入的 由 Nokia 贡献的 Ubi/UbiFS, 其 Ubi 就是超越 FTL 的新的Flash抽象层，在 SSD 方面有 2.6.30 引入的 NilFS2, 最新的 btrfs 也包含针对 SSD 的支持。通用文件系统方面 Ext4 已经远胜 ext3 了。

“Extending SSD Lifetimes with Disk-Based Write Caches” 这篇来自 Toronto 大学的 Gokul Soundararajan 介绍了其延长 SSD 寿命的技术，基本思想是使用 硬盘 HDD 作为缓冲，再基于策略(定时、定量)作数据迁移。看起来技术很具有颠覆性，颠覆了我们日常对SSD技术应用的看法，现代 Segate 等大厂已经在改进 温彻斯特硬盘 技术，利用内置少量 SSD 的高性能随机访问来改进硬盘整体随机访问性能；没想到这位高人能够想到反其道而用之，利用硬盘来延长 SSD 寿命。

IEEE Storage Conference IEEE 组织的存储技术会议，尚了解不多，待后续报道。

http://storageconference.org/

总体上还是很赞 usenix 的说，不管什么会议，会后总能找到 papers/slides 资料免费下载，而且有永久存档站，错过了时间点还是能下载到；不像其它有些会议，资料不给下载或是要收费下载，很颓废地说。(相比 SNIA 的会议资料是三个月后才免费开放。)

另类存储：
二月份在 SMU 有一个学术研讨会， 来自 NTU (南洋理工大学) 的 Anwitaman DATTA 教授讲解 p2p storage 方面研究的最新进展， 什么 p2p+storage ? 当时我看到这个标题时也是被当场雷到了， p2p 用来做下载还可以，用来上传备份有用的数据？ p2p 用户中谁会愿意贡献自己的存储空间来保存别人的冗余的数据？ Storage 需要的是高性能和高可靠的存取数据，很多公司、普通用户甚至使用专用的机器来备份数据还不够，怎么能够信任 Internet 上的陌生人的 存储空间？ 这位印度裔教授讲解其基本原理和整个系统能够 run 起来的先决条件，就是冗余度，有足够的 user base, 足够的冗余，整个存储系统 的利用效率是 (1/冗余度R), 通常 p2p 用户是不确定的，随时可能上线和离线，假设上线用户平均是全部用户的 1/N, 整个用户基数 (user base) 必须 >= … 我当时 challenge 了一个问题： “but who has the incentive to be willing to use such a p2p storage system?” 回复 “we don’t care, we just do the research model, but if user base requirements satisfied, people would like to, maybe…”

“P2P Storage Systems – Algorithms, Analysis and Applications”

http://www.sis.smu.edu.sg/research/diagram/anwitaman_datta.htm

(4个打分， 平均：5.00 / 5)

工具箱
本文链接 | | 打印此页 | 28条用户评论 »

雁过留声

“存储行业会议”有28个回复

  1. 老刘 于 2010-03-13 5:28 下午

    总结得不错！我也很看好这个方向。

    从产业链来看，终端信息产生-》数据传输-》终端信息处理-》信息存储。存储是国内厂家的一块短木板。

    问一哈，对一个存储系统，最难的部分在哪？软件还是硬件?

  2. 陈怀临 于 2010-03-13 5:36 下午

    相当好的总结。非常有价值。

    说心里话，华赛成立以来到底做的如何了？大家透露一哈。

  3. bird 于 2010-03-13 7:17 下午

    门票不用钱，送蓝牙耳机..

  4. bird 于 2010-03-13 7:17 下午

    《存储中国峰会》

  5. 1 于 2010-03-13 8:31 下午

    华赛 的存储做的比较垃圾

    基本上就是 前面的 服务器+symantec veritas+disk array

    还一天到晚标榜自己，做国内第一，只有IBM EMC HDS 才是自己的对手

    我听后哈哈大笑

  6. crquan 于 2010-03-13 9:55 下午

    http://bbs.doit.com.cn/viewthread.php?tid=50461

    突发奇想，决定统计一下国内存储厂商有多少？
    1、深圳市迪菲特科技有限公司
    2、同有
    3、豪威
    4、建联
    5、邦诺
    6、天地容错
    7、联想
    8、宝德
    9、Acer
    10、华硕
    11、普安
    12、maxtronic
    13、世纪长久
    14、亚美联
    15、方正
    16、创新科 (深圳UIT)
    17、桑协
    18、中兴
    19、华为
    20、EDI
    21、银兴瑞得
    22、大恒
    23、华艺
    24、浪潮
    25、曙光
    26、太科
    27、伟图达

    清华紫光存储事业部，简称：紫光存储，主要产品iSCSI存储服务器

    亚美联－北京鲸鲨存储科技

    上面很多家都声称自有知识产权，非OEM。但实际上上面很多家的很多个型号产品都是OEM来的，除了最低那个低端存储可以自研以外；就是 “NAS/IP-SAN/iSCSI存储服务器” 入行门槛相当低，基本上装一个 linux server/Samba/NFS Server/iSCSI Target 就完，就可以自称为 NAS/IP-SAN(iSCSI) 统一存储。各家拼的是 web 管理界面的易用性，特色功能(指Email报警/SNMP管理等)的全面性，等等。

    甚至基于自由/开源软件里面有更好的打包: 1. FreeNAS (基于FreeBSD)
    2. OpenFiler (基于Linux)
    3. Nexenta (基于OpenSolaris,提供ZFS)
    都提供 iso 光盘映像下载，刻录成光盘，安装到任何能带较多磁盘位的成品存储服务器上，就成为了 “NAS/IP-SAN(iSCSI) 统一存储”；我就见到过用了 OpenFiler 只把 web 界面汉化了下就敢声称”完全自主知识产权”的。

    高端双控,HA,光纤存储,Infiniband产品还都相当多是OEM.

  7. 理客 于 2010-03-13 11:53 下午

    多谢楼主，学习了

  8. appleleaf 于 2010-03-14 1:29 上午

    最近弯曲真是热闹，大侠频出，虽然笔者不懂存储，但楼主的文章信息量很足。

  9. Cheng 于 2010-03-14 3:13 上午

    弯网的评论系统很奇怪,有时发评论直接不用审核就出现了(这时是怎么防SPAM的?),有时发评论又需要审核,

    近两天在多篇文章发过评论,一个也没出现,是有什么软件防SPAM系统还是全人工审核的?估计够累的,

    总的来说,一个 false positive 也没出现,是很不错了,但是不知 false negative 有多少了?

  10. crquan 于 2010-03-14 8:50 上午

    最近几天我的评论都没有被审核通过？关于开源实现的存储软件系统 …

    1. FreeNAS (基于FreeBSD)
    2. OpenFiler (基于Linux)
    3. Nexenta (基于OpenSolaris,包含ZFS)

  11. nuwa 于 2010-03-14 8:51 上午

    good post!

    Stony Brooks有一个文件系统实验室，有些技术也不错

  12. crquan 于 2010-03-14 9:50 上午

    FAST’10 上有一篇即出自 Stony Brook, 待有时间进一步发掘：

    Evaluating Performance and Energy in File System Server Workloads
    Priya Sehgal, Vasily Tarasov, and Erez Zadok, Stony Brook University

  13. Cheng (弄明白了，是 crquan 帐号不给发评论？) 于 2010-03-14 9:52 上午

    FAST’10 上有一篇即出自 Stony Brook, 待有时间进一步发掘：

    Evaluating Performance and Energy in File System Server Workloads
    Priya Sehgal, Vasily Tarasov, and Erez Zadok, Stony Brook University

  14. 北美飘啊飘 于 2010-03-14 12:23 下午

    excellent summary, 期待后续

  15. david YE 于 2010-03-14 4:04 下午

    华赛的还不错的，发展势头很猛

  16. K 于 2010-03-14 6:04 下午

    Storage有前途！

  17. crquan 于 2010-03-18 3:47 上午

    上面还有多个主题值得详细报道，如 “新加坡 Jitcomm” 是个网络科技创业公司，主攻 WAN Optimizer 网络设备 方向，本人有幸在某 Seminar 见识到其中层研发管理人员，发现原来是中国人，对Linux技术本身以及公司发展方向都有清晰的把握，是个有希望有前景IPO的创业公司，值得改天在弯曲初创公司栏目里面详细报道一篇。

    同时，”新加坡 Jitcomm”正在扩大研发队伍，欢迎有 Linux 网络编程扎实功底的人才应聘；公司协助办理工作准证；

    也是少见的欢迎从中国直接应聘的公司，是个能够暂时逃离 GFW 魔掌的好办法，

    可能的原因是公司里面已经有中国人了，欢迎更多中国人去；

    (真正的原因在于新加坡本土学生喜欢读商科、医生、法律；其本土自然产生的 Linux 人才不能自给)

    所以，各位具有 “四海为家，闯荡江湖” 的良好心态且具备扎实 Linux 功底的同学不妨一试；

    有应聘成功的别忘了给弯曲、也给我发个贺电哈。

    http://www.linuxforum.net/forum/showflat.php?Board=job&Number=743346
    http://www.jobsdb.com/SG/en/Search/JobAdSingleDetail?jobsIdList=400003000021134
    http://topic.csdn.net/u/20100302/17/b626fbd1-a1a5-46d2-aaff-3159e2654dba.html

  18. ning 于 2010-04-01 12:12 上午

    “but who has the incentive to be willing to use such a p2p storage system?” 回复 “we don’t care, we just do the research model, but if user base requirements satisfied, people would like to, maybe…”

    我是做R&D的，做过一些research工作。我觉得做学术这样是应该的的，今天看起来很荒唐的条件，明天也许很普通，或者后人会发现另辟蹊径的方式。先把学术上完善，太多的考虑其他因素可能会啥也做不出来。当然能够准确把握产品用户商业的就是奇人了！

  19. old_peter 于 2010-04-01 5:48 上午

    还有圣桥呢？

  20. crquan 于 2010-04-01 8:15 上午

    To ning#18 我对上面 NTU印度裔教授的 “p2p storage” 方案没有任何不敬，只是推荐出来给弯曲这里以工业界背景居多的社区读者以广泛的思路，或许将来有一天真能有商业奇人把它实现了

    除了上面给出的链接地址外，也可以参考这位教授的个人主页：
    http://www3.ntu.edu.sg/home/anwitaman/

    另外，你的 http://www.helixapp.com/ 网站好像打不开？

  21. 理客 于 2010-04-01 1:19 下午

    从技术的观点看，P2P storage是海量存贮成本最低，可靠性最高的方式。比如所有数据可以全球有10个P2P存贮的完整copy，在具体算法上要考虑物理位置等综合的可靠性。至于安全问题，需要安全的数据是相比不需要很安全的数据，应该是差很多数量级的，所以比如加密问题，一定不是多所有internet传输的数据加密，这没有必要，也浪费成本，而只是对有必要做加密的数据进行加密，并且全加密了，也不利于MZ/ZY:)

  22. ABC 于 2010-04-02 5:41 上午

    P2P是很好的技术，部署和控制的好，互联网可玩的东西就大大增加了。
    不过这东西和云计算这个主流背道而驰，不知道谁会继续发展这东西。
    感情上更喜欢P2P，平等，自由，不正是体现互联网精神么。
    长期看好P2P技术。

  23. 毛毛虫 于 2010-04-03 7:00 下午

    不知道在分布式云里头，p2p技术是否有应用的场合？比如一个文件可能分布存储在不同的数据中心，p2p告诉终端从不同的数据中心获取文件。

  24. bm 于 2010-04-03 7:46 下午

    not sure if any storage company goes ipo… acquisition is the trend, for now.

  25. frogman 于 2010-04-07 8:23 上午

    TO: 毛毛虫

    RSA有些人在做的一个东西跟你说的很象，参考这篇文章：

    HAIL: a high-availability and integrity layer for cloud storage

    我理解着大意就是云中的RAID, 目标是可靠性，一定程度的隐私，可能更廉价的成本，可互操作的云基础设施

  26. crquan 于 2010-04-22 6:21 下午

    才说的 p2p storage, 没想到真的有人把它给做成了, 五年前, Memory Box Backup Pty Ltd, Adelaide, South Australia, http://j.mp/cwoz4g http://j.mp/dePAC4

    “Memory Box is a unique backup system that doesn’t rely on a single server to store the backups. Instead a community of users is used to store the backups for other users. In this talk, we’ll discuss the security and integrity issues and how we get it to work on multiple platforms.”

    “Michael Terrington is Technical Director at Memory Box Backup Pty Ltd. Over the last 5 years Michael has lead the development of Memory Box from idea to implementation and realisation as a product.”

    Tuesday the 20th of April, 6:30pm, 2010, Adelaide, 南澳

  27. droplet 于 2010-04-25 5:52 下午

    p2p存储对运营商如何部署，如何盈利，这些没考虑清楚，是不可能有商业运营的。如果没有商业运营，这个技术也不好推广。

  28. cc 于 2010-07-28 10:55 下午

    IEEE 的 Storage Conference 也不错，有时间总结下,

    http://storageconference.org/2010/Presentations.html