SACC2013：大数据时代下的IT架构变迁

2013年9月4日到9月6日，由IT168、ITPUB、ChinaUnix主办的SACC2013第五届中国系统架构师大会在北京福朋喜来登酒店拉开序幕。大会将以“大数据下的IT架构变迁”为主题，邀请国内最牛的IT架构师与工程师们来分享他们最新的技术应用经验与成功案例。据了解，中国系统架构师大会自2009年首次召开以来，已经成功举办了四届，受到了业界的广泛关注和赞誉，并已经成为当前国内最高技术水准的架构师盛会。

2013中国系统架构师大会继续围绕“云架构、IT基础架构优化、大数据下的IT架构变迁”三个热点话题展开。吸引了来自全国各地的架构师、工程师、开发经理、DBA、运维总监、CTO等的参与，为期三天的大会议程包含了14个专场的主题探讨，给大家更宽裕的学习交流空间和时间。

大数据是时下IT界很流行的一个话题，对于企业而言，一方面其存在着很多商机，另一方面，也给现有的IT架构提出了挑战。为此，本届大会也为大家安排了主题为《大数据下的IT架构变迁》的专场。

子柳：淘宝技术这十年

▲子柳：阿里巴巴商家业务部电商云布道者，前淘宝技术大学校长

现在的淘宝可以让网民感受疯抢的喜悦，而网站的技术人员感受到得却是“亚历山大”.但能办的如此，网站技术实力可见一斑。从小型的个人网站到今天拥有全国最大的Hadoop分布式计算集群之一，淘宝的成长日新月异。坚挺的售后支持、多彩的产品创意、不断的技术革新，让湖畔花园小区里诞生的淘宝一直前进，从始至终的走在路上。

子柳用风趣的语句评价了互联网、电商等多年来的发展史：“十年生死两茫茫，淘宝兴，易趣亡，有啊拍拍，无处话凄凉。纵使相逢应不识，亚马逊，新蛋网。当当纽约忽上市，苏宁云，国美商。卓越无言，京东降价忙。料得年年肠断处，学技术，到蓝翔。”

淘宝之初：湖畔花园小区里诞生的巨人

2003年4月7日，马云在杭州成立了一个神秘的组织。他叫来十位员工，要他们签了一份协议，这份协议要求他们立刻离开阿里巴巴集 团，去做一个神秘的项目。这个项目要求绝对保密，老马戏称“连说梦话被老婆听到都不行，谁要是透漏出去，我将追杀到天涯海角”.这份协议是英文版的，匆忙 之间，大多数人根本来不及看懂，但出于对老马的信任，都卷起铺盖离开了阿里巴巴。

他们去了一个神秘的据点--湖畔花园小区的一套未 装修的房子里，房子的主人是马云。这伙人刚进去的时候，马云给他们布置了一个任务，就是在最短的时间内做出一个个人对个人(C2C)的商品交易的网站。这 里出一个问题考考大家，看你适不适合做淘宝的创业团队：亲，要是让你来做，你怎么做?

在说出这个答案之前，我们先介绍一下这个创业团队的成员：三个开发工程师(虚竹、三丰、多隆)、一个UED工程师(二当家)、三个运营工程师(小宝、阿珂、破天)、一个经理(财神)，以及马云和他的秘书。

淘宝青春：烦恼中成长的巨人

讲到这里，顺便先辟个谣，网上有很多这样骗转发的励志段子：“1998年，马化腾等一伙人凑了50万元创办了腾讯，

没买房;1998年，史玉柱借了50万元搞脑白金，没买房;1999年，丁磊用50万元创办了163.com,没买房;1999年，陈天桥炒股赚了50万元，创办盛大，没买房;1999年，马云等18人凑了50万元注册了阿里巴巴，没买房。如果当年他们用这50万元买了房，现在估计还在还着银行的贷款吧。”事实上，阿里巴巴和淘宝网都是在马云自己的房子里创办的，阿里巴巴是1999年初发布上线的。所以，关于马云买房子的事情，真相是这样的。

淘宝网作为个人网站发展的时间其实并不长由于它太引人注目了，马云在2003年7月就宣布这个是阿里巴巴旗下的网站，随后在市场上展开了很成功的推广运作。最着名的就是利用中小网站来做广告，突围eBay在门户网站上对淘宝的广告封锁。这时候，eBay终于看到淘宝网这个后起之秀了，他对竞争者的态度就是“封杀他”.eBay买断了新浪、搜狐、网易的电子商务类型的广告，签署了排他性协议，切断了淘宝在这上面做广告的路子。大路不通，我们就独辟蹊径，上网比较早的人应该还记得那些在右下角的弹窗和网站腰封上一闪一闪的广告，“淘宝网”几个字总是如影随形地出现在任何中小型网站上。市场部那位到处花钱买广告的家伙太能花钱了，一出手就是几百万元，他被我们称为“大少爷”.

淘宝的缓存技术

淘宝在很早就开始使用缓存技术了，在2004年的时候，我们使用一个叫做ESI(Edge Side Includes)的缓存(Cache)。在决定采用ESI之前，多隆试用了Java的很多Cache,但都比较重，后来用了Oracle Web Cache,也经常挂掉，Oracle Web Cache也支持ESI,多隆由此发现了ESI这个好东东。ESI是一种数据缓冲/缓存服务器，它提供将Web网页的部分(这里指页面的片段)进行缓冲/缓冲的技术及服务。以往的数据缓冲服务器和信息传送服务器以“页”为制作单位，复制到数据缓冲服务器中，这用于处理静态页面很有效，但在面对 动态内容的时候，就很难得到高效率。在ESI中是部分的缓冲网页，使用基于XML的标记语言，指定逍遥缓冲的页面部分。由此，页面内分为动态地变更部分和静态的不变部分，只将静态的部分有效地发送到服务器中。淘宝网的数据虽然是动态产生的，但页面中的静态片段也有很多，例如页面的投、尾，商品详情页面的卖家信息等们这些都是从ESI缓存中读取的。

开发平台

2006年年底：阿里巴巴提出了Work at Alibaba的战略，二十多个人就被拉到湖畔花园马云的公寓里开始一个叫阿里软件的公司创业。当时对于Work at Alibaba有一个朦朦胧胧的感觉，就是要为中小企业提供一个工作平台，但是工作平台又需要是一个开放的平台，因为卖家的需求是长尾的。当时火热的Salesforce给了阿里人一些启示，那就是做一个支持二次开发的工作平台，半开放式地满足各种卖家的长尾管理需求。此时，软件市场上就开始培养起uizao的一批TP(淘宝开放合作伙伴)。迄今为止，很多非常成功的TP就是从那个时候开始进入淘宝卖家市场的。

但经过一年的平台建设，发现开发者非常难利用平台做二次开发，只有阿里软件内部的团队构建了三个不同的CRM软件。这时候淘宝来了一个业界的技术牛人王文彬(菲青)，这位淘宝新近的首席架构师找到阿里软件的平台架构团队，谈到了当时业界还非常新颖的一种技术平台--开放平台。

例如缓存、CDN等优化手段;运转状况监测、功能降级、资源劣化、流控等可用性手段，自建机房、硬件组装等成本控制手段。 因此，构建一个互联网网站确实是不容易的，技术含量十足，当然，经营一家超市也不简单。