报告:数据大爆炸,“互联网+”基础设施数据中心大发展(上)
概述:
“互联网+”带来的在线数据量指数裂变需求与数据中心供给线性增长,推动数据中心需求和价值提升。
第三方数据中心增长远高于行业增长。
历史原因,IDC主要市场份额由中电信、中联通掌握,4G时代到来运营商投资向无线倾斜,并且控制数据中心投资,开始将各地分散IDC纳入集中建设,对市场供给速度低于行业平均水平,第三方数据中心迎来大发展。
数据中心就是互联网领域的商业地产,商业模式也类似,发展刚处在起飞阶段,随着中国进入利率下行轨道,估值将会不断提升。
数据中心依靠收取机柜租金模式,现金流稳定与商业地产行业类似,而目前随着中国数据量需求的爆发性增加,中国的数据中心也将进入供不应求的高速发展阶段;中国未来进入利率下行通道,推动数据中心行业的估值将会不断提升。
指数裂变“互联网+”需求与线性增长数据中心供给差距增加
中国各行各业的互联网化与现实世界数据化的趋势,使得数量和计算量将会呈指数性爆发,而数据存储,计算和应用都更加需要集中化。预测在2014年年底,国内网络上集中存储的数据已经达到1ZB,2014年当年的数据增长量0.5ZB;到2020年时,年新增数据量将会达到15.45ZB,整体的网络上数据存储量将会达到39ZB,未来6年的年复合增长率有望达到84%。
而数据中心的建设依然受传统模式中多个因素的影响,包括地皮审批、电力设施配置、骨干网络接入等,数据中心的供给仍按传统行业的线性增长,预测未来3年将会保持约35%左右的建成面积增长。这将会使得未来3年持续出现对于大型、高等级数据中心的供不应求,大型数据中心的战略价值将会提升。
进入DT(数据技术)时代,在线数据存储和计算量将会指数性增长
最早的“大数据”在互联网行业指的是这样一种现象:互联网公司在日常运营中生成、累积的用户网络行为数据,这些数据规模庞大,以至于不能用G或T来衡量。一份“互联网上一天”的数据告诉我们,一天之中,互联网产生的全部内容可以刻满1.68亿张DVD;发出的邮件有2940亿封之多(相当于美国两年的纸质信件数量);发出的社区帖子达200万个(相当于《时代》杂志770年的文字量);卖出的手机为37.8万台,高于全球每天出生的婴儿数量37.1万。截止到2014年,数据量已经从TB(1024GB=1TB)级别跃升到PB(1024TB=1PB)、EB(1024PB=1EB)乃至ZB(1024EB=1ZB)级别。
国际数据公司(IDC)的研究结果表明,2008年全球产生的数据量为0.49ZB,2009年的数据量为0.8ZB,2010年增长为1.2ZB,2011年的数量更是高达1.82ZB,相当于全球每人每年产生200GB以上的数据。而到2012年为止,人类生产的所有印刷材料的数据量是200PB,全人类历史上说过的所有话的数据量大约是5EB。我们估算在2014年,全球产生的数据量已经达到了3.6ZB。
在2014年小米和金山软件投资世纪互联的新闻发布会上,提到了小米云上的数据增长速度:小米云用户在2014年11月份达到了6795.5万人,小米云的总存储量达到了47PB,这还不包括小米其他业务的10PB。在2014年数据量增长最高的一天,小米云的数据量新增了380TB。可大致估算,每个小米云用户的平均存储量达到了0.72GB,而这个速度还将会飞速发展。目前小米云中共存储了241亿张照片,如今每天新增9000多万张照片和120万段视频。金山集团董事长、小米科技董事长兼CEO雷军指出,2014年小米云的数据量较2013年增长了7倍,并预计2015年还会在这一基础上再增长5倍。
目前国内个人云存储最大的运营商是百度云。百度云在2014年11月份宣布总用户数破2亿,月活跃总用户数超过8000万,百度云的整体数据存储量已经到了5EB。平均到每个用户的数据存储量约为26.84GB。
随着越来越多的智能设备相继投入市场,互联网巨头也开始加大投入,重视技术的百度在手环、摄像头、血压仪以及自行车方面均有尝试。智能硬件离不开数据收集和存储,云也成为连接智能硬件和人的关键。相信随着可穿戴设备的日益完善,未来更多的消费者将会长期记录并存储他们的每天的运动数据(步行、跑步)、身体健康(血压变化、心跳变化、血糖的变化)。
随着手机、数码相机摄像头的分辨率不断提升,消费者拍摄的高清晰照片和视频的数据量也会快速的提升。同时更多消费者希望借助云存储的模式,与朋友家人共享信息。
随着医疗行业基因测序的开展,对数据存储的要求也会大幅增长。以人类为例,人类基因组拥有30亿个碱基,数据量即为3Gb;假设全球70亿人口数量,如果每人都测一次,则测序的数据量至少为3Gb*70亿。且受到技术和方法学限制,目前每一个人至少要测100Gb(大约是基因组的30倍),才能得到相对准确的全基因组信息,所以数据存储量就会达到100Gb*70亿人。然而,对于活着的生命体,仅测一次基因是不够的,比如每个人睡觉、吃饭、思考、生病的基因表达都不一样,因此这个数据量还会有数量级的增加。同时,人类还有基因组万倍的细胞数量,人类体内还有十万倍的菌群。
华大基因估算,一个人如果从出生下来就开始取样,生化、免疫、影像、基因,表型数据,如果都开始积累,那么一起步就是665Gb,一生所累积的数据量为1Pb。假设每个人数据量为1Pb,则全球70亿人就对应7EB的数据量。
IBM商业研究院与牛津大学的合作调研研究报告称,整个人类文明所获得的全部数据中,有90%是过去两年内产生的。而到了2020年,全世界所产生的数据规模将达到2013年的44倍。
综合上述分析,我们预测在2014年年底,国内网络上集中存储的数据已经达到1ZB,2014年当年的数据增长量0.5ZB;到2020年时,当年的新增数据量将会达到15.45ZB,整体的网络上数据存储量将会达到39ZB,未来6年的年复合增长率达到了84%。
预测到2020年,平均每个中国人每年产生的数据约为4.1GB。
数据资产将成为各类企业的核心竞争力,更多数据将会长期在线存储
今天的互联网已经走到新的拐点,真正的大数据时代即将来临。作为这一时代来临的标志之一,所有的数据和信息都会存在云端。与此同时,手机互联网或者移动互联网,尤其物联网、车联网,包括可穿戴设备,各种智能硬件,将会拥有比PC互联网更实时、更广阔的数据采集能力。
数据就是最有价值的资产大数据蕴藏着丰富的信息和价值,如何运用好大数据,发挥数据资产的商业价值,这是大数据时代最核心的挑战。
“数据成为资产”是互联网泛在化的一种资本体现,其使得互联网的作用不仅仅局限于应用和服务本身,而且具有了内在的“金融”价值。数据的功能不再只是体现于“使用价值”方面的产品,而成为实实在在的“价值”。目前,作为数据资产先行者的IT企业,如苹果、谷歌、IBM等,无不想尽各种方式,挖掘多种形态的设备及软件功能,收集各种类型的数据,发挥大数据的商业价值,将传统意义上的IT企业,打造成为“终端+应用+平台+数据”四位一体的泛互联网化企业,以期在大数据时代分得一杯美羹。
大数据蕴藏着丰富的信息和价值。如何运用好大数据,发挥数据资产的商业价值,是大数据时代最核心的挑战。
移动计算/可穿戴设备的流行,意味着利用数据访问设备捕获类似于位置数据这样的传感器交互数据进入了新的发展阶段。同时,社会化计算和移动计算的采用,意味着数据采集的量和方式将大大增加。
消费者与数据间的交互方式已经发生了巨大的变化,企业需要适应这个改变,不仅仅是利用这一丰富的信息以满足客户所期待的更加个性化的服务,还要确定新的销售策略和业务增长领域。
对于企业来说,实时分析在线数据,用户历史数据,从而优化自己的经营模式将会是所有企业必须的经营方式。这将使得各种企业尽可能得保留更多的用户数据(用户使用习惯数据、用户交易数据、用户生活数据)。
从消费者的角度来看,更多的用户将会把他们拍摄的视频、照片的长期存储方式由在本地刻录成DVD光盘的模式,逐步转变为上传存储到云服务当中。而存储在云服务器中,可以拥有更长的保持周期,同时方便采用各种终端方式来浏览查看,并方便与朋友家人共享。
这都将推动更多的数据长期在线存储。
海量数据增长和数据云化将会带动数据中心的需求进入爆发增长期
当企业竞争的重点从“移动互联网”转移到“大数据分析”时,整合行业的数据存储和在线数据分析和网络访问就会爆发性增长。
从另外的一个角度来看,中国的数据中心的计算能力主要都是以x86服务器数量来体现的,Power系列服务器2014年在中国的销售量约1万多台左右,而x86的服务器销售在2014年约达到180万台,预期将会在未来3年保持20%以上的销量增长。而互联网行业对于X86服务器的采购量占比将逐步提升。
如果考虑x86服务器的使用寿命以4年计算,可以测算2014年年底市场存量的x86服务器可以达到450万台,2015/2016/2017年市场存量服务器的数量约为559万/682万/813万台。
高密度、四路以上的服务器占比不断增加
在2013年销售的X86服务器中,四路及以上的x86服务器占比达到26%,而从最新Gartner公布的2014年Q3统计数据来看,在新增的x86服务器销售量中,四路服务器和八路服务器的比例不断增长。四路服务器销售量同比增长30%,八路服务器增长则更为显著,达到46.3%。而互联网行业是对超密度服务器需求增长最快的行业,预期2014年四路以上x86服务器的销售量占比将会达到30%。
而标准的双路服务器多为1U的高度,四路服务器多为4U高度(1U=4.445厘米,为机架服务器工业标准高端单位)。百度、腾讯、阿里巴巴、中国电信、中国移动等公司共同开展了“天蝎项目”,将服务器与机柜设计结合为一个整体,形成了一体化高密度的整机柜服务器解决方案。
随着更多的四路及以上服务器占比不断提升,对于数据中心机柜数量的需求增速预计将保持在30%-40%。
数据存储和计算集中使得更多的服务器和存储设备部署在数据中心内
数据存储设备的容量提升依然收到技术瓶颈的影响。由于成本对比差距大(SSD1TB存储的价格依然在1000元以上,而磁盘1TB存储的价格在200元左右),目前磁盘存储依然是在线存储的主流模式。
目前业界最大的单机架存储密度(基于磁盘模式)可以做到单机架1.8PB的存储容量。而基于SSDFlash的存储可以做到单机架存储密度达到21PB。
数据中心行业供给线性增长
数据中心的建设仍受到传统模式多因素的制约,包括:地皮审批、电力设施配置、骨干网络接入等,数据中心的供给依然按照传统行业的线性增长。
全球范围内,数据中心投资保持着健康增长态势,数据中心服务商在机房设施、IT设备和外包服务上的投资继续扩大。2013年,全球数据中心行业整体投资规模达到1,510亿美元,较2012年增长8%。投资除用于新建数据中心项目外,也被用于现有机房设施的升级改造及外包服务。
2013年,全球范围内数据中心的机房规模达3,360万平方米,较上年小幅提升3.7%,许多成熟数据中心市场在机房规模增长率上趋缓,其中部分国家在数据中心机房规模上出现小幅下降。尽管在成熟市场在新建数据中心数量上有所放缓,世界前三大数据中心市场——美国、日本和英国的数据中心规模仍占全球数据中心机房规模约一半。而金砖四国,尤其是中国和印度,尽管在2013年新建了大量的数据中心项目,但仍未达到成熟数据中心市场的机房规模水平。
以此判断,预计未来三年,仍会持续出现对于大型、高等级数据中心供不应求的情况,大型数据中心的战略价值将会提升。
数据中心行业:大数据时代的科技地产
数据中心行业是在大数据时代的科技地产,需求将会随着数据的爆发性增长而增长,而受到建设周期的影响,供给只能平稳增长。同时一线城市的优质数据中心的需求更为明显。
全球数据中心产业现状
全球数据中心服务市场的发展历程、现状及趋势
数据中心服务市场的业务发展大致可划分为三个阶段,随着各个阶段客户需求和技术的发展,每个阶段的服务形态有所不同。
第一阶段:二十世纪九十年代早期,数据中心服务多由基础电信运营商提供,服务内容主要包括场地、电力、网络带宽、通信设备等基础资源和设施的托管和维护服务。这个阶段主要业务类型为主机托管。
根据IDC圈的统计,2013年,全球数据中心服务市场规模达到284.4亿美元,增速为11.4%。其增长速度的主要拉动力在于亚太地区,主要源于IT企业、互联网企业和电信企业自身业务支撑和拓展的强烈需求。
根据SynergyResearchGroup的统计,2013年二季度,全球数据中心市场中零售型数据中心服务收入占78%,批发型数据中心服务收入占22%,批发型数据中心市场增速高于零售型数据中心市场。按市场贡献来看,美国、英国、日本、德国和中国是数据中心服务业全球前五大收入国家。从收入增速来看,数据中心服务业收入的高速增长更多地来自于包括中国在内的发展中国家。
为减少内部IT运营管理成本,确保安全性、可靠性和高速带宽的可用性,越来越多的企业和机构开始选择数据中心服务。全球范围内,数据中心服务市场需求巨大,现有基础设施资源无法满足不断增长的市场需求,尤其是新兴市场,数据中心的投资额及面积保持较高增速。
网络中立的数据中心服务商可划分为零售型和批发型两种。随着大型互联网公司的急速发展,此类客户对批发型数据中心的需求大幅增长。批发型数据中心服务商提供的基础设施不仅在定制化需求上可以更好地满足客户,在能效和规模经济效益上也更具有优势。
数据中心业务模式
传统的数据中心主要有三种业务模式:批发型数据中心服务、零售型数据中心服务和数据中心增值服务。
批发型数据中心业务,大型客户的议价能力强,同时自行购买IT服务器、数据中心内部的关键网络设备,部分大客户还自己直接去购买运营商的互联网的接入带宽或专线的接入。
在批发型数据中心业务中,IDC厂商主要提供机房(完成机房加固、装修、满足需求的电力供应、安装服务器机架按照客户的要求部署机架和电力保证)。网络接入方面,多数情况下,大客户自己与电信运营商去协商。这样的批发数据中心的项目中,与零售业务相比,由于没有互联网带宽接入的收入,单机架的收入较低。
而在数据中心批发项目中,客户一般会和数据中心提供商签署3年以上的长期合同,且批发业务的粘性强,一旦最终用户大规模部署了某家提供商的服务器和业务后,转换到新机房的成本巨大。所以,几乎批发类的数据中心项目中,客户到期后都会不断延期服务合同。唯一存在的业务风险就是客户本身的业务需求出现下降,对数据中心的机架数量需求逐步减少。
零售型数据中心服务是先行建造标准化的数据中心并配置宽带网络,通过面向普通客户的市场营销活动,以标准机柜为单位租售,提供标准的机柜托管服务及互联网接入服务。
零售型的数据中心增值服务主要包括为零售型数据中心客户提供网络安全,防Ddos攻击负载均衡、智能DNS、智能灾备、CDN、流量监控、反向域名解析等服务,为批发型数据中心业务提供数据中心IT规划设计等服务。
中国数据中心服务市场概况
中国互联网近几年呈现爆发性增长,中国已然成为了全球互联网增速最快的国家,国内互联网行业规模也是亚洲最大的。随着国内数据中心需求量逐步进入高速增长阶段,中国数据中心的建设增速在也处于领先地位。但从规模看,仍远落后与美国和日本。中国的数据中心的面积约为日本的50%-60%、美国的15%。
我国数据中心服务主要由基础电信运营商和网络中立的数据中心服务商提供。就市场规模而言,由于拥有对网络资源的掌控权,基础电信运营商一直以来都占据着中国数据中心服务市场的很大比重,约占整个市场的三分之二,2013年市场规模约175亿元,而第三方网络中立数据中心服务市场规模仅约87.5亿元。
但对于基础电信运营商而言,数据中心服务并非其核心业务,业务收入只占到整体总收入的1%-3%,数据中心服务主要用以支持其核心业务——网络宽带服务。中国市场的数据中心和带宽在很大程度上由两家电信运营商掌控,南方以中国电信为主,北方以中国联通为主。基础电信运营商的骨干网络主要是通过北京、上海和广州三地的国家网络接入点和有限的当地直联点进行互联互通。不同于美国,美国的主要骨干网络可以广泛地通过“对等互联”方式有效地简化网络上的数据传输。而中国南方和北方网络间的互通互联却不充足,中国电信和中国联通各自维护其独立的网络覆盖面。不仅如此,同一网络的跨省连接可能会很慢,因为各地电信运营商有意保留有限的网络带宽资源来满足当地客户需求。另外,基础电信运营商的数据中心通常只提供各自的网络接口,客户的网络连接也受其网络覆盖面所限制。
网络中立的数据中心服务商,通过自建数据中心或者租用基础电信运营商的数据中心,为客户提供数据中心服务。相比基础电信运营商的数据中心,网络中立的数据中心服务商不受限于单个电信运营商的网络及省份界限,能够提供均衡且迅捷的网络连接。由于自建数据中心对于技术、资金、场地等要求较高,国内很多数据中心服务商,通过租用基础电信运营商整体或部分数据中心,为客户提供数据中心服务。网络中立的数据中心服务商和基础电信运营商的差距正逐步缩小,行业地位得到提升。目前国内市场份额领先的企业包括世纪互联、鹏博士、光环新网、万国数据、网宿科技、宝信软件、上海数据港、蓝汛等。
国内的第三方网络中心的数据中心服务商的产业链结构包括产业链主要由基础网络电信运营商、网络中立的数据中心服务提供商(包括批发型数据中心服务商和零售型数据中心服务商)IaaS服务商、IT系统集成商/PaaS/SaaS服务提供商和最终用户组成。
网络中立第三方IDC行业具有一定进入门槛
对于传统企业来说,进入IDC行业将面临着人力资源、技术和资金等多方面的门槛压力。首先,核心技术的开发、IDC的运维、互联网接入方案的设计与实施、节点的管理、带宽流量的检测管理等工作,都要求从业人员具有较高行业技术水平。其次,互联网综合业务服务是一个复杂的系统,其核心技术以及配套服务、增值服务软件的开发都需要服务商具备较强的研发能力与技术积累。另外,行业进入需要充足的资金,租用带宽、设备采购、机房建设和房屋租赁都需要较大的投入,经营过程中还需要有充足的运营资金来满足业务需求带来的临时采购调整。