视频网站可行性分析报告beat版
视频网站可行性分析报告
行业介绍
视频网站,即以视频发布、管理和分享为主要内容的网站。视频网站基于流媒体的技术,通过文字、图像、声音、影像四种方式的结合,实现在线传播,这种连续的影音传播的方式要比以前任何的单一形式的传播更直观更吸引人,传播优势更加明显。近年来,无论是P2P 直播网站,BT 下载站,还是本地视频播放软件,还将向影视点播扩展作为自己的一块战略要地。影视点播已经成为各类网络视频运营商的兵家必争之地。根据互联网数据中心(DCCI )8月13日发布的统计数据显示,继奥运会开幕式当日创下1.61亿网络“收视率”纪录之后,央视网、搜狐、新浪、悠视网等获得奥运赛事转播权的9家网站几天内再创收视新高,奥运网络频道群日均页面访问量(PV )总量首次突破14亿,其“收视率”几乎相当于一家仅次于央视的“电视台”。与此同时,大洋彼岸拥有直播权的NBC 网站也创下视频直播的全新纪录——视频浏览量达到7200万次,超过了该网站2004年雅典夏季奥运会和2006年都灵冬奥会流量之和的两倍多。 事实证明,尽管电视媒体依然占据主导地位,但网络视频成长惊人,两者差距已经十分细微。网络视频创造的神话,已使其成为互联网迎来第二次发展浪潮的希望所在。
需求分析
网络视频内容发布主要经历了几种模式:传统的内容发布模式,CDN (Content Delivery Network)方式,P2P(Peer-to-Peer)方式以及CDN+P2P方式。从目前的现实来看,P2P 无疑是目前视频网站最为广泛的技术应用,而更有德国互联网调研机构iPoque 称,P2P 已经彻底统治了当今的互联网,其中50-90%的总流量都来自P2P 程序。P2P 成为网络视频发布的核心技术,解决P2P 技术问题也就成为了网络视频解决方案的核心
P2P 的特点,是一个文件被切片从不同的节点下载,相当于从不同的节点下载大量小文件。越来越大的业务压力导致媒体服务器(Media Server )的硬盘已不堪重负,有效提高数据存储设备的并发读写能力(IOPS ,I/O per second),是解决问题的关键所在。在过去20年间,伴随着IT 技术及互联网应用的快速发展,业务和用户的不断增加导致业务的并发流量暴增,给本来已经是系统瓶颈的存储系统雪上加霜。为适应互联网业务发展的需要,除了优化软件及系统架构、配备高性能的服务器外,快速读写的存储设备成了互联网领域核心系统的关键。
虚拟化的普及得到了无论是用户还是厂商的普遍认同,随之而来的就是数据中心在存储上需要更加快捷灵活的虚拟存储、更高的存储利用率以及能够做到无缝数据迁移。虚拟化给数据中心带来的本质变化以及数据中心存在的大量硬盘大大增加了数据中心的数据量及网络数据流,传统无论是SATA 还是FC 磁盘因为数据量的迅速增加都需要更长的反应时间,数据中心需要利用固态硬盘快速响应、高IO 处理能力的特性来满足数据增长带来的新需求。经过对数据存储技术的深入研究,宝德推荐使用CDN+P2P结合的方式,提出SSD (Solid State Disk,固态硬盘)解决方案。方案中使用SSD 代替传统硬盘。SSD 不像传统磁盘驱动器,没有旋转反应、磁头定位和搜索时间,因此SSD 的数据访问时间仅为几十微秒数量级,而且并发读写能力达到每秒上万次。
项目设计
1.设计原则
SSD 在视频网站中的应用方案应该采用当今最先进的数据存储技术,加上安全有效的方案设计,构造一个提高系统缓存的视频网站系统。当你为视频点播安排一台服务器时,关键标准就在于每秒随机I/O. 你需要添加内存来提高内存命中率并减少I/O次数,或者需要添加磁盘以支持应用程序所需的I/O速率。增加内存的问题在于其线性成本――最新的DIMM 成本和最初的DIMM 的是一样的,可价值却仅呈对数增长。由于工作量是随机的,增加内存仅能得到大约按照内存平方根比例减少的I/O。内存变的便宜了在一定程度上有所帮助,但即便如此,增加内存随之而来的能耗会更大,费用也会随之增加。除了这个办法外,也可以增加普通磁盘数量,但每新增一块昂贵的15000转磁盘,每秒只能带来大约200
个I/O,这样成本费用也会很高。所以考虑在成本及IOPS 等多种因素后,建议采用SSD 硬盘来取代普通HD 硬盘。
2.设计方案
针对视频网站需要提高缓存的实际需求,宝德设计了将服务器的普通硬盘更换为SSD 硬盘的方案。
3.方案说明
相对传统硬盘,SSD 硬盘巨大的并发读写能力足够支撑网络视频业务需求,单位业务节点的性能提升使得设备投资减少、运营成本降低和运营能力提升。经过传统硬盘方案与SSD 方案的对比测试,使用SSD 网络视频解决方案之后,服务器的带宽和并发连接数及业务能力分别提升8倍;每个节点可支撑的用户数增加,节点数量减少;服务器资源有效利用率提高,服务器数量减少,随之IDC 机房租用、运维成本也相应减少,使得整体运营成本降低60%以上.
宝德PR2024S-SSD 在2U 空间内,提供多达24个SAS/SATA热插拔硬盘位,支持普通HDD 碟式硬盘和SSD 固态硬盘,最大提供24T 数据空间,
满足多种大容
量数据存储、传输、高带宽和I/O处理能力的高要求;SSD 固态硬盘具有功耗低、稳定性好、运行速度快、抗震性强等优势,并且固态硬盘运行时散热也更小、更加安静。平均故障间隔时间可达到200万个小时,数据传输速度比传统硬盘快30-40倍。SSD 硬盘具有的极高优势,能显著提高数据存储的并发读写能力,解决网络视频应用所遇到的硬盘性能瓶颈问题,提供用户完美的网络视频体验。固态硬盘与普通硬盘对比分析(仅作参考):
客户收益
∙ 提高数据存储设备的并发读写能力
读速度能够大于250MB/s,写速度能够大于170MB/s,存取时间小于75us ;IOPS(512byte random read)达到了35000次,每秒的I/O次数,是传统硬盘无法比拟的,完全能够应付频繁的数据写入。由于闪存是有寿命期限的,因此 SSD采用了动态平均写入技术,使每一个块都达到了擦写10万次的要求,进行24小时不停擦写,可以达到至少8年的时间。SSD 显著的高IOPS 指标,目前服务器只要被密集访问困扰,把传统机械硬盘更换成SSD ,服务器的并发响应速度提升了50~100倍。
节省成本
普通磁盘有较大容量而缺乏IOPS ,因此,随机IOPS 密集型的工作负载中,随机IOPS 就成为了采用传统磁盘的制约因素。而SSD 擅长IOPS 。当支持你的IOPS 需求所需的磁盘成本大于能够支持该应用需求的SSD 的费用时,固态硬盘更具成本效益。如果文件非常活跃,I/O写操作频繁,具有恢复日志和撤销片段,那么SSD 就是不错的选择。如果在数据库环境中,恢复日志和撤销片段影响了当前磁盘的I/O性能,此时利用RAM 就能迅速提高I/O性能,实现投资回报。
SSD 巨大的并发读写能力足够支撑网络视频业务需求,
单位业务节点的性∙
能提升使得设备投资减少、运营成本降低和运营能力提升。经过传统硬盘方案与SSD 方案的对比测试,使用宝德网络视频解决方案之后,服务器的带宽和并发连接数及业务能力分别提升8倍;每个节点可支撑的用户数增加,节点数量减少;服务器资源有效利用率提高,服务器数量减少,随之IDC 机房租用、运维成本也相应减少,使得整体运营成本降低60%以上。此外,该模型还忽略了固态盘可以省下的电能,通常SSD 运行仅需要传统磁盘所需电能的五分之一。
∙ 功耗降低、无噪音
传统机械械硬盘在数据读写过程中,从寻道到定位数据都要借助电机高速运转进行,从而耗费大量的电量,15000转硬盘功耗在18W 。SSD 固态盘在运行当中数据可以经过I/O总线直接存储,不需要复杂的机械运动,功耗极低,功耗在0.35W 。
确保系统稳定
SSD 固态盘的抗冲击可以达到1500G ,抗震动可以达到5G(7~2000HZ) 。SSD 低功耗和抗震动从物理上确保了数据的稳定性,在SSD 内部集成ECC 校验单元,可以进行4bit/512Bytes,确保了在进行大量数据交换或传输过程的正确性。此外,SSD 支持各种RAID 模式。内部集成类似UPS 功能,在突然断电的情况下,内部可以存留几秒中的电流,将未写完的关键数据写入闪存中,确保了断电引起的数据丢失的现象,大幅提升服务器存储系统的性能。 ∙