从Hadoop到自主研发,技术解读阿里去IOE后的系统

楼主: Lordaeron (Terry)   2014-10-31 12:10:29
原文: http://www.csdn.net/article/2014-10-30/2822375
摘要:
淘宝曾启用全亚洲最大的OracleRAC集群,阿里更是购买过3年无限制的许可,
阿里在IBM小型机以及EMC SAN存储上的投入也曾成为媒体争相报导的事件。
但随着互联网爆发式发展,淘宝、支付宝和阿里巴巴B2B的注册用户数激增,
阿里只能不停地通过水平和垂直扩展架构来应对新增用户生成的海量数据。
而这种集中式数据库的架构,使得数据库成为了整个系统的瓶颈,越来越不
适应海量数据对计算能力的巨大需求,更不用说越来越难以承受的高昂投入。
阿里的“去IOE”已经势在必行:通过自主研发的分布式系统取代集中式数据
库架构,使用MySQL+HBase取代Oracle,商用机取代小型机+SAN。
结语:
已经实现5000节点单集群的飞天5K拥有惊人的规模:10万核的计算能力;
100PB存储空间 ;可处理15万并发任务数;可承载亿级别文件数目;100TB
排序30分钟完成,远超今年7月1日Yahoo!在Sort Benchmark排序测试
Daytona Gray Sort所创造的世界纪录——100TB排序完成时间约71分钟。
作者: blabla123 (念不停 烦不烦?)   2014-10-31 17:30:00
nb...

Links booklink

Contact Us: admin [ a t ] ucptt.com