从AliHbase到Lindorm,阿里大规模存储产品演进

栾小凡

阿里巴巴  存储事业部  技术专家

经任职于甲骨文,创业公司Hedvig。专注于大数据在线存储的相关产品,开发过Apache cassandra,Apache HBase.现负责阿里巴巴新一代大数据在线存储产品Lindorm的开发工作。

演讲概要

Lindorm(灵动)是阿里巴巴研发的大规模、高吞吐、快速灵活、实时混合的NoSQL系统,面向海量数据场景提供世界领先的高性能、可跨域、多一致、多模型的混合存储处理能力。其依托于阿里在大数据结构化存储的多年实践感悟和经验,运用独特的数据自动分区和多副本架构设计,应用高效内存管理、分层异构存储、动态编码索引、灵活流动计算、快速批量导入等技术,并通过RDMA、用户态IO、数据处理offload等技术充分发挥新型计算/存储/网络硬件的能力,对焦于同时解决大数据(无限扩展、高吞吐)、在线服务(低延时、高可用)、多功能诉求,能够为用户提供无缝扩展、高吞吐、持续可用、毫秒级稳定响应、强弱一致可调、低存储成本、丰富索引的数据实时混合存取能力。
Lindorm生长于阿里大生态,全面服务于淘宝、天猫、蚂蚁、菜鸟、阿里云、高德、优酷等各个领域,满足用户对于大规模数据的实时存储和处理的需求,支撑业务的海量存储、数据驱动、实时决策等场景。系统日常存储数据百PB级,峰值请求处理每秒数亿次,典型场景包括实时大屏、智能风控、营销决策、个性推荐、订单记录、监控日志等。

听众收益

1. DT时代NoSQL数据库发展前瞻
2.了解阿里巴巴使用最广的NoSQL数据库的发展和进化历程
3.了解大规模在线存储Lindorm的设计理念和细节