[关闭]
@Lucien 2018-03-18T10:13:41.000000Z 字数 596 阅读 641

阅文统一存储平台架构演进

徐海峰,阅文集团首席架构师

摘要:阅文集团由腾讯文学与原盛大文学整合而成,是业内最大的正版数字阅读平台和文学IP培育平台。阅文拥有业内最大的作者群体与电子藏书:百万作家、千万藏书、过亿章节。随着平台的发展,作家、书、内容越来越多,我们面临的数据存储压力剧增。从v1时代的数据库存储开始,到成立内容中心时自研了DFS,又到后期在DFS的基础上改进架构、闭环DFS;在DFS上增加可插拔业务,使其平台化。最终造就了目前阅文统一的存储平台。

本次的分享,主要为大家带来我们前期技术上犯过的错误、后期的改进措施、业务增长状态下的突发问题与解决方案、最终加入大数据与AI平台化DFS的一个完整过程。

演讲提纲

  1. 数据库时代的存储方式
    *书与ID业务捆绑,无法分拆
    *书的总量受到限制,导入合作商的书有问题
    1. 自研DFS
      *根据我们的业务研发DFS;
      *阅文DFS的特点
      *阅文DFS的专利技术
    2. 业务突破带来的问题
      *DFS设计的缺陷导致的问题
      *引入元数据信息与lax(分布式锁服务器)
      *在网络不稳定机房的实践
    3. 大数据的平台化
      *加入大数据分析,鉴别文章内容敏感度

听众受益:

  1. 了解整个存储从无到有的过程;
  2. 了解怎么将单调的技术进行平台化、大数据化
  3. 获取改进架构、弥补前期项目过失的经验与建议

--------
2018年1月在成都做过分享http://www.itdks.com/eventlist/detail/1930

添加新批注
在作者公开此批注前,只有你和作者可见。
回复批注