快捷搜索:  as

揭秘腾讯大数据十年发展历程:从关系型数据库

【TechWeb】10月18日消息,近日,腾讯大年夜数据团队具体表露了腾讯大年夜数据十年景长过程,并周全展示了腾讯第三代全栈机械进修平台Angel在大年夜模型数据练习、深度进修、图谋略等方面的技巧能力。

据腾讯大年夜数据认真人刘煜宏先容,腾讯大年夜数据从2009年开始, 经历离线谋略、实时谋略与机械进修三个阶段,2009年之前,腾讯主要应用传统的关系型数据库。2009年开始,传统的单机数据库所供给的办事,在系统可扩展性、性价比方面已不再适用腾讯营业爆发式的增长。面对这种变更,腾讯大年夜数据转向散播式,基于开源的Hadoop体系,构建了腾讯第一代大年夜数据平台,并扶植离线谋略平台,主要发力规模化。腾讯大年夜数据由此进入第一阶段。三年里,腾讯实现了从关系型数据库到自建大年夜数据平台的周全迁移,到2012年,腾讯大年夜数据的单集群规模冲破了4400台。

2012年,移动互联网爆发,应对营业数据统计及时性、快速性的需求,腾讯大年夜数据从Hadoop转向Spark和Storm体系,在接受开源技巧的根基上,结合腾讯自身的需求进行重写,探索流式谋略、秒级采集系统的扶植,构建企业级的实时数据阐发体系,腾讯大年夜数据成上进入第二阶段。

2015年至今,腾讯大年夜数据迈入了第三阶段。跟着数据掘客、数据利用的深入,腾讯大年夜数据再次自我迭代,于2016年推出了自研机械进修平台Angel,专攻繁杂谋略场景,可进行大年夜规模的数据练习,支撑内容保举、广告保举等AI利用处景。它由腾讯与北京大年夜学联合研发,兼顾了工业界的高可用性和学术界的立异性。

据腾讯Angel开拓认真人肖品先容,腾讯Angel从腾讯海量营业场景中而来,是超大年夜样本和超高维度的机械进修平台。如今,Angel已在QQ、微信支付、腾讯广告、腾讯视频等腾讯旗下产品中广泛利用,并向微众银行等行业相助伙伴周全开放,普遍适用于智能保举、金融风险评估等图谋略营业场景。

2017年,腾讯Angel就正式开源。2018年8月,腾讯将Angel捐赠给Linux旗下专注人工智能的LF AI基金会,结合基金会成熟的运营,周全进级的 Angel与国际开源社区深入互动,致力于让机械进修技巧更易于上手钻研及利用。

您可能还会对下面的文章感兴趣: