实时计算平台的演进之路
Chad Wang 查看讲师
百林哲咨询(北京)有限公司专家团队成员
曾在某上市公司,担任云事业群技术总监、集团的云计算首席专家和数字化转型平台业务负责人,带领团队从事数据中心云化、云原生架构、人工智能与数据平台等方向的产品研发和产业化工作。
浏览:3554次
详情 DETAILS

简介

现在最多使用的流计算框架还是Storm,但是核心应用已经在逐步迁移到Flink上,实时/流计算在互联网公司的业务应用中越来越占用重要的地位,技术发展也在快速迭代,计算框架层出不穷。本次分享将展示唯品会在实时计算方向上的历程、心得和实时计算中遇到的各种挑战。在大规模使用Flink做计算引擎和使用Kubernates管理计算节点的探索经验。

目标

了解实时计算的技术发展趋势和历程、以及唯品会在实时计算平台过程中积累的宝贵经验;

通过Storm迁移Flink节约1/3计算资源,提升稳定性;

使用Kubernates来管理容器化的实时计算平台的最新进展。

受众人群

大数据分析师、开发工程师、软件设计师

系统架构师、系统分析师、高级程序员、资深开发人员

课程时长

1天(6H)

分享提纲

第一部分


  实时计算平台现状:1700台物理机,700+应用;99.99%可用性


第二部分


  实时平台的发展历程:早期开发SQL失败;现在平台管理、底层计算框架和开发运维统一


第三部分


  实时计算的难点与挑战:时序、TPS和延迟如何抉择


第四部分


  实时平台的发展方向:使用从Storm迁移到Flink的计算公司


第五部分


  实时业务指标的经验;以及使用Kubernates建设实时平台的历程和架构模式



企业服务热线:400-106-2080
电话:18519192882
投诉建议邮箱:venus@bailinzhe.com
合作邮箱:service@bailinzhe.com
总部地址:
北京市-丰台区-汽车博物馆东路6号3号楼1单元902-B73(园区)
全国客户服务中心:
天津市-南开区-桂苑路15号鑫茂集团鑫茂军民园1号楼A座802-803
公众号
百林哲咨询(北京)有限公司 京ICP备2022035414号-1