简介
如何根据企业的实际情况选择合适的开源产品?这些开源产品有哪些擅长和不擅长的地方?各个开源产品之间如何整合?在使用过程中又会遇到哪些问题?这些问题如何解决?本课程会和你分享携程在这两年多的时间里面是怎么样一步一步走过来的,分析经验和教训(总体层面 + 技术细节)。另外也会分享携程在数据开发系统,以及查询系统方面的经验和构想,上层的系统+底层的基础平台共同组成一个坚实的大数据平台,给用户提供了在整个数据处理的生命周期稳定和方便的系统的支持。
目标
a)熟悉互联网主流的大数据平台的体系
b)了解如何根据企业的实际情况选择开源系统
c)了解如何在企业实际情况下落地,整合开源系统
d)了解如何构建大数据的运维和监控系统
e)了解如何构建企业的数据开发平台和查询平台
课程时长
1天(6H)
受众人群
大数据领域的开发人员、系统架构师、运维工程师、运维架构师、技术经理以及其对大数据领域有所了解的相关人员
分享提纲
a)携程大数据平台的简介 |
b)大数据底层基础平台的实践 i.Hadoop / Hive / HBASE ii.实时数据平台(Storm / Spark-Streaming) |
c)大数据开发和查询平台的实践 i.数据开发系统(调度,传输,主数据,质量校验) ii.数据查询系统(Adhoc,报表,OLAP) |
d)问题和解答 |