没有数据和计算,就没有 AI 现在的广泛应用。随着大数据技术的演进以及在各行各业... 展开 >
张彭善,2008 年硕士毕业于上海交通大学,2012 年加入 PayPal 风险管理平台部门至今。在 PayPal 主要负责实施和构建了大数据计算平台、离线机器学习平台以及实时机器学习平台用以支撑 PayPal 全球风险管理业务。目前除负责机器学习平台外,正带领团队构建 PayPal 实时图计算平台用以加强风控数据维度。在大数据计算、分布式系统实现和优化、大规模机器学习和深度学习系统优化以及高可用可扩展计算平台等领域有着丰富的实战经验。
没有数据和计算,就没有 AI 现在的广泛应用。随着大数据技术的演进以及在各行各业尤其是互联网行业的迸发,机器学习和深度学习为代表的 AI 技术,构建起来日益精准的模型,用以支撑互联网业务的高速发展。大数据计算在经历了离线计算、实时计算的演进,还在不断成长成熟,整个生态领域也随之得到了很大的发展。目前,基于分析的大数据计算平台在各大公司发挥着非常重要的基础设施的作用。本专题主要介绍大数据计算和分析领域的最新趋势和最佳实践,尤其是大数据与 AI 的结合,用以为公司和行业提供更加智能的服务和决策。
爱奇艺从 2010 年开始开展大数据业务,相继上线了离线计算、实时计算、传统机器学习等多种计算框架来满足海量的数据处理和分析需求。近几年,随着 AI 应用的兴起,越来越多的业务利用深度学习等技术从历史积累的大数据中挖掘更大的数据价值。如何利用现有的大数据基础设施,更好地促进 AI 应用,爱奇艺进行了大数据与深度学习技术相结合的探索,打造基于大数据的深度学习平台,将其中遇到的一些坑和实践经验分享给大家,希望可以给与会者带来启发。
1. 爱奇艺大数据介绍
2. 爱奇艺大数据AI应用
3. 爱奇艺大数据深度学习平台建设
4. 未来展望