都说大数据和 AI 要结合，那系统架构该怎么搭？| ArchSummit

都说大数据和 AI 要结合，那系统架构该怎么搭？| ArchSummit

• 来源:网络
• 更新日期:2020-06-15

摘要：大数据和人工智能，是科技前沿人士长期津津乐道的两大 " 新秀 "，而两者最核心的部分都是数据。从经历 Hadoop 的大力发展，到中期 Kafka、Spark 的异军突起，到现在 Flink 的强势突

大数据和人工智能，是科技前沿人士长期津津乐道的两大 新秀 ，而两者最核心的部分都是数据。从经历 Hadoop 的大力发展，到中期 Kafka、Spark 的异军突起，到现在 Flink 的强势突围，大数据已经成为各大企业、尤其是互联网公司的基础设施和企业应用的关键组件，同时也为 AI 技术的发展提供了强有力的保障。并且，AI 的持续发展反过来也在推动大数据的规模、实时性以及平台化的发展。

大数据和人工智能的技术都在不断革新，也逐渐渗透到各个领域，如个性化推荐、面部识别、语音识别、广告智能投放等。两者结合应用落地，需要新的技术架构能力，从边缘和核心云计算节点的同步上叠加升级，从而更多地做数据协同运算，以便支撑未来各种各样的智慧城市、车联网、物联网等技术的发展。

ArchSummit 全球架构师峰会（深圳站）大数据和 AI 结合的系统架构 专题邀请了腾讯、创临科技、Databricks 等大厂的一线专家来到现场分享，谈谈在各自领域如何结合业务场景，正确技术选型。

小编带你快速了解演讲详情：

1 分享议题：构建流批一体的开源机器学习平台 Alink

为了取得更好的业务效果，算法工程师们需要尝试更多更复杂的模型，需要处理更大的数据集，使用分布式集群已经成为常态；为了及时对市场的变化进行反应，越来越多的业务选用在线学习方式直接处理流式数据、实时更新模型。

演讲提纲：

平台简介

平台的应用场景

平台架构

流式应用案例

如何获取开源版本

你将收获：

流式机器学习场景的典型解决方案

通过开源版本，可以快速尝试

2 分享议题：Spark 3.0 与 Delta Lake 新特性与业务案例

Spark 3.0 将在 2020 年发布，其中包含了 Adaptive execution、Dynamic Partition Pruning、更好的深度学习支持等新功能。

Delta Lake 在过去的一年里在性能、易用性和计算引擎支持等方面有了很多提升。这个演讲会介绍主要的新功能和应用场景。

演讲提纲：

Spark 3.0 的新特性介绍

Delta Lake 新功能介绍

功能 / 特性的设计思路细节介绍

用户在使用过程中遇到的坑（案例），以及我们提供的解决方法

你将收获：

了解 Spark 3.0 和 Delta Lake 的最新功能和特性

了解升级到 Spark 3.0 和 Delta Lake 的收益和风险

了解 Spark 开源社区的未来发展方向和正在解决的问题

3 分享议题：腾讯万亿级 Elasticsearch 架构实践

腾讯在公司内部丰富的场景中大规模使用 ES，同时联合 Elastic 公司在腾讯云上提供内核增强版的 ES 云服务。大规模、丰富的实践场景，反推着腾讯在 ES 内核的稳定性、成本、性能等方面不断的进行演进。

演讲提纲：

ES 在腾讯的广泛应用：从电商级搜索到万亿级时序数据处理；

万亿级存储系统的架构设计；

电商级搜索服务的平台建设；

开源社区贡献及未来探索；

你将收获：

万亿级存储系统的性能 及 成本设计经验；

架构大规模、线性扩展的分布式系统的实践经验；

开源社区共建的经验。

大会还设置了数据中台、微服务、人工智能、大前端趋势等热门技术专场，邀请知名大厂一线大咖分享各自在技术实现过程中收获的经验和解决方案。大会目前 8 折优惠报名，限时立减 1760 元！详情可咨询大会票务经理灰灰：15600537884（同微信），查看大会更多内容可扫描下图二维码或点击【阅读原文】。