首次揭秘!​春晚活动下快手实时链路保障实践

摘要:本文由快手开发工程师刘建刚分享,主要介绍春晚活动下快手实时链路保障实践。内容主要包含以下四部分:

  1. 快手 Flink 简介
  2. 春晚实时保障方案
  3. 春晚实时大屏
  4. 未来规划

Ti$ H D T Hps:点击「阅读原文」链接可查看作者原版 PPT 及分享视频~

一、快手 Flink 简介

我们首先来` E - r - B G l a看一下快手的实时计算架构图。主要分为4个部分,包括数据接入、数据计算、数据应用和数据展示。各层职责分明、衔接顺畅,方便用户开发。

首次揭秘!​春晚活动下快手实时链路保障实践

快手的 Flink 集群规模大概有 3000 多台h ; i机器,日处理条目数为20万亿,峰值为38亿条。主要应用场景包含以下四类:

  • 实时 SQLB $ O k 平台,这是 Flink 托管的一个产. C i a g ] P Q 9品化的 SQL 平台。
  • 短视频、直播等指标的实 R V p 9时计算8 y 2,涵盖了公司的主要业务和产品
  • 机器学习的数据预处理,8 ) 1支撑着快手广告等各种模型的训练。
  • 快手所有的日志拆分、同步等实时的数据流。

首次揭秘!​春晚活动下快手实时链路保障实践

二、