郭一璞 发自 凹非寺

量子位 报道 | 公众号 QbitAI

要不大家现在都喜欢科技互联网公司呢。

如今每年春节，这些公司都是绞尽脑汁、争前恐后想给全国人民拜年、互动，发红包。

这不，BAT之后，今年快手夺得花魁：央视春晚期间，就壕砸10亿。

但可能你还不知道的是，快手雄心不止于发钱拜年获流量，还想借此机会一展技术实力和品牌。

不老说快手“土”嘛，大概也就是要用最前沿的黑科技玩法，让大家既要拿钱开心，也要玩得酷炫。

至于这些新技术新玩法跟红包的直接联系，我们也基本完整地打听到了方案。

这就一一解析。

注意，无论年龄、用户所在地、机型，都可以参与——快手为老铁都能互动操碎了心。

新年灯牌

如果你还没有为房间换上春节的装扮，可以考虑一下快手的「新年灯牌」特效：

在快手上拍摄视频，就可以在家中墙壁上打上春节祝福的动态灯牌，配上各种红灯笼等节庆装饰品，整间屋子都洋溢着过年的氛围。

办公场景中，也能一秒挂灯笼：

其中主要用到的是混合现实（MR）技术。该特效将春节元素与真实世界进行融合，结合虚实遮挡、虚拟灯光、平面贴合给用户提供新的交互体验。

与AR、VR不同，MR通过实时的空间计算和场景理解，将物理现实与数字世界无缝地混合在一起，创造了一个虚拟和物理对象共存，并且能够实时交互的环境，从而带来极具沉浸感的用户体验。

MR结合了虚拟和现实，在虚拟的3D空间内实时运行，需要结合真实世界的位置数据进行，借助空间映射和理解，让机器认识到周边的边界、表面、照明等空间光影信息，结合空间的相关对象，创建出混合的世界，再输入特效素材。

这样，虽然人看到的是在真实世界上多了一些虚拟素材，但实际上系统感知并理解了整个空间。

因此，目前MR实现所需要的硬件成本比较高，仅仅是输入设备，就可能要用到ToF摄像头、3D结构光等特殊设备，比如微软做了HoloLens 2这款MR头显，人民币价格27388元。在一些没有高端相机模组的手机上是很难实现的。

快手技术团队介绍，这次用在快手App上的MR算法依靠单摄像头采集图像数据，结合深度学习和传统的立体几何算法，除可准确估计相机的位置，还实时输出了高质量的场景深度数据和法向、Mesh等3D信息。

这样就能将MR效果十分贴合的融合到真实世界图景中了。

为了保证模型能在手机端运行，快手技术团队在保证预测质量的情况下，对模型的计算量进行了大幅缩减，这样，配置不高的手机也能成功运行模型了。

有了这样的MR技术基础，除了新年灯牌特效之外，快手上还能实现许多种特效，比如利用3D打光给真实场景添加虚拟光，演唱会的氛围立马就有了：