拍乐云“实时标注”技术助力少儿编程、在线金融等行业场景实现高效互动

前言

最近几年，STEAM教育一下子被推到风口，变得越来越普及，尤其是线上“少儿编程”教育公司也是遍地开花。学习编程能够强化孩子的逻辑思维能力，培养孩子的专注力和细心度，同时还能够提高孩子的抽象思考能力和解决问题能力。而线上少儿编程课堂在产品交互上的要求更高，除了满足老师和学生能够彼此视频聊天、共享课件以外，还需要实时同步老师和学生之间大量复杂的编程操作环节。如何实现强互动的编程操作课堂、打造更好的编程学习体验，成为了教育科技公司的难题。

实时标注的应用场景

试想一下以下场景：在一个1V1的编程课堂中，老师通过屏幕共享进行实时教学，学生通过屏幕共享进行编程操作。在整个过程中，老师需要对共享的编程内容进行重点、难点的标注，也需要及时指出学生的实际操作中错误的地方。而目前市面上的实时通信云服务中，仅仅提供了基础的音视频通话和屏幕共享能力，在屏幕共享或视频通话的过程中，没有办法对内容进行实时标注，无法满足更贴合少儿编程场景的互动需求。针对这一痛点，拍乐云Pano“实时标注”技术给出了很好的产品解决方案。

除了少儿编程在线课堂场景之外，实时标注技术还有更丰富的应用场景和想象空间。

• 实时标注让理财讲解更聚焦：当银行理财经理或视频客服通过屏幕共享给客户进行在线产品演示时，会对一些重点信息做实时标注，比如收益率、产品特点、操作步骤等，这种在线的高效讲解更够提升人员效率和服务体验。
• 实时标注让美术教学更细致：在线上美术课堂中，美术老师可以直接在设备屏幕上对学生绘画内容进行标注，提出细节上的改进建议。通过实时标注技术可以增进师生的互动性，为在线美术教育机构打造更好的用户体验。
• 实时标注让会议协同更高效：当一群人通过会议软件进行在线头脑风暴时，发言人通过共享PPT文档来引导讨论。过程中发言人和其他参与人都可以快速表达自己的观点，并通过终端设备对讨论材料进行实时标注，同步给所有人。

实时标注的技术难点

实时标注基于具体的标注内容之上，需要确保每一端的标注都正确显示在对应的内容和位置上。一方面我们要将上层标注和下层内容视为一个整体，另一方面又要将上层标注和下层内容分开处理，有分有合。在实时音视频系统中，主要有屏幕共享流、视频通话流、文档共享流三类内容可结合标注，这三类内容各有特点，标注的实现细节也会有差异。

• 标注层和内容层是不同的两层，用户使用的时候， 会同时需要标注和操作内容层，所以在设计上就需要用户操作可以自如地在标注层和内容层之间切换。
• 内容层的大小、位置、缩放比例等可能会随时发生变化，为保证标注和内容的一致，内容层的所有变化必须被实时侦测，并且自适应调整标注层。
• PC端、iOS端、Android端的屏幕大小和比例各有不同，通常UI设计上也会有不同的layout，所以标注层需要针对不同的layout自动适配。

拍乐云实时标注方案优势

1、全平台支持，快速接入

拍乐云提供简单易用的实时标注接口，可满足用户开发基于实时视频和实时共享场景的内容标注需要，已支持Windows端、Mac端、iOS端和Android端。开发者只需要传入对应视频或共享流的标识信息，对应窗口信息，设置标注工具和有关属性既可快速开启实时标注。

2、超低时延，极致压缩

基于拍乐云自研白板引擎，标注信息可实现毫秒级实时同步，弱网环境下依然流畅，提供极致互动体验。基于白板的数据特性，采用自定义的高效数据压缩算法，也可大大节省传输流量。

3、支持云端录制，保障数据安全

可同步录制实时互动过程中的音视频通话、屏幕共享、互动白板和实时标注数据，用户可根据自身需要选择录制方式，满足课程回放、客服质检等应用需求。同时，采用加密通道传输，确保所有数据的安全性和完整性，打造真正可靠的互动通信服务。

4、更多能力的互动白板服务

除了基于实时视频通话和屏幕共享的实时标注外，拍乐云还提供完整的互动白板产品，支持多通道轨迹同步、文档转码共享、动效课件、多种教具切换、多样化工具栏、独立多白板、激光笔和视角跟随等多个能力，适用于教学、协同、娱乐等场景。

目前，拍乐云已提供实时标注SDK，支持Windows端、Mac端、iOS端和Android端。如需集成和体验Demo，请咨询官网客服，获取相应开发文档。在开发过程中遇到的任何问题，我们会提供技术支持服务，随时随地敏捷响应。