腾讯云物联网音视频 (IoT Video) 与实时互动物联网版 (RTC-IoT) 产品概要

一、 产品定位与核心亮点

物联网音视频 (IoT Video) 与 实时互动物联网版 (RTC-IoT) 是腾讯云推出的面向消费电子与物联网领域的音视频一站式解决方案。

• 技术定义：基于腾讯云音视频 PaaS 能力（亚太地区排名第一），提供从设备端 SDK、音视频传输、云端存储到应用层（小程序/APP）开发的全链路服务。
• 核心差异化卖点：
  • 微信生态原生互通：业界首家实现小程序 P2P 直播，支持微信强提醒与腾讯云微通话 (TWeCall)，无需额外下载 APP。
  • 自研传输协议：采用 XNTP 及 X-P2P 技术，实现300~400ms 低延时与80%+ P2P 穿透成功率。
  • 全链路降本：通过 P2P 传输、云存储转码及设备端轻量化算法，显著降低运营成本。

二、 产品应用场景

针对消费电子与物联网设备制造商，解决以下场景痛点：

三、 应用框架和功能介绍

1. 功能框架与架构

• 端侧接入：支持 Linux/RTOS/Android 全平台，覆盖 26个主流芯片平台（包括海思、瑞芯微、星宸、乐鑫等）。
• 传输层：支持 P2P、TRTC、GB28181、RTMP、MQTT 等多种协议。
• 应用层：提供 Turn-key 零代码小程序、APP SDK、微信小程序插件。
• AI 与分析层：集成 TWeSee（视频语义理解）与 TWeTalk（AI 对话）。

2. 硬核指标

• 连接性能：300~400ms 低延时；80%+ P2P 穿透成功率（对比传统方案 <20%）。
• 成本优化：音视频传输成本平均降低 50%；云存储空间压缩 50% 以上，综合存储成本节省 20%+。
• 开发效率：小程序集成开发工作量缩短至 一周左右（传统方案通常超过一个月）。
• 规模数据：服务设备规模 2亿+；日均处理消息量 50亿+；日均 API 访问量 5亿+。

3. 产品优势（全量提取）

• 视频连接可靠性：
  • 自研 XNTP 传输协议，稳定低延迟。
  • 多路径并发连接（P2P 与转发同时进行），动态优选最优链路。
  • 支持 UDP/TCP/直连/中继多路径传输通道。
• 云存储方案：
  • 设备端 SDK 切片上传，云端自动转码。
  • 转码完成后自动更新索引，删除旧的大码率文件，实现内部降本。
• 微信小程序能力：
  • 无需下载 APP：支持监控、回看、语音通话、云台控制。
  • 社交分享：一键分享至微信好友、群聊、朋友圈。
  • 高触达率：借用微信入口进行告警通知，控制损失。
• TWeCall（微通话）能力：
  • 设备一键呼叫微信，秒级响应。
  • 支持 Linux/RTOS/Android，适用于低功耗、轻量化系统，资源占用低。
  • 提供设备端和小程序 SDK，无需额外搭建服务器。
• TWeSee（微见）AI 分析：
  • 视频浓缩：将日均 2 小时+ 长视频浓缩为 1-2 分钟 短视频。
  • 视频摘要：基于语义理解输出文本摘要（如“婴儿在床上爬行”）。
  • 视频搜索：支持自然语言搜索目标片段。
  • 智能识别：支持人、车、宠物、包裹、火焰、烟雾等目标检测。
• RTC-IoT AI 对话：
  • 结合混元大模型，实现实时音视频多模态交互。
  • 支持智能打断、TTS 语音合成及第三方 LLM 接入。
  • TVoiceWake：支持离线语音唤醒词与离线命令字，支持自定义唤醒词。
• 3A 音频增强：
  • 在 APP 端完成设备侧 3A 算法，降低设备资源消耗。
  • 自研 IoT Video AEC 算法，客观指标（SER/ERLE）优于其他算法。
• 内容服务：
  • 集成 QQ 音乐（提供设备专用 API）、阅文集团等内容源。
  • 支持微信支付、腾讯地图、腾讯健康等应用快速集成。

4. 荣誉背书

• 腾讯云音视频 PaaS 亚太地区排名第一（来自原文图表标注）。
• 已服务超过 千万台 智能视频设备。

四、 典型案例

1. 凯迪仕 (Kaadas)

• 背景：专注智能锁领域，面临消费者免安装 APP 诉求、弱网通话质量差、告警触达率低及音视频成本过高的痛点。
• 解决方案：
  • 接入业界首家小程序 P2P 直播能力，实现免 APP 使用。
  • 调优采集传输策略，在 Wi-Fi 芯片上做 P2P 预处理缩短出图时间。
  • 启用微信强提醒功能。
• 成效：
  • 旗舰型号 K20 Pro Max 半年内出货 50万台。
  • 全系切换至腾讯云，产品运营成本平均下降 35%。
  • 形成智能门锁行业标杆。

2. TWeSee 应用案例 - 智能门锁包裹事件提醒

• 背景：24 年智能门锁趋势向双目/三目摄像头发展，需利用多摄像头信息提供更多价值。
• 解决方案：基于门前正前方与下方双视角视频，进行视频语义解析。
• 成效：
  • 支持京东、顺丰、美团、盒马等快递员识别。
  • 支持外卖袋、快递盒等包裹识别。
  • 实现包裹放置/被拿走时的精准消息推送。

3. TWeSee 应用案例 - IPC 厂商

• 背景：某 IPC 厂商需解决用户人工查看所有事件视频繁琐、无法按需获取信息的问题。
• 解决方案：集成 TWeSee 视频摘要、目标检测、搜索能力。
• 成效：
  • 输出适合 App 展示的精简摘要文本（如“黑白相间的猫跑过”）。
  • 支持按人、车、宠物、包裹等类别搜索。
  • 通过实时语义摘要精准推送事件，用户无需查看所有录像。

4. 已服务客户列表

• IPC 客户：Haier、Midea、uniview 宇视、TOPSEE、aJhua TECHNOLOGY、海马爸比、华来科技、五兴科技 WUXING TECHNOLOGY、GWELLTIMES 枝威时代、6。
• 门锁、门禁及儿童手表客户：Kaadas 凯迪仕、3G Electronics、DESSMANN 德施曼、凡美智联、伴生活、Haotaitai、LOCKIN、JimiloT。
• 生态合作伙伴：DOYU、企鹅电竞、虎牙直播、微视（原文图表中提及的直播/视频平台）。