01 REALTIME INTERACTIVE VIDEO

视频从「看」
变成「玩」:
Xmax X2.0

960p·24fps·毫秒级重渲。API 约竞品 1/12。把视频从单向内容,做成可操作的交互界面。

$6/h vs $72/h CharX · ClothX · MoX iPhone 端侧 2026-07-17
02 OUTCOME

先报数字:交互门槛被砍开了


960p

24fps 实时画质

较 X1 的 480p
进入可用直播档

ms

毫秒级响应

流式自回归
边算边播

1/12

相对 Decart 成本

海外约 $6/小时
国内约 ¥20/小时

384

iPhone 端侧

16fps 本地推理
隐私与弱网兜底

摄像头流
→
统一多模态编码
→
逐帧重渲
→
Realtime API
→
可操作画面
03 PAIN

业务要的不是更漂亮的片,是当场能改


BEFORE · 生成式链路

直播变装卡死

  • 写 Prompt → 排队 → 出片 → 再剪辑
  • 90 分钟直播里几乎无实时窗口
  • Decart 实时 $0.02/秒,3 分钟 ≈ $3.6
  • 中小商家单次获客成本吃掉毛利
AFTER · 交互界面

像游戏引擎一样控画面

  • 摄像头 + 触控 + 指令同步驱动
  • 毫秒级换装 / 换人 / 换风格
  • 3 分钟试穿成本落到约 $0.3 量级
  • 可写进周级上线的立项书
04 WHAT

X2.0 是可操作视频界面,不是短片工厂


CHARX

实时换人

人变、背景尽量不动;表情与动作跟随原主体。

CLOTHX

实时换装

只换衣服;贴合体态与环境光,直播主场能力。

VIBEX

实时换风格

人加场景整体重渲:赛博、油画、二次元等。

MOX

触控交互

屏幕拖轨迹,静态主体被「捏活」成连续运动。

DIMX

次元互动

虚实融合召唤角色,手势可即时响应。

FREE

自定义模式

Prompt + 参考图自由组合,适合创意实验。

05 WHY

立项只认三条:延迟 · 单价 · 封装


延迟进交互区

  • 毫秒级闭环操控
  • 960p@24fps 云端
  • 端侧 384@16fps

单价进规模区

  • $6/h ≈ Decart 1/12
  • 国内约 ¥20/小时
  • 试穿从 $3.6 → ~$0.3

能力可组合

  • 五项标准能力
  • Free 自定义
  • 适合能力中台
直播互动变装
→
电商实时试穿
→
短剧现场改戏
→
文旅虚实导览
06 ARCHITECTURE

骨架:端到端流式重渲染


输入层

摄像头流
触控轨迹
文字指令
参考图资产

统一交互 + 流式核心

多模态编码
会话状态持久化
逐帧自回归生成
蒸馏 · 稀疏注意力 · FP8

输出层

云端 960p@24fps
端侧 384@16fps
Realtime 商用 API
直播 / 试穿接入

取舍很干脆:用「流式一致性」换「离线全局最优」。直播与试穿要的是当下可控,不是事后完美。

07 UNIT ECONOMICS

单位经济比榜单更早决定胜负


维度 Decart Lucy 实时 Xmax X2.0 架构含义
计费参考 $0.02 / 秒 · 720p $6 / 小时(海外) 约 1/12 成本
折合小时价 ≈ $72 / 小时 国内约 ¥20 / 小时 进入中小团队预算
3 分钟试穿 ≈ $3.6 ≈ $0.3 量级 可规模化投放
端侧能力 云端为主 iPhone 本地推理 隐私 / 弱网保险丝

先算单次会话毛利,再吹参数量。

评审会上只拍板三指标:延迟 · 成本 · 转化。不聊参数崇拜。

08 SETUP

半天跑通:AI 助手 + Realtime SDK


1

拿 Key

platform.xmaxai.com 申请 API Key

2

装 SDK

npm install @xmaxai/sdk

3

生成样板

Claude / Codex 写 connect + 摄像头绑定

4

先单能力

ClothX 或 CharX,别一上来堆 Free

5

压三数

首帧延迟 / 断线恢复 / 小时费用

models.realtime("x2.0") → getUserMedia → client.realtime.connect → set({prompt, image}) → disconnect()

09 PLAYBOOK

一场直播:主播实时换装闭环


主播推摄像头流 → 后台选 ClothX + SKU 参考图
场控点「下一套」→ 观众侧毫秒级换衣,口播不停
高热评论触发 DimX / Free → 话题峰值道具入画
复盘三数:停留秒数 · SKU 点击 · 单场 API 成本

生产纪律

  • 首版只开一个主能力
  • 参考资产版本化管理
  • 费用告警绑会话时长
  • Free 模式晚于稳态上线
10 INSIGHTS

三条洞见,指导后续选型


01

延迟即产品形态

画质收益递减后,能否在交互时延内完成「感知→操控→反馈」,决定视频是内容还是界面。

02

单位经济先决

$3.6 与 $0.3 是两套商业故事。选型先过会话毛利,再谈模型榜单。

03

端侧是保险丝

云端扛画质峰值,端侧扛隐私与弱网。iPhone 本地推理证明交互视频可离集群生存。

11 NEXT

本周口令:先做可玩的一场直播


1

注册并跑样例

打通 TypeScript Realtime 官方 Quick Start

2

实测 3 分钟试穿

选一个 SKU,记 ClothX 成本与首帧延迟

3

补齐护栏

Key 代理 · 会话超时 · 费用告警

4

三指标拍板

延迟 / 成本 / 转化 —— 不聊参数崇拜

视频正在变成可实时操控的界面。

门槛已砍到这周能动手。别再只做 Demo 截图——去接一场真直播。