Seko – 商汤科技推出的AI视频创作智能体

AIGC行业资讯21小时前发布 zhang
1 0

一、概述与定位

Seko商汤科技推出的AI视频创作智能体(AI Video Agent),核心面向短剧、漫剧和短视频创作者,主打”一句话出成片””一人一剧组”的全流程AI视频生产。它不是单一的视频生成器,而是将剧本理解→分镜生成→角色一致性控制→视频制作→配音配乐→剪辑字幕→多剧集连载整合在一个系统中的端到端创作平台。

Seko于2025年7月上线,2025年12月发布2.0版本,带来两项行业级技术突破——SekoIDX角色一致性引擎SekoTalk多人对口型技术。截至2026年5月,平台已聚集超70万创作者,漫剧产出占比超70%,成为国内AI短剧/漫剧赛道的头部工具。

Seko – 商汤科技推出的AI视频创作智能体
核心信息 详情
产品名称 Seko
出品方 商汤科技(SenseTime)
产品定位 AI视频创作智能体 / AI漫短剧批量生成平台
上线时间 2025年7月
当前版本 Seko 2.0(2025年12月发布)
用户规模 超70万创作者(2026年5月数据)
核心技术 SekoIDX(角色一致性)+ SekoTalk(多人对口型)
平台形态 Web端在线工具
定价模式 订阅制+积分制
技术底座 商汤自研大模型+寒武纪芯片(全国产技术栈)

二、行业背景:AI视频创作的两大行业痛点

Seko切入的是AI视频创作中最痛的两个技术难题:

痛点 行业普遍问题 Seko的解法
角色一致性 AI生成视频中,同一角色在不同镜头、不同剧集里”变脸””换衣服”,无法支撑连续剧叙事 SekoIDX引擎,跨镜头/跨场景/跨剧集角色形象稳定,80集以内相似度约92%
多人对口型 传统数字人技术只能处理单人对口型,多人对话场景口型错位、声画不同步 SekoTalk,业内首个支持2人以上(3人及以上)同时对口型,精准声形同步
多剧集生产 单集生成容易,但百集连续剧需要角色、场景、道具全局统一,人工协调成本极高 支持100集以内剧本连贯创作,Agent智能调度全局资产
全流程割裂 剧本、分镜、生成、配音、剪辑分散在不同工具,流程繁琐效率低 端到端整合,从剧本到成片一条链路完成
制作成本高 传统50集短剧需要团队3个月,成本数十万到百万 AI生产周期缩短80-90%,成本大幅降低

三、产品架构与核心模块

Seko采用”无限画布+Agent智能调度+双引擎技术底座“的架构:

Seko 产品架构
│
├── 无限画布(Infinite Canvas)—— 2026年6月全新升级
│   ├── 节点式可视化创作界面
│   ├── 角色/场景/道具/分镜节点关联
│   ├── 参考图与提示词绑定
│   └── 全流程可视化编辑
│
├── Agent智能调度层
│   ├── 剧本理解与拆解
│   ├── 分镜自动生成(最多120个分镜/次)
│   ├── 多剧集上下文管理(100集以内)
│   ├── 人物/场景/道具全局关联
│   └── 妆造随场景自动变化
│
├── 双核心技术引擎
│   ├── SekoIDX:角色一致性引擎
│   └── SekoTalk:多人对口型引擎
│
├── 内容生产层
│   ├── 图生视频(长图生影像,不受时长限制)
│   ├── 自动配音(60种自然音色)
│   ├── 自动BGM配乐
│   ├── 自动字幕生成
│   └── 转场与剪辑
│
└── 自动化生产扩展
    └── SekoClaw(小龙虾):接入OpenClaw,24小时无人值守批量生产

四、核心技术详解

4.1 SekoIDX:角色一致性引擎

这是Seko最核心的技术壁垒,解决了AI视频创作中”角色变脸”的行业难题。

技术原理

  • 在扩散模型的高噪阶段引入”负参考图“机制
  • 为每个人脸分配独立的ID和编码特征,强制将特征输入到下一帧
  • 如果下一帧不按该特征解码,即被判定为错误并修正
  • 既保证角色在多剧集、跨分镜中的一致性,又避免内容与参考图过度相似(避免”复制粘贴”的呆板感)
  • 响应不同表情、姿态、场景指令时依然保持高度稳定

性能指标

  • 支持80集以内剧集角色稳定
  • 跨集角色相似度约92%
  • 早期测试中,10集连续创作角色视觉一致性达98%
  • 支持特写、远景、不同角度下的外貌特征和神态稳定

行业意义:这是AI视频从”单条生成”走向”连续剧生产”的关键技术突破,使得百集量级的AI短剧/漫剧量产成为可能。


4.2 SekoTalk:多人对口型引擎

业内首个支持2人以上同时对口型的技术,攻克了多人交互场景的音画同步难题。

技术特点

  • 支持同一画面内3人及以上群像戏份的口型同步
  • 配音与人物嘴型高度贴合,消除口型错位穿帮
  • 支持各种人物比例(真人、动漫、Q版等)
  • 支持多语言口型匹配
  • 适用于日常对话、激烈争吵、集体报数等复杂场景
  • 长图生成影像并匹配口型,不受时长限制

传统方案的局限:传统数字人技术只能处理单人对口型,多人场景需要逐人单独处理再合成,效率低且容易出现不同步。SekoTalk实现了多人场景”一气呵成”,无需后期反复调整口型细节。


4.3 无限画布(Infinite Canvas)

2026年6月官网更新的核心功能,打造全流程可视化创作体系。

核心能力

  • AI自动生成分镜工作流:输入小说/剧本,智能拆解剧情,自动生成分镜节点
  • 节点式关联:角色、场景、道具、分镜以节点形式在画布上关联,参考图与提示词绑定
  • 全局资产调度:不同剧集中人物、场景、道具灵活关联,人物妆造随场景自动改变
  • 可视化编辑:创作者可以在画布上直观地审核和修改每个环节
  • 复制分镜:支持分镜复制,快速复用相似场景

4.4 SekoClaw(小龙虾):自动化生产

Seko的自动化扩展能力,接入OpenClaw等自动化平台。

功能特点

  • 自然语言指令驱动智能体24小时不间断工作
  • 实现规模化、无人值守的批量视频生产
  • 适合内容工作室、MCN机构、漫剧量产团队
  • 可理解为”AI视频工厂”的自动化流水线

五、核心功能详解

5.1 剧本智能理解与分镜生成

工作流程

  1. 输入小说、剧本或故事大纲
  2. AI精准拆解复杂剧本,生成详细分镜和角色台词
  3. 一次最多生成120个分镜图,每个分镜对应一段内容描述
  4. 创作者可以快速塞入3-4集内容
  5. 在无限画布上可视化审核和调整分镜

核心优势:剧本拆分是影视制作的核心难点,Seko的AI可以自动完成从文字到分镜的转换,大幅降低前期策划成本。


5.2 多剧集连续生成

支持100集以内剧本的连续创作,具备超长上下文管理能力。

核心特点

  • Agent智能调度不同剧集中的人物、场景、道具
  • 跨集相同资产智能复用,保持统一
  • 人物妆造随剧情场景自动改变(如换装、换发型)
  • 续集创作:回到策划页点”+”新增集数,AI自动延续剧情+继承角色场景
  • 支持一口气量产百集短剧

5.3 图生视频与角色驱动

  • 支持长图生成影像,并自动匹配口型,不受时长限制
  • 基于分镜图和角色参考图生成动态视频
  • SekoIDX保证角色在动态视频中的形象一致性
  • SekoTalk保证口型与台词同步

5.4 自动配音、配乐与字幕

配音

  • 内置60种自然音色
  • 精准创建角色画面、台词与配音,确保各元素高度匹配
  • 支持多角色对话自动分配音色

配乐

  • 自动BGM配乐,根据剧情情绪匹配背景音乐
  • 支持自定义音乐上传

字幕

  • 自动生成字幕,与配音同步
  • 支持字幕样式调整

5.5 实时交互与迭代优化

  • 创作过程中可实时预览和修改
  • 分镜修改免费,不消耗积分
  • 支持对每个环节的细微处进行调整
  • 创作者主要做两件事:审核和修改

六、典型使用流程

场景一:AI漫剧百集量产(工作室模式)

  1. 输入剧本:将小说或剧本大纲输入Seko
  2. AI拆分镜:AI自动拆解剧情,生成最多120个分镜图,覆盖3-4集
  3. 审核分镜:在无限画布上审核分镜,调整角色、场景、构图(修改免费)
  4. 设定角色:上传或生成角色参考图,SekoIDX锁定角色形象
  5. 生成视频:确认分镜后一键生成视频(消耗积分),SekoTalk自动匹配口型
  6. 配音配乐:AI自动配音(60种音色)+ BGM + 字幕
  7. 导出成片:几十秒出片段,审核后导出
  8. 续集生产:新增集数,AI自动延续剧情、继承角色场景,循环生产
  9. 自动化扩展:接入SekoClaw,24小时无人值守批量生产

效率对比:传统50集短剧需要团队3个月,Seko 2.0可缩短80-90%,实现”一人一剧组”。

场景二:短视频创作者快速出片

  1. 输入创意:用一句话描述视频创意或上传脚本
  2. AI生成分镜:自动生成分镜和画面
  3. 选择风格:选择真人、动漫、古风等风格
  4. 一键生成:生成视频+配音+字幕
  5. 导出发布:直接用于抖音/快手/视频号

场景三:品牌营销视频

  1. 输入品牌 brief:产品信息、卖点、目标受众
  2. AI生成创意分镜:多个创意方向可选
  3. 生成视频:品牌视频、产品演示、广告片
  4. 多版本迭代:快速生成多个版本进行A/B测试

七、定价与使用方式

定价模式

  • 订阅制+积分制
  • 分镜修改免费,不消耗积分
  • 反复”生成视频”才消耗积分
  • 新手省钱技巧:先定稿分镜再生成视频,能省50%+积分

注意:具体订阅价格和积分费率在公开检索中未完全披露,建议以官网实际展示为准。

使用方式

  • Web端在线使用:浏览器访问官网,注册登录即可
  • 无需下载安装软件
  • 无需本地GPU,全部云端计算
  • 支持中文界面

八、技术架构与国产化

Seko采用全国产技术栈

技术层 组件
芯片层 寒武纪(Cambricon)AI芯片
模型层 商汤自研视频生成大模型
核心引擎 SekoIDX(角色一致性)+ SekoTalk(多人对口型)
应用层 Seko 2.0 无限画布创作平台
自动化层 SekoClaw + OpenClaw 自动化调度

推理成本优化:商汤团队将推理成本压缩了一半,使得漫剧大量调用在经济上可行。


九、核心优势

1. 角色一致性行业领先,真正支撑连续剧生产

SekoIDX技术解决了AI视频”变脸”的核心痛点,80集以内角色相似度92%,10集连续一致性98%,是目前行业内少数能真正支撑百集连续剧生产的AI视频工具

2. 业内独有的多人对口型技术

SekoTalk是业内首个支持2人以上同时对口型的技术,3人及以上群像戏也能精准声画同步,这在对话密集的短剧/漫剧中是刚需功能,竞品难以匹敌。

3. 端到端全流程整合,从剧本到成片一条链路

不是单一的视频生成器,而是剧本理解、分镜、生成、配音、配乐、字幕、剪辑全流程整合,创作者不需要在多个工具间切换。

4. 无限画布可视化创作,降低操作门槛

2026年6月升级的无限画布,以节点式可视化界面呈现整个创作流程,角色/场景/道具/分镜直观关联,创作者可以像搭积木一样组织内容。

5. 百集级多剧集生产能力

支持100集以内剧本连贯创作,Agent全局调度角色/场景/道具,续集自动继承资产,真正实现”一口气量产百集短剧”。

6. 商汤技术背书,全国产技术栈

商汤科技是国内AI视觉领域的头部企业,技术积累深厚。Seko采用寒武纪芯片+商汤自研模型的全国产技术栈,供应链安全可控。

7. 70万创作者验证,漫剧产出占比超70%

平台已有超70万创作者,漫剧产出占比超70%,经过大量实际生产验证,产品成熟度和稳定性有保障。

8. 自动化生产扩展,适合规模化团队

SekoClaw接入OpenClaw后可实现24小时无人值守批量生产,适合内容工作室和MCN机构的工业化量产需求。

9. 分镜修改免费,降低试错成本

分镜阶段的修改不消耗积分,创作者可以充分打磨创意后再生成视频,避免反复生成浪费积分。


十、局限性与注意事项

1. 视频生成质量仍有提升空间

虽然角色一致性和口型同步行业领先,但AI生成视频在画面精细度、动作自然度、复杂物理效果等方面与真人拍摄仍有差距,适合漫剧、短剧等对画面要求相对可控的场景,高端影视级制作仍需人工后期。

2. 积分消耗需要合理规划

视频生成消耗积分,反复生成会快速消耗额度。创作者需要养成”先定稿再生成”的习惯,否则成本可能超出预期。

3. 剧本质量决定成片上限

AI是基于输入剧本进行创作的,剧本本身的故事质量、逻辑、人物塑造直接决定最终成片质量。Seko不能替代好的编剧,”垃圾进、垃圾出”的规律依然适用。

4. 复杂叙事和情感表达仍需人工把控

AI在处理复杂情感转折、细腻人物表演、隐喻性镜头语言等方面仍有局限,需要创作者在分镜和审核环节人工干预和调整。

5. 版权和合规风险需关注

AI生成内容的版权归属、训练数据合规性、角色形象与真人/已有IP的相似度等问题,在商业化使用时需要仔细评估,避免侵权风险。

6. 定价透明度有待提升

公开资料中具体的订阅价格和积分费率不够清晰,新用户可能需要实际注册后才能了解完整定价体系。

7. 对网络和云端依赖较高

全部计算在云端完成,对网络稳定性有一定要求,大规模批量生成时可能遇到排队或速度波动。

8. 学习曲线虽然低但仍存在

虽然比传统视频制作门槛低很多,但无限画布、分镜管理、角色设定等功能仍需要一定的学习成本,完全零基础用户可能需要几个项目才能熟练掌握。


十一、与同类产品对比

维度 Seko(商汤) Pixmax Runway Pika 即梦(字节)
核心定位 AI短剧/漫剧批量生成Agent AI短剧平台 创意短片/艺术创作 社交分享/快速演示 通用AI视频生成
角色一致性 极强(SekoIDX,80集92%) 强(分步控制三视图)
多人对口型 ✅ 业内独有(3人+) 部分 部分
多剧集生产 ✅ 100集连贯 部分
剧本→分镜 ✅ 自动拆解 部分
无限画布 ✅ 节点式 部分
自动配音配乐 ✅ 60种音色 部分 部分
自动化批量生产 ✅ SekoClaw 部分
画面质量 中高(漫剧优化) 中高 高(电影感) 中高
适合场景 短剧/漫剧量产、品牌视频 短剧创作 艺术短片、精细后期 社交短视频 通用短视频
国产化 ✅ 全国产(寒武纪+商汤) 国产 海外 海外 国产

:以上对比基于各产品公开信息整理,实际功能以各产品官方最新版本为准。


十二、适用人群

最适合

  • 漫剧创作者:Seko漫剧产出占比超70%,是漫剧创作者的首选工具,角色一致性和多人对口型完美匹配漫剧需求
  • 短剧团队/工作室:需要百集级量产的短剧团队,Seko可将制作周期缩短80-90%,实现”一人一剧组”
  • MCN机构/内容工厂:需要规模化、批量化生产内容的机构,SekoClaw可实现24小时无人值守生产
  • 网文作者/IP运营方:将小说IP快速转化为漫剧/短剧,验证IP影视化潜力
  • 品牌营销团队:快速生成品牌视频、产品广告、营销短片,多版本A/B测试
  • 短视频创作者:需要高效产出短视频内容的个人创作者

可能不适合

  • 高端影视制作团队:对画面质量、镜头语言、演员表演要求极高的院线级影视项目,AI生成仍无法替代真人拍摄和专业后期
  • 完全不懂叙事的纯新手:虽然操作门槛低,但剧本创作、分镜逻辑、叙事节奏仍需要基本的内容创作能力
  • 对成本极度敏感的个人用户:积分制下,大量生成视频可能产生较高费用,需要合理规划
  • 需要精细后期调色的项目:Seko的剪辑和后期能力相对基础,复杂调色和特效仍需专业后期软件
  • 对版权合规要求极高的商业项目:AI生成内容的版权问题在法律上仍有灰色地带,高风险商业项目需谨慎评估

十三、总结

Seko是商汤科技推出的AI视频创作智能体,核心定位是”AI漫短剧批量生成平台”。它以两项行业级技术突破——SekoIDX角色一致性引擎SekoTalk多人对口型技术——解决了AI视频创作中最核心的两个痛点,使得百集级连续剧的AI量产成为可能。

它的核心差异化在于:

  1. 角色一致性行业最强:SekoIDX保证80集以内角色相似度92%,真正支撑连续剧叙事
  2. 多人对口型业内独有:SekoTalk支持3人及以上同时对口型,对话密集场景无压力
  3. 端到端全流程整合:剧本→分镜→生成→配音→配乐→字幕→剪辑,一条链路完成
  4. 百集级多剧集生产:100集以内连贯创作,Agent全局调度资产
  5. 无限画布可视化:节点式创作界面,降低操作门槛
  6. 自动化生产扩展:SekoClaw实现24小时无人值守批量生产
  7. 全国产技术栈:寒武纪芯片+商汤自研模型,供应链安全
  8. 70万创作者验证:漫剧产出占比超70%,产品成熟度有保障

它最适合漫剧创作者、短剧团队、MCN机构、网文IP运营方和品牌营销团队,尤其是需要规模化、批量化生产视频内容的场景。对于传统需要数十人团队、数月周期、数十万成本的短剧制作,Seko可以将周期缩短80-90%,实现”一人一剧组”的生产效率。

但需要明确:Seko是生产工具,不是”一键出爆款”的魔法。剧本质量决定成片上限,AI负责执行和提效,创意、叙事、审美仍需要创作者把控。同时,AI生成视频在画面精细度和复杂情感表达上仍有局限,高端影视级制作仍需人工补充。

正如商汤Seko负责人王子彬所说:”视频生成是生产工具,AI会加剧分化”——掌握AI工具的创作者将获得数量级的效率提升,而拒绝使用的创作者将在内容产能上被拉开差距。如果你在做漫剧、短剧或批量视频内容,Seko是目前这个赛道最值得深度体验的工具之一。

© 版权声明

相关文章

堆友更新