滤镜/特效的定义、抖音与 Snapchat 的创作工具差异、剪映的立项与崛起、特效开放平台生态、字节技术中台的价值与挑战以及 AI 对特效行业的重塑一、滤镜、特效与 AR 的概念辨析1.1 用户视角与行业命名行业中许多人把滤镜和特效混为一谈。Instagram 直接把特效叫做filtersnapchat 官方名称是Lens镜头之意但即便 Snapchat 反复强调用户始终叫它Snap filter。这是行业内一个长期存在的认知偏差。1.2 技术视角的定义概念技术定义典型应用滤镜 (Filter)色彩、画面风格的简单处理调色、风格化特效利用 AI 检测/识别画面元素将虚拟资产叠加到现实场景人脸贴纸、AR 场景、玩法交互狭义 AR仅指后置摄像头扫描平面、叠加虚拟物体平面追踪广义 AR不区分前后置摄像头只要用摄像头理解真实世界并叠加虚拟资产即为 AR人脸特效、场景特效、商品特效特效在本质上属于现实增强AR的一种形式二、Snapchat 与字节的两次关键收购Luxury vs. Faceu2.1 Snapchat 收购 Luxury2014 年前后乌克兰Luxury 团队背景由乌克兰连续创业者创立积累原始资本后创办 Luxury团队从乌克兰顶级名校的编程竞赛获奖者和国家奥林匹克竞赛前几名中招募约十几个人业界最早做 AR 系统的公司之一且渲染效果层面做得最好收购影响Luxe 的 Lens 系统成为 Snapchat 整个多媒体处理的核心引擎极大增强了 Snapchat 在内容创作与用户表达方面的底层基础架构兔彩虹成为 Snapchat 的标志性案例——后续多年用户提到 Snapchat 第一个反应就是兔彩虹2.2 字节收购 Faceu2017 年Faceu 团队特点重视创意与设计团队本身很懂用户交互和体验收购后组成字节影像部门后续孵化了 Faceu、轻颜、醒图等知名产品强项在于产品设计能力和设计团队2.3 两次收购的异同维度Luxury → SnapchatFaceu → 字节相同点都被作为创作底层业务的支柱同技术补强极大补强 Snapchat 底层架构与字节已有技术有互补/重合团队特质极客文化单兵作战能力最强产品形态设计强懂时尚潮流代表作品兔彩虹、各种 LensFaceu、轻颜、醒图Luxury 是极客公司CEO 是乌克兰编程竞赛第二名Faceu 是产品/设计驱动型公司两者气质截然不同。2.4 Snapchat 的另一笔关键收购BitmojiBitmoji 的战略价值snap 历史上最成功的收购没有之一渗透到 Snapchat 所有产品功能中头像、贴纸、3D 表情、地图状态群组场景下用 Bitmoji 形象做群像合影把 Bitmoji 玩出了花既是工具属性又定义了整个产品的调性抖音仔仔 vs. Bitmoji抖音仔仔最初是社交团队主导目标是用作头像/状态表达。后续可延伸到直播虚拟开播、不露脸直播、小游戏等场景。豆包里的形象就复用了抖音仔仔的设计三、Snapchat 变小孩特效一个现象级爆款案例3.1 技术起源与时间线2016 年 Snapchat 投入小团队研究GAN生成对抗网络——本质上是 AIGC 的一个分支2017–2018 年因技术局限效果不理想2019 年技术成熟后推出变小孩、变老、变男女一组特效变小孩是最火的一个3.2 商业影响Snapchat 当时日活不到 2 亿几个月内拉了几千万日活股价从最低点开始飙升Instagram、Twitter 上大量用户把它用在漫威角色、《老友记》角色照片上形成出圈传播3.3 爆款公式全新体验 保留个人特征 趣味性 → 名人/影视角色二次创作 → 出圈传播 → 用户问这是哪个平台 → 下载 → DAU 暴涨好的创作工具/特效玩法对整个创作生态的影响是非常巨大的。四、抖音特效 vs. Snapchat4.1玩法与交互的重视程度Snapchat/Instagram特效以装饰为主让人变好看、加帽子/眼镜——本质是点缀抖音/TikTok大量交互体验和玩法案例控雨特效手势识别→凝固雨滴→随手的运动前后移动。技术简单但抖音是业界最早把这种强交互玩法实现出来的骑上我的小摩托2019游戏体验型特效蓝线挑战画面中蓝线扫过的部分固定住用户在蓝线下方运动上方呈现千奇百怪的效果——本质上是凝固时间 创意玩法4.2多人体验Snapchat 是私信平台特效多为单人体验抖音支持两人/三人/五人多人玩法多人一起玩会产生奇妙的化学反应神烦狗特效2019本来只能一个人用结果两个用户父子/兄弟/闺蜜玩出一个人甩头把特效甩到另一个人头上的玩法4.3 与内容生态的深度绑定Snapchat 的特效是独立小工具玩一下就过抖音的特效服务于提高投稿率、提高内容质量、提高 VV最终带来更多商业化变现再投入新算法研发——闭环抖音很多特效是玩梗属性设计团队擅长把梗融入特效4.4 作为 UGC 拉新手段每年春节活动抖音都把特效作为重要组成单元春节游园会、窗花剪纸等五一、11、中秋、元宵等大节日节点都推运营绑定的特效数据图谱上每个节日节点出现凸起频繁运营最终把基线提升4.5 平台用户画像差异平台用户画像特效供给倾向Snapchat年轻人高中生、大学生男女均衡玩法多样抖音更多女性用户是投稿主力军围绕变好看的美颜美妆类五、中国式重运营 vs. 美式轻运营5.1 美国大厂的运营逻辑YouTube没有运营团队只有几个搞版权的Snapchat特效产品只配 1–2 个岗位title 是ecosystem manager或partnership不是运营总体理念能用产品设计解决的问题不愿意堆人力解决5.2 字节的运营投入字节的运营在特效业务里起到了杠杆作用新技术/AI 算法首次落地 ↓ 产品和运营团队做 Go-To-Market Plan细致到时间节点、达人/明星阵容 ↓ 预装特效的手机寄给明星达人提前拍好视频 ↓ 特效上线那一刻同步发布预埋引爆 ↓ 配合投放流量、爆款视频推热没有运营加持很多爆款特效达不到全民皆知的地步。5.3 运营是启蒙引导而非长期依赖草莽时代产品形态未定运营起到引导/启蒙作用官方甚至会教头部达人怎么玩成熟期产品能自我运转运营逐渐淡出六、抖音的两个原始创新猫脸/狗脸特效 控雨6.1 猫脸狗脸特效业界首发突破创作以人为中心的常规思路给猫/狗做人脸跟踪和特效在 17–18 年是非常天马行空的想法做出来后很多用户拍出好玩视频成为爆款6.2 控雨/控花技术原理手势识别 → 凝固雨滴/花瓣 → 跟随手运动实现简单各家公司都能做但抖音是业界最早实现可强交互玩法的创作者社区把它和音乐卡点、舞蹈结合把内容生态玩出花七、剪映为什么能后发先至7.1 立项背景2019 年起因观察到深度学习/AI 可以做内容理解、剪辑编辑、生成普通用户最大的痛点不是拍而是怎么剪怎么配音乐卡点、怎么讲故事、怎么从十几段素材里提炼高光核心 idea如果能把power user 的剪辑思路沉淀成可复用的实体让普通用户一键复用会非常 powerful内部有多个团队有类似 idea高层顺势整合7.2 立项与上线速度2019 年 5 月立项 2019 年 8 月上线 只用了 3 个月从 0 到上线这对从美国公司刚到字节的人来说是一个幼小心灵的大震撼——深刻体会到字节的执行力效率。7.3 上线后的市场表现短期内 DAU 破百万、破千万迅速超过快影当时的基础框架多轨编辑、配乐、特效加载等与今天基本类似7.4 剪映超越快影的原因原因详情站在巨人肩膀上抖音/TikTok 已有完善的音视频编辑、特效、滤镜等 SDK 引擎剪映快速搬过去用抖音锚点引流抖音内的入口位给剪映带来巨大流量每年十几亿曝光形成先进创作者先用剪映的示范效应剪同款抖音有拍同款心智音乐/特效/模板剪映发明了**“剪同款”**——把剪辑思路和流程固化成可分发、可分享、可复用的实体7.5剪同款发明的伟大之处过去内容编辑最难的事怎么把平素材剪成吸引人的内容——核心是storytelling 能力这事在过去很难传承“很悬”——只有各种框架理论剪同款做的事第一次把剪辑流固化成实体把特效、转场、音乐全部打包给用户一个武林高手的毕生绝学直接灌给小白内容生态里好的模板、好的剪辑思路通过剪同款普及到所有创作者拍同款验证过→ 剪同款发明。这是剪映产品经理值得 top performance 的发明。八、特效开放平台像素 Effect House8.1 为什么需要开放平台inhouse 设计师有多少产能就有多少产能受限内部团队背景趋同创意范围受限需要把特效生产工具开放出去让所有外部创作者3D 设计师、2D 插画师、影楼 P 图师、学生等参与供给8.2 国内外平台命名与发布地区平台名发布时间国内抖音像素像塑造2017–2018 年小规模上线2021 年重构大规模发布海外TikTokEffect House2022 年前后 beta 版发布8.3 国内外特效师群体对比维度国内海外主要来源2D 设计师、P 图师、平面设计师广告/媒体背景AR Developer、有代码能力的开发者、3D 建模师、动画师能力倾向偏 2D 贴图、人脸贴纸、氛围道具、美颜美妆3D 设计、玩法交互、创意设计能力更强生态成熟度较新3D 能力偏弱正在追赶成熟依托 Unreal/Unity 游戏引擎生态、皮克斯/梦工厂人才8.4 全球三大特效开放平台Snapchat Lens Studio2016–2017 年发布最早介入Meta Spark ARFacebook/InstagramTikTok Effect House / 抖音像素2022 年发布入局最晚但起量最快架构溯源这些平台本质上是**基于手机/移动端的精简版游戏引擎**借鉴了 Unreal/Unity 的ECSEntity Component System架构。8.5 TikTok Effect House 的进展2022 年入局最晚但起量最快特效产量和供给已超过前两家从 inhouse 占主流 →第三方外部特效师供给占绝对主导内部团队转向更高精尖、更好效果、更高技术、更新算法8.6 商业生态特效师的变现路径变现渠道渠道说明平台分成特效分为 D/C/B/A/S/SS/SSS 等级3S 历史上极少。A 级以上可达数千至数万元商单品牌定制平台收品牌方制作费 推广位费早期 70–80 万美元/个再分发到特效师Sponsored Lenses漫威等品牌方付费做用户变蜘蛛侠/钢铁侠类特效把广告从被动变主动参与涨粉激励爆款特效详情页引导关注特效师账号形成 go viral 效应海外头部特效师收入100–200 万美元/年小工作室级别。国内还处于渐进过程但头部特效师已经能以此为生。九、特效生意的商业逻辑Sponsored Lenses 与品牌广告9.1 Snapchat 早期验证品牌方耐克、阿迪、饮料公司、漫威付费做定制特效模式制作费 平台推广位费效果测试AR/特效形式广告 vs. 普通点击广告点击率提升 2–3 倍9.2 抖音的对应做法平台给品牌做推广活动商单分发给特效师特效师通过承接商单赚取几千至几万元十、字节特效团队的内部组织与创新机制10.1 交互工程师Interactive Engineer跨界特种部队团队成员既具有设计/艺术背景又具有工程背景既能画画又能写代码价值以非常快的速度出 demo、prototype验证算法/玩法是否成立在设计师与工程师之间架起桥梁拿到新算法后通过各种方式设计玩法把算法在不同维度发挥到极致再与设计师联合提升从设计质感、玩法交互、画面效果提升到下一个 level10.2 创意矩阵 / 玩法矩阵算法探索新算法打磨 ↑ │ 玩法创新 ──┼── 深度挖掘老算法新算法结合 │ ↓ 落地生产设计师、特效师纵向一个算法的极限在哪、参数怎么调、能用到多深横向同一个算法在多少种玩法上有创新实例背景分割/人像分割算法的玩法矩阵替换背景染发不同颜色、不同质感人脸变色虚拟试穿衣服每个玩法再深挖参数和极限10.3 美颜美妆的演进阶段阶段特征代表案例阶段 1重妆容P 到爹妈不认识过度渲染早期大眼瘦脸特效阶段 2自然真实感用 GAN 做真实感渲染保留本人特征学姐妆超级大爆款阶段 3个性化针对脸型、肤色、长相特征做定制化算法 多种小项排列组合十一、剪映/CapCut 与抖音/TikTok 的产品关系11.1 定位差异产品定位抖音/TikTok 创作工具服务平台自身不服务 Instagram/YouTube剪映/CapCut通用型内容创作工具可服务多个内容平台11.2 包大小限制导致的功能克制抖音/TikTok 有严格的包大小限制任何 feature 都要评估增加多少 K剪映/CapCut 作为独立工具可以做更重的编辑能力这导致用户心态差异剪映是超级编辑工具抖音是图方便/跟拍11.3 海外创作者调研伦敦/迪拜等城市2023 年观察到一位 10 万粉创作者的工作流用 Snapchat 拍特效最好、响应最快 ↓ 导出用 TikTok 编辑多轨编辑能力最强 ↓ 发布到 Instagram、YouTube、TikTok 等多平台每个用户有自己的工作流定义每个 app 占据不同生态位。11.4 CapCut 在海外的爆款大爆款早期多为 inhouse运营/产品驱动、研发侧驱动希区柯克运镜特效把传统影视行业的镜头运镜技巧搬到移动端让普通人能做出好莱坞级别效果——上线后迅速将 CapCut 顶到美国 App 排行榜榜首持续几周创作民主化把专业级别的影视运镜给到普通人运营手段海外运营团队运营社群、头部创作者生态、发布任务、教学资料、编辑 tips重要数据CapCut 在海外爆火 tktok 流量加持 剪同款把创意流固化在实体里 产品本身好用。十二、字节技术中台从工具线到 40 应用12.1 中台起源发源于抖音的一条业务线抖音工具线分多个团队音视频、特效等最早服务对象抖音 TikTok不分家12.2 中台的赋能价值剪映从 0 到 1 只用 3 个月是因为把过去数百人几年积累的工程经验快速复用。支持的应用矩阵最多时 40抖音、TikTok、剪映、CapCutFaceu、轻颜、醒图飞书复用创作中台幸福里虚拟看房、VR 看房用到渲染和 3D懂车帝3D 看车番茄小说CV 算法做 AI 生成插图电商虚拟商品展示直播直播礼物、特效礼物多闪等12.3 中台的核心评估与挑战评估手段——反转实验一批用户看不到特效视频没法跟拍一批用户不显示新特效近 30 天发布的特效面板上没有通过这种大反转实验验证了特效/创作在 DAU、时长、投稿率上的 long-term value核心挑战早期中台能快速支持大量新产品后期当剪映、抖音、TikTok 三组鼎立、各自壮大后优先级怎么分配、人力怎么分配、三方需求冲突时怎么办——没有很好解后期只能走dedicated 团队支持的模式难以维持纯粹大中台12.4 工具对平台竞争的战略意义生产工具是内容平台的上游上游一旦被其他平台抢走短期扛得住长期有问题短期看消费长期一定是看供给新平台起来往往是从老平台不得志的人——腰尾部创作者——入手工具的竞争实际上是在帮平台挖墙脚十三、AI 对特效行业的重塑13.1 五阶段演进史阶段时间特征代表案例1. 拓荒期2017–2018每个特效单独开发为 feature猫耳朵与学猫叫互相成就2. AI 控制期2018 前后加入 AI 算法、用户交互控花/控雨、神烦狗3. 工具引擎重构 可视化编程2018–2019重构工具引擎引入 no-code 可视化编程模块具备逻辑设计能力潜水艇特效、变形金刚 3D、蓝线挑战4. GAN 算法崛起2019–2021复杂特效需设计交互工程师研发小团队协作按算法模块重组生产流程漫画风、迪士尼效果、日漫效果5. AIGC 时代2022 至今大量使用视觉大模型文生图、图生图传统引擎和 AIGC 双腿走路AI 用于生产提效文本 prompt 直接生成特效13.2 创新机制追赶者 vs. 领先者追赶阶段全面追赶 Snapchat、Facebook 的引擎、技术架构、工具目标清晰系统化对比竞品、补齐差距能力补齐后判断是否有必要补齐所有竞品能力因平台调性不同跟踪最新 AI 进展和工程实践由设计师和交互工程师团队进行大量前置探索产出 demo 视频和效果展示与产品团队、管理层 review沉淀优秀创意为创新成果机制保障研发团队内部留一小部分资源做前沿性探索保证新技术成熟时能早期 ad 到产品里。13.3 GAN 时代的 hybrid 经验对 AI 未来的启示即使像 Sora 这种端到端的世界模拟器出现传统引擎在过渡期仍不可替代GAN 特效的实际生产流程前处理传统引擎预处理 ↓ GAN Style Transfer算法模型 ↓ 后处理传统引擎美颜美妆、渲染、补细节 ↓ 成品hybrid 模式为什么必须 hybridGAN 做到 80 分很快但最后 20% 打磨极费时间需要大量 corner case 数据眼睛张闭、微表情、男女、不同肤色、不同发型大量依赖数据——批量化生成 corner case 数据非常难后处理弥补 GAN 的缺陷减少数据需求量、降低训练难度、缩短生产周期、更可控预测在文生视频领域也会存在传统渲染 Sora 等技术的并存融合阶段。13.4 字节内部的 AIGC 应用生产提效引入 AIGC 辅助特效设计师生成 2D 素材在移动端特效创作工具上赋能创作者最新突破2024 年初 TikTok Effect House 发布由 AI 直接生成特效的功能用户输入 text prompt由文本直接生成最终特效效果等于把特效制作过程完全 UGC 化未来任何人都可以为自己的频道生成专属特效十四、剪映/CapCut 的商业化与独立价值14.1 工具产品变现的两条路径卖内部效果和小工具变现订阅制subscribe使用高级会员能力14.2 指标MAU不是日活型产品看全平台总量包括 iOS、安卓、Mac、Windows、Web 端导出率 / 导出数等价于抖音的投稿率商业化指标14.3 服务对象分层创作者类型变现可能性服务方式C 端普通创作者难变现更喜欢免费工具基础功能免费B 端专业创作者能盈利付费意愿强会员、高级功能、订阅14.4 对标公司Adobeto B 平台Canva创作者/创意平台其他小型工具VSCO、InShot 等订阅制/收费十五、总结15.1 爆款特效公式新算法/新技术新工具加入工具箱交互/玩法设计横纵创意矩阵↓设计师 交互工程师 研发小团队协作↓运营加持达人/明星预埋 投放推热↓爆款特效投稿率、DAU、新增的杠杆↓飞轮效应投稿↑ → 内容池↑ → 算法分发↑ → 消费↑ → 商业化↑ → 资源↑ → 新特效↑15.2 字节的三个独特之处对创作的信仰与投入即便短期看不到立竿见影效果也坚定长期投入In-house 能力 开放生态双轨内部团队打标杆外部供给占主导重运营 强技术中台工具能力的深度沉淀支持 40 应用快速迭代15.3 未来趋势判断工具市场是**增量市场**看视频的人已饱和做视频的人还在增长AI 是新摄像头从拍摄逻辑→生成逻辑特效生产门槛进一步降低传统渲染引擎 AI 模型的 hybrid 模式将长期并存内容生成AIGC将逐步 UGC 化十六、未尽议题AI 对特效的影响深入讨论 Sora 等世界模拟器对传统特效引擎的冲击海外平台的观察专门讨论海外产品的方法论