2024 年 12 月 18 日，火山引擎举办 2024 冬季 FORCE 原动力大会。在此次大会的“视频云 & 边缘云”专场活动中，火山引擎与乐鑫、ToyCity、Folotoy 及魂伴科技联合发布了 AI + 硬件智跃计划。乐鑫科技副总经理王珏女士发表主题演讲《潮玩进化：从静态到 AI 驱动的灵魂交互》，以下为演讲全文。

01 乐鑫是谁

乐鑫致力于为物联网产业提供带连接功能的处理器芯片、操作系统和软件方案，为广泛的开发者群体提供便捷好用、可靠的产品和技术，助力下游实现数智化，推动下游产品形态进化，甚至创造变革。

在物联网领域，“乐鑫”以及产品品牌 ESP32 的名字在开发者中拥有极高的知名度。乐鑫的物联网芯片累计出货量已达十几亿颗，2024 年单年物联网芯片出货量就高达 2 亿多颗，在 Wi-Fi MCU 领域全球领先。

乐鑫非常重视开发者生态，目前已影响了全球 200-300 万的开发者，并通过生态影响力渗透各类市场。

开发者生态是内容驱动的，因此在各个平台上都有大量开发者贡献的内容：GitHub 上有大量的开源项目；海外 YouTube 视频平台上 ESP32 最受欢迎的长视频播放量已经超过 526 万次，短视频最高可以达到 2,000 万次以上的播放量；国内 B 站平台最受欢迎的关于 ESP32 的视频也有 137 万次以上的播放量。我们在网上搜集到的关于使用乐鑫产品做物联网开发的书籍有 13 种语言之多，超过 200 本，都是开发者们自发编写的。做互联网、做平台的同仁们，应该特别能理解生态和内容驱动的意义。

乐鑫提供好用的技术，技术齿轮推动了生态的齿轮，生态的齿轮则将我们带入下游各种各样的市场，包括智能家居、消费电子、工业控制、能源管理、农业、医疗、教育、车联网、金融等等，然而和“潮玩”两个字挂上钩才刚刚开始。AIoT 的技术在其他行业的应用已经很多了，因此潮玩行业复用其他行业的技术能力，对于其自身来说不会增加太多的开发成本。

02 乐鑫在潮玩领域中的角色

IP 创作者赋予手办形象，制造商构建起它的结构和骨肉，一个静态的产品由此诞生了。

当生成式大模型兴起时，这个产业里的玩家开始探索一些新玩法，让手办不仅能够“动”起来，还能与人交互对话。云端大模型赋予这个产品半个灵魂，还有半个灵魂则依赖于 IP 自身想要传递的精神和内容。而具有连接功能的处理器芯片则为产品提供“大脑和神经”，将“肉体”和“灵魂”相连。乐鑫，正是连接和交互能力的技术提供者。

乐鑫目前在技术端能支撑以下功能：

• 通用 IoT 功能：如连接、控制、屏显、摄像头
• 边缘 AI 功能：支持语音唤醒、语音控制、人脸和物体识别等
• 云端 AI 功能：依托于豆包等大模型实现生成式内容输出，不论输出形式是语音或是屏幕显示

在这次合作方案中，乐鑫将提供一站式 Turnkey 解决方案，在端侧音视频处理方面，我们有丰富的解决方案经验。通过低延迟抗干扰的 RTC 技术，设备端到云端的大模型应用可实现真人感的实时通话。

这张图展现的是合作方案中的技术分工，左边这部分乐鑫在端侧能处理的具体功能，通过 Wi-Fi 传输即可调用另一侧云端提供的智能体服务。

介绍了乐鑫和火山引擎在合作方案中提供的技术支持，再回到潮玩本身属性的介绍。

最近有读到一篇采访某潮玩公司的文章，里面提到了它想要保持的状态，用了四个词，我觉得特别好：Peace，Love，Enjoy 和 Celebrate。这里，我想引用这些词来表达我对潮玩产品属性的观察。

如果产品侧重陪伴属性，注重互动性与拟人化设计，产品带给人温暖与治愈，契合关键词 Peace & Love。

来自于动漫/影视/游戏的 IP 产品通常会侧重社交属性，消费者们会有共同的话题感以及身份标签，拥有 Love & Enjoy 的情绪价值。

侧重个性化表达的，用户对设计感和独特性的要求更高，甚至会追求限量版，愿意出溢价。这里体现的是 Enjoy 和 Celebrate，千金难买我高兴。

尽管这些产品都是提供情绪价值，但不同属性需求对应的市场客群不同，技术支撑的侧重点也不同，对 IP 运营的深度要求不同。

陪伴型产品：

侧重陪伴属性的产品，通用的 IoT 功能 + 云端 AI 即可实现功能支持。如果产品形态做的复杂点，那就再增加边缘 AI 的功能，从简单的按键控制升级为语音唤醒控制。这些功能，乐鑫的技术都能支持。

IP 驱动型产品：

如果本身有来自于动漫/游戏/影视 IP，那么声音的处理是一个新的负载。粉丝们已经预设了一个角色声音，那么连带 IP 形象之外，还需要附加声音的版权。为了配合新的生成式内容，还需要增加 AI 学习角色设定的声音并创作新内容的过程，这里更依赖 IP 运营。

限量收藏型产品：

如果是追求限量级收藏品的用户，付出的都是产品自身稀缺性带来的溢价。技术可以以一种很高级的展现方式来配合这种溢价，但技术本身并不贵。电子产业商业化落地最重要的点在“量”，同样云端也想要高的连接“量”，所以这一类目标客群基数小的类型大家可能不太会喜欢去做，需要搭配通用产品去做，共摊成本。

03 AI + 潮玩的潜力

谷子经济也有很多种类，比如其中的二次元和三次元品类是不同的。能够 AI+ 的产品形态也不同。

二次元品类包括吧唧、卡片、亚克力立牌等产品。

三次元中，大家会有手办，然后到可动人偶，艺术模型。增加了 AI，就变成可互动的手办，价值量进一步提升。

目前 AI+ 会很自然的和三次元品类来结合，有嘴可以发声音，有关节可以动。可以和你对话，和你聊天，都是挺好的。

AI + 手办甚至可以和智能家居的产品去联动，比如让你喜欢的角色来控制家里的电器，让你喜欢的角色人物听指令帮你打开自家的空调。

当然潮玩行业也有另一种看法，潮玩就应该做没用的东西。一旦附加实际应用价值，就无法带动非理性消费。所以也许其他智能家居的厂商会更愿意主动来做 IP 联名，单独出个型号加上潮玩的 IP 概念。各行业的想法不同，这里仅为个人观察的分享。

思路打开，二次元周边（比如亚克力立牌）也可以通过底座嵌入电路板实现电子化功能。二次元平面形象经常在转三次元形象时翻车，不如就停留在平面，也一样可以实现 AI+ ——本质上和在毛绒玩具里缝入一块电路板是同样的原理。

电子化甚至 AI+，都是辅助 IP 灵魂的推手，让 IP 不只是停留在平面或是静态，而是能以更生动的形态展现出来，而且还要以一个大众可接受的成本展现出来。

在艺术领域，其实已经有不少艺术家用乐鑫的产品来展现他们的艺术设计或是艺术装置，甚至在中央美院都有课程和教具中使用到了乐鑫产品。但艺术领域是小众的，潮玩领域可以以更大众化的姿态来给世界展现它们的存在。

乐鑫的软件技术和文档都是直接公开的，我们拥有广泛的开发者社群支持。因此在新的创新应用领域，开发者们往往会第一时间想到用乐鑫的产品来做应用。此次和火山引擎的合作，也是源于社群中已经有开发者自发的将两者结合在一起做 demo 展示。在此之前我们已经有不少玩具品类的客户，但结合大模型的应用还是一种新的尝试。我们对 AI + 万物的未来充满信心。同时作为一个消费者，我非常期待各位潮玩从业者通过技术创新带来新产品，让我喜欢的 IP 角色不只是待在展示柜里，也能进入我的生活。

· 以上内容转载自“乐鑫董办”公众号 2024 年 12 月 18 日文章《现场直击｜乐鑫在火山引擎2024 冬季 FORCE 原动力大会的主题演讲》

🌟 HR 小贴士

乐鑫科技 2025 届秋季校园招聘仍有少量 HC，含项目管理/商务管理/人力资源管理培训生等职位，欢迎海内外应届同学们前往乐鑫官网投递！https://www.espressif.com/zh-hans/join-us/job-search

祝应聘顺利！