智能硬件正进入 AI 原生时代,生成式 AI、边缘计算及多模态交互推动设备从&l... 展开 >





人机交互、XR & AI 软硬件产品技术专家,深耕AR、AI、智能硬件、可穿戴计算、IoT、游戏社交领域拥有 10+ 年研发经验,10+项国内国际专利,中美持续创业家。创立多家智能硬件公司,并主导了 ROKID 多条业务线多形态AR 硬件产品的 从 0 到 1 的设计、研发和量产。在 Reality Lab 领导 XR 与 AI 解决方案的研发,打造端云一体 AI+AR 计算平台。推动智能语音、计算机视觉、多模态交互在智能硬件行业中的商业化落地,孵化中美初创公司,探索未来智能硬件新范式。
智能硬件正进入 AI 原生时代,生成式 AI、边缘计算及多模态交互推动设备从“智能”进化为“智慧”。从 AIoT 到 AI Agent,设备不再是单一功能工具,而是具备自主学习、感知与决策能力的个性化助手。
本专题旨在探讨 AI 如何深度融合智能硬件,推动设备从工具向智能体进化,探索 AI 驱动的智能硬件新范式,为行业提供创新思路与落地方案。专题聚焦以下内容:
拟讨论方向/解决问题:
Rokid 十年来持续探索AI与AR的融合路径,打造出涵盖语音交互、视觉识别、空间感知与边缘计算的“空间智能体”系统。随着多模态识别与大模型的发展,AR眼镜逐步从视觉呈现工具演化为认知、决策并行动的智能终端。本次演讲将结合Rokid在商业化产品上的经验,从Rokid AR Studio、Rokid AR Lite、Rokid Glasses等核心产品,从架构设计、产品落地到行业应用,系统讲解AI如何深度驱动AR硬件与操作系统演进,赋能文旅、教育、工业、车载等多场景的落地实践,兼顾toB,以及toC商业化场景落地,展示AI时代人机交互的新范式。
演讲提纲
您认为,这样的技术在实践过程中有哪些痛点?
您的演讲有哪些前沿亮点?
听众收益
随着智能终端的场景化需求升级,传统耳机 “声音重放” 的单一功能已难以满足用户对个性化交互与主动服务的期待。在此背景下,AI 驱动的AI耳机正从硬件载体向 “听感交互中枢” 与 “超级传感器” 转型,通过技术重构实现范式突破。 作为 “可穿戴智能体” 的典型代表,AI 耳机预示人机交互从 “工具依赖” 迈向 “共生进化”,通过 “服务即穿戴,穿戴即体验” 的图景,成为连接个体与物理 / 数字世界的核心入口,推动消费电子从功能导向转向价值共生的新周期。
演讲提纲
您认为,这样的技术在实践过程中有哪些痛点?
AI 声学硬件产品在技术落地中面临多重痛点,涉及技术落地、用户体验、生态协同及商业化等多个维度。本质是技术前瞻性与用户真实需求、商业可行性、社会伦理的多重博弈。突破方向需聚焦轻量化算法优化(降低算力与功耗)、场景化服务的 “克制式设计”,以及行业标准共建,才能推动其从 “概念创新” 走向 “价值落地”。
听众收益
本次分享将聚焦端侧大模型,深入探讨其落地过程中的挑战与实践。通过大模型摩尔定律及相关技术阐述原因,并对比端侧 AI 与云侧 AI 的优劣,介绍端侧 AI 应用场景及有道教育智能硬件特点。端侧大模型落地面临算力、内存、功耗、成本、算法质量、多应用部署等挑战,需平衡各项指标。以有道子曰大模型为例,分享云侧、云端结合、端侧 LLM 三种落地模式。在端侧大模型算法方面,详细介绍模型压缩技术及 LLM 带来的变化与新问题,通过实验确定蒸馏、DPO、词表裁剪、量化等方案,并对推理进行性能优化,端侧大模型成功落地有道词典笔 X7、X7 Pro,开启词典笔部署本地大模型新时代,未来还计划扩展功能。
演讲提纲
您认为,这样的技术在实践过程中有哪些痛点?
端侧大模型落地面临多方面挑战。算力和内存上,与云侧相比差距大,如端侧 RK3562 芯片对比云侧 4090GPU,算力低千倍以上,内存低 20 多倍。功耗方面,端侧设备如手机、词典笔需考虑待机时长,优化底层 AI 引擎与上层 APP 功耗难度大。成本限制下,为有市场竞争力需降低成本,可能导致所选芯片更弱。此外,要保证模型质量,且端侧设备常部署多个应用,各模块抢资源,需综合优化满足用户体验。
您的演讲有哪些前沿亮点?
为解决端侧内存限制问题,采用模型压缩技术。以有道子曰大模型为例,运用蒸馏技术,引入片段级语料并确定合适训练集规模,有效提升模型效果。采用 DPO 算法进行强化学习,进一步优化模型性能。通过词表裁剪,在保证模型质量的同时减少内存占用,并选用 AWQ 量化算法,在量化过程中兼顾模型精度与内存优化 。
听众收益
从2017年第一次人工智能技术爆发,AIoT概念提出,智能语音技术和物联网技术相结合,带来了智能音箱、智能客服等多种产品形态的发展和落地,从而改变了传统的设备控制方式,让语音控制成为常态。2023年AI大模型的爆炸式发展为AIoT技术带来质变,更多新场景成为可能,相关产品开始进入爆发期,在新机遇面前,技术方案也面临新的要求,更低的对话延迟、更流畅的对话体验、更智能的对话能力、全球化的服务范围,如何解决这些技术难题是我们工程师的新挑战。
本研究将分享在近两年工作中遇到的新产品案例,并从产品整体方案架构,端云结合的角度,分析新场景下技术方案的实施框架,为从业者提供参考。
演进提纲
技术实践痛点
当前AI Agent在AIoT行业的实施方案,最大问题在于成本,要达到优质的体验效果,整体方案的服务成本较高。
前沿亮点
1、如何在有限资源下降低产品初期的成本投入;
2、低成本的全球化覆盖能力下,新产品的想象空间提升;
听众收益



微信咨询

电话咨询
领取往期热门演讲视频

