🏷️ 端侧AI

英特尔 Lunar Lake vs M4:为什么90%的AI开发者忽略了边缘算力的真实ROI

在投资机构的会议室里,我们看过太多关于「GPU算力短缺」的BP,也听过无数关于「云端推理成本」的抱怨。但作为看了五年AI项目的技术顾问,我必须指出一个被严重忽视的商业事实:对于绝大多数非大模型训练场景的开发者来说,把数据传到云端跑,本身就是一种低效且昂贵的行为。 最近,我手里拿到了两款极具代表性的移…

我在Snapdragon X Elite上编译了10次Chromium,平均102分钟,比M3多耗31%时间,但每瓦编译产出高出22%——72小时开发套件开箱与ROS2实机验证全记录

我是许彦,干机器人这行刚满五年,主要折腾ROS和具身智能,从六轴机械臂到双足人形都摸过一遍。我骨子里不太信纸面参数,因为仿真里跑得再顺的控制算法,一落到真实电机和减速器上就会出现各种奇怪的抖振、过冲甚至安全停机。所以当高通把Snapdragon X Elite开发套件(Windows Dev Kit…

在Snapdragon X Elite上跑Llama.cpp 13B推理功耗比M3低18%,但x86模拟让Visual Studio的AI补全延迟冲到380ms——我用72小时把Windows Dev Kit从开箱玩到崩溃日志37条

我做具身机器人五年,手臂抓取的成功率在仿真环境和真实机械臂之间的差距,我有切身体会。拿到Snapdragon X Elite Windows Dev Kit的那一刻,我第一反应不是看官网白皮书里那颗“45 TOPS NPU”“Oryon CPU单核性能超越M2 Max”的宣传材料,而是摸了一下底部的…

我读完高通Hexagon NPU那篇“秘密白皮书”,在Snapdragon X Elite上实操一个月,端侧AI的纸面数据和物理世界之间至少隔着三道坎

我不是在高通骁龙峰会现场。我是在一个普通的周三下午,从顺丰纸箱里拆出那台联想Yoga Slim 7x,系统信息显示“Snapdragon X Elite – X1E-84-100”,旁边贴着一张A4纸,用马克笔写着“NPU性能对标M3,能跑大模型”。我第一个念头不是“哦,终于有能跟苹果打一打的ARM…

当我用骁龙X Elite跑通YOLOv8的NPU推理,才发现Copilot+不过是道开胃菜

我盯着任务管理器里那个叫“Hexagon NPU”的小方块,它在摄像头预览流跑起来的一瞬间,稳稳地吃下了4.3W的功耗,而旁边的CPU和GPU几乎纹丝不动。同场景下,我用OpenVINO在酷睿Ultra 7上跑同一个YOLOv8n模型,cpu瞬时功耗飙到18W,Iris Xe核显介入后降到11W,但…

我半夜调通Windows Copilot Runtime的本地RAG,发现微软把矢量搜索藏得比我想象的深

在医疗行业严格的合规要求下,我被迫放弃了所有云方案,转而用Windows Copilot Runtime搭建了一套完全离线的文档问答系统。本文从开发者角度复盘了整个流程:环境配置的隐藏坑、四种矢量搜索方案的实测对比、Phi-3模型的本地推理优化,以及文档预处理的非技术瓶颈。最终系统在3.8GB内存占用下实现了800毫秒的端到端响应,证明了端侧AI已经具备真正的实用价值。