AWS Inf2推理实例:号称成本直降40%,但我的压测数据揭示了什么投资委员会必须知道的事
上季度投资委员会复盘时,我被一组数字钉在椅子上:我们投的7个AIGC项目中,有5个正在用GPU实例跑推理,单月推理成本中位数是$23,400,而它们平均MRR还不到$8,000。有一个团队甚至把40%的A轮融资烧在了AWS账单上。当时CFO甩过来一句:“你们技术顾问不是说大模型推理成本会断崖式下跌吗…
AI 产业深度观察:从投资视角拆解 AI 芯片、大模型、具身智能等赛道的技术真相与商业逻辑。基于 37+ 份融资 BP 和 300+ 项目审查经验,拒绝 PPT 泡沫,只讲技术本质。
上季度投资委员会复盘时,我被一组数字钉在椅子上:我们投的7个AIGC项目中,有5个正在用GPU实例跑推理,单月推理成本中位数是$23,400,而它们平均MRR还不到$8,000。有一个团队甚至把40%的A轮融资烧在了AWS账单上。当时CFO甩过来一句:“你们技术顾问不是说大模型推理成本会断崖式下跌吗…
我叫沈青锋,现在做的第三个创业项目,是用AI改造传统制造。我们在长三角接了几十家零配件厂的单子,帮他们把目检、排程、故障诊断这些环节换成大模型驱动。去年十月,我们一个部署在汽车线束厂的多模态质检模型,因为操作工在输入框里贴了一句“忽略之前的指令”,直接给一批带毛刺的端子打了PASS,等发现时已经流到…
Copilot+ PC上市那周,我正好拿到了联想Yoga Slim 7x工程机。骁龙X Elite X1E-80-100(16MB L3,全核3.8GHz,NPU标称45 TOPS),配32GB LPDDR5X-8448。老板说:「许彦,你不是搞了5年机器人么,端侧AI部署就你来吧,把Stable …
我盯着任务管理器里那个叫“Hexagon NPU”的小方块,它在摄像头预览流跑起来的一瞬间,稳稳地吃下了4.3W的功耗,而旁边的CPU和GPU几乎纹丝不动。同场景下,我用OpenVINO在酷睿Ultra 7上跑同一个YOLOv8n模型,cpu瞬时功耗飙到18W,Iris Xe核显介入后降到11W,但…
上个月,我在公司内部的周五技术分享会上,当着CTO的面把一块功耗计插在了x86推理服务器和一台刚到的Arm云实例之间。当时我说:“同样的Qwen-7B,同样的INT4量化,咱们跑一个小时的locust压测,电表会告诉我们真相。”会议室里一半人觉得我在作秀,另一半人已经打开了手机计时器。结果出来后,我…
我是方瑾。过去5年我在一家投技术赛道的风投做技术顾问,看过的AI项目BP没有一千也有八百。我有个职业病:只要PPT里出现“世界模型”四个字,我直接翻到财务预测那页,看看营收和研发投入之间的缺口有多大。因为大部分团队压根没想清楚,让机器人理解物理世界到底需要什么——他们以为堆足够多的视频数据、把VLA…
我是沈青锋,现在是我第三个创业项目——给制造业做人形机器人的部署集成。前两个项目,一个做AGV调度系统,一个做工业视觉检测,都没能撑过B轮。这次我们把Walker S送进一家二线汽车零部件厂的产线做搬运和质检,干了快四个月,上个月刚刚跑通了连续20天无故障运行。今天这篇文章是这四个月的真实记录,包括…
我见过不下30份BP,它们在“核心技术壁垒”那一页写着“自研推理优化引擎,成本可降至GPU的50%”。翻到ROI测算那张表,80%的团队直接用GPU按时长单价乘以调用量,算出一个“如果迁移到自研方案能省多少钱”的数字。然后我让他们把模型文件发过来,用Neuron SDK在一台inf2.8xlarge…
那个被吹爆的“800 TFLOPS”是怎么骗过投委会的 上周又有两家公司更新了融资材料,把“需要2000张H100”改成了“首批部署300张B200即可启动”。数字砍掉85%,估值反而往上抬了40%,这种魔术我五年里看过太多遍。投资经理们把英伟达官网的FP8算力数字拿来当圣旨,却从不去看数据中心机房…
去年秋天,我蹲在浙江一家汽车底盘件工厂的质检车间里,看着我们的AI模型把一片制动盘上的气孔误判成划痕,产线停了三分钟。车间主任老陈抱着胳膊,盯着屏幕上的误检图,只丢给我一句话:“你们这模型能一周更新一次不?现在的活,废品率又涨了。” 我是沈青锋,干了三个创业项目,现在这个公司搞制造业的AI视觉检测。…