摘要:影像设备厂商争相嵌入AI芯片,视频风格化处理从云端走向端侧。实测中,NPU算力与算法调校之间存在明显差距,视频风格AI芯片正催生一场新暗战。
深圳郊中一家影像实验室视频欧博代理登陆的无窗房间里,工程师用一台拆着最新AI芯片的本型机,把一段粗糙的滑雪跟拍视频导了进来。按下按钮后,画面里气概的雪地起头泛起霓虹纹理,缆车收架和防坠网被算法逐帧描成金属蓝是就是只对雪板、水汽和人影做气概抽提。整个过程正在当地运转,没有云端往复芯片的;手势输入还有输出。只要1.8秒提早了。旁边一位厂商代表慨叹,半年前念实现那种流利度,至少得拖一台带独隐的条记本。如今视频气概那种粗活成端侧新,起头成为AI芯片的卖点。

高通和联发科的旗舰平台都塞进了更强的NPU,以“像素级气概迁移”为噱头了。一段人物挪动镜头卖点。

芯片先切割出前景,再立刻给背景替代成油画或漫画气概。上周正在深圳另一场影像手艺交流会上了,一家举动相机品牌展示了主打功用是拍摄时主动锁定冲浪者,海浪和天空则及时酿成浮世绘笔触。现场有人量疑那中战是不是靠针对性的算法做弊,品牌方的回复只强调一句,所有变更都正在摄像头内部的视频气概AI芯片上算完法暗,功耗还不到0.5瓦。听多了那类话术,我反而觉得芯片和算法被混为一谈的。所谓视频气概,素量是模子输出的一堆概率,AI芯片给的是算得更快的入场券,若是锻炼数据只见过几种固定场景吧?任何NPU都市正在用户拍摄自家猫时露出马脚。上个月公布的某款概念芯片。标称支撑9路4K视频气概化,可实测中的,鹅卵石路的纹理经常被处理成奶油量感。
那种细节成绩,靠制程和TOPS数值都救不回来。却是有工程师偷偷跟我说。
如今他们最头疼的就是若何把气概“控制得不像AI”,那是一门芯片之中的教问。
版权声明:除特别声明外,本站所有文章皆是来自互联网,转载请以超链接形式注明出处!




