文章插图
此外，在ImageNet-1K数据集上检索给定RGB图像的深度图也发现，尽管Omnivore没有接受过关于1K深度图的训练，但它也能够给出语义相似的正确答案。

文章插图
最后，作者表示，尽管这个“杂食者”比传统的特定模式模型有了很多进步，但它有一些局限性。
比如目前它仅适用于单视图3D图像，不适用于其他3D表示，如体素图（voxels）、点云图等。
论文地址：
https://arxiv.org/abs/2201.08377
代码已开源：
https://github.com/facebookresearch/omnivore
【 模型|Meta AI推出“杂食者”：一个模型搞定图像视频和3D数据的分类任务】— 完 —
量子位 QbitAI · 头条号签约

• meta|促进更逼真AR/VR体验，Meta正在开发全新空间音频工具
• 在昨日推文中，王者荣耀将以“____文化”为主题推出限定皮肤，为乡村振兴加油? 王者荣耀6月28日每日一题答案
• 拼多多|拼多多推出PC网页版商城，或只为缓解增长焦虑
• |华为推出新款显示器，提供高色域，可旋转屏幕，售价899元
• AI与K12的碰撞：科大讯飞推出适龄专属AI翻译笔
• realme gt2|苹果14将推出紫色？Reno8花仙紫已上线，网友：玩色彩还得是绿厂
• 嘉定这家专业用品市场推出“云逛店”模式
• 路由器|价值4200万越南盾！三星推出S22Ultra限量版，国内会有吗？
• C++|三星将推出OneUI5.0测试版，S22首测，新系统更流畅！
• |10Gbps，中国厂商，推出全球最快LPDDR5/5X内存接口IP