Facebook开源深度学习框架Pythia用于图像和语言模型 继1月开放图像处理库Spectrum

如果最近的用于言模发展有任何迹象,Facebook对更广泛的图像开发社区的承诺仍然如此强大。继1月开放图像处理库Spectrum,和语去年年底自然语言处理建模框架PyText以及11月人工智能强化学习平台Horizon之后,开源框架Facebook的深度人工智能研究部门今天宣布Pythia,一个模块化的学习型即插即用框架使数据科学家能够快速构建,复制和基准AI模型,用于言模现在可以在GitHub上免费获得。图像
正如Facebook在一篇博文中解释的和语那样,Pythia--它是开源框架在公司的PyTorch机器学习框架之上构建的 - 主要用于视觉和语言任务,例如回答与视觉数据相关的深度问题并自动生成图像标题。它结合了Facebook AI Research在人工智能竞赛中的学习型顶级参赛作品,如LoRRA,一个同时赢得VQA挑战2018和Vizwiz Challenge 2018的视觉和语言模型,它能够展示以前最先进的AI系统如何实现顶级基准测试结果并将其性能与新模型的性能进行比较。
Pythia还支持分布式培训和各种数据集,以及自定义损失,指标,调度和优化器。存在并考虑了具有常用视觉和语言层实现的模块,以及对分布式培训的支持; 内置语料库,包括VQA,VizWiz,TextVQA和VisualDialog; 和多任务处理等功能,可以一起训练多个语料库。
Facebook表示,它将扩展Pythia的初始开源版本,包括即将推出的工具,任务,数据集和参考模型。
“Pythia平滑了进入不断增长的视觉和语言子领域的过程,并使研究人员能够专注于更快的原型设计和实验。我们的目标是通过提高这些模型和结果的可重复性来加速进步,“Facebook在博客文章中写道。“这将使社区更容易在成功的系统上进行构建和基准测试。我们希望消除一些障碍将使研究人员能够更快地为人们和智能机器开发新的交流方式。这项工作还应该帮助研究人员开发自适应人工智能,将多种理解融合到更基于情境的多模式理解中。“
Pythia的首次亮相是在Facebook在旧金山举行的F8开发者峰会期间推出PyTorch 1.1几周之后,该峰会增加了对谷歌TensorBoard及其即时(JIT)编译器性能改进的支持。去年秋天GitHub的2018年Octoverse报告将PyTorch命名为GitHub上最受欢迎的开源项目之一,全球有超过3100万开发人员。
相关文章
- 新春伊始,我市各地组织开展一系列专场招聘活动,吸引众多返乡求职者就地就近就业,满足企业用工需求,助力企业高质量发展。日前,由市人社局、市妇联、宿马园区管委会共同主办的2025年“春风送岗 ‘职’面未来2025-05-09
- 在热血传奇手游中第 3 届天下第一战 8 月几号开启?热血传奇手游作为一款深受玩家喜爱的游戏,其每一届的天下第一战都备受关注。那么,第 3 届天下第一战究竟在 8 月几号开启呢?这无疑是众多玩家心中的2025-05-09
- 某人猜猜好玩吗?某人猜猜简介及游戏玩法介绍“某人猜猜好玩吗?”这是许多人在接触到“某人猜猜”这款游戏时会产生的疑问。“某人猜猜”是一款充满趣味性和挑战性的互动游戏,它通过各种线索和提示,让玩家猜测指定2025-05-09
- 迷失岛 1 神庙密室怎么进去?详细进入攻略大揭秘迷失岛 1 是一款备受玩家喜爱的解谜游戏,其中神庙密室的进入方式更是让许多玩家感到困惑。我们将详细揭秘迷失岛 1 神庙密室的进入攻略,帮助玩家轻松解开这2025-05-09
- 引言:紫色秘银锭的战略价值作为地下城堡2中后期锻造顶级装备、升级建筑的核心材料,紫色秘银锭的稀缺性使其成为玩家资源规划的重点。其需求量随游戏进度呈指数级增长——一件传说级武器可能消耗20-30个秘银锭2025-05-09
- 明日方舟干员招募技巧是什么?干员招募技巧分享明日方舟作为一款备受欢迎的策略塔防游戏,干员的招募是游戏中至关重要的一环。拥有强大的干员阵容,能让玩家在游戏中更轻松地应对各种挑战。那么,明日方舟干员招募技2025-05-09
最新评论