跳到正文

#多模态

今日 0 条
7月17日周四
4月24日周四
4月23日周三
4月16日周三
  1. OpenAI News81

    OpenAI 发布 o3 与 o4-mini 系统卡片

    OpenAI 发布 o3 与 o4-mini 的系统卡片,两款模型将最先进的推理能力与完整工具能力相结合。支持能力包括网页浏览、Python、图像与文件分析、图像生成、canvas、automations、文件搜索和记忆。

    推荐理由:官方系统卡片列出了 o3 与 o4-mini 的推理与工具能力,读者可据此判断其与现有工作流的适配度。

4月8日周二
3月25日周二
  1. OpenAI News84

    GPT-4o 系统卡附录:4o 图像生成

    OpenAI 发布 GPT-4o 系统卡附录,介绍 4o 图像生成能力;该能力比 DALL·E 3 系列显著更强,可生成照片级输出,并支持以图像作为输入进行转换。

    推荐理由:原文将 4o 图像生成与 DALL·E 3 对比,点出其照片级输出与图像输入变换能力,读者可据此快速了解新模型的能力边界。

10月1日周二
9月26日周四
5月13日周一
  1. OpenAI News91

    OpenAI 发布新旗舰模型 GPT-4o

    OpenAI 发布新旗舰模型 GPT-4o(GPT-4 Omni),可实时跨音频、图像和文本进行推理。

    推荐理由:OpenAI 发布新旗舰模型 GPT-4o,支持实时处理音频、图像和文本,可关注其多模态交互能力带来的应用变化。

2月15日周四
  1. OpenAI News86

    Sora 技术报告:视频生成模型作为世界模拟器

    OpenAI 探索在视频数据上大规模训练生成模型,其最大模型 Sora 能够生成一分钟的高保真视频。研究表明,扩展视频生成模型是构建物理世界通用模拟器的有希望路径。

    推荐理由:原文提出视频生成模型可作为物理世界通用模拟器的路径,并展示 Sora 生成一分钟高保真视频的能力。

11月6日周一
9月25日周一
3月14日周二
  1. OpenAI News98

    OpenAI 发布 GPT-4

    OpenAI 发布 GPT-4,这是其深度学习规模化推进的最新里程碑。GPT-4 是大型多模态模型,接受图像和文本输入并输出文本;虽然在许多真实场景中能力不及人类,但在多项专业和学术基准上表现出人类水平。

    推荐理由:官方说明给出了 GPT-4 的多模态输入能力与基准表现定位,读者可据此判断它相对前代的能力边界。

12月16日周五
4月13日周三
5月17日周一
3月4日周四
1月5日周二
  1. OpenAI News81

    OpenAI 发布 CLIP:连接文本与图像

    OpenAI 发布神经网络 CLIP,可从自然语言监督中高效学习视觉概念。只需提供待识别类别的名称,CLIP 即可用于任何视觉分类基准,具备类似 GPT-2 和 GPT-3 的 zero-shot 能力。原文链接:https://openai.com/index/clip

    推荐理由:CLIP 用自然语言监督学习视觉概念,让视觉分类不再依赖人工标注,可对照 GPT 的 zero-shot 思路理解其迁移方式。

4月23日周二
6月16日周四
5月6日周一