摩根大通发布了DocLLM，一款专为多模态文档理解设计的生成式语言模型，通过轻量级扩展LLM，避免昂贵的图像编码器，以提高文档分析效能。
多模态模型将更多地用于文档处理（但首先需要降低成本/延迟）。
例如，使用LLM对大量被盗数据进行排序，找出敲诈公司时需要提及的最重要数据。或者使用聊天机器人进行初步的赎金谈判。
图源备注：图片由AI生成，图片授权服务商Midjourney
这个工具解决了我在使用AI辅助开发时面临的最大问题——在进行新请求时给现有应用程序源代码提供上下文。通过PR将输出交付的功能是一个不错的附加功能。我已经使用这个工具提交了一些PR。当然，在合并之前我不得不手动进行一些微小的调整，但它确实为我节省了半个多小时的时间。