ChaosstuffAI

AI 开发者周刊#002:大模型是什么?误将工程成就当成人类语言能力

这里分享对开发者有用的人工智能技术和信息,每周五发布。

大模型是什么?误将工程成就当成人类语言能力[1]

Image

论文探讨了大型语言模型(LLMs)的语言能力,并指出人们对LLMs的理解存在误解。文章认为,LLMs的语言能力是基于两个错误的假设:语言完整性和数据完整性。然而,从认知科学的具身视角来看,语言并非一个独立且完整的事物,而是一种参与和实践的方式。LLMs缺乏人类语言行为的三个关键特征:具身性、参与性和脆弱性,这使得它们无法像人类一样成为真正的语言主体。

Llama 3.1 & Mistral Large 2

Llama 3.1[2] 系列模型是Meta发布的迄今为止最强大的开源大型语言模型。Llama 3.1 405B 模型在通用知识、可控性、数学、工具使用和多语言翻译方面具有卓越的性能。此外,Llama 3.1 还提供了 8B 和 70B 模型,这些模型均支持多语言、更长的上下文长度(128K)以及更强的推理能力。Meta 还改进了模型的许可协议,允许开发者使用 Llama 模型的输出来改进其他模型。

Image
X:@danielhanchen

Mistral Large 2[3] 是 Mistral AI 宣布推出了新一代的旗舰模型(大小为123B),该模型在代码生成、数学能力和推理能力上具有显著提升,同时提供了更强的多语言支持和高级函数调用能力。Mistral Large 2 具有 128k 上下文窗口,支持法语、德语、西班牙语、意大利语、葡萄牙语、阿拉伯语、印地语、俄语、中文、日语和韩语等数十种语言,以及 Python、Java、C、C++、JavaScript 和 Bash 等 80 多种编码语言。

Image

Llama 3.1 和 Mistral Large 2 由于其出色的性能可以和GPT-4o、Claude 3.5等顶级闭源模型相抗衡,再次展现了OSS的能力。

Planning for Agents[4]

这篇博客深入探讨了Planning(规划)对于Agent的意义,以及如何改进它。

文中提到了除了通过添加检索步骤或优化提示指令来确保 LLM 获取到足够的信息以进行有效的推理和规划,还可以调整应用的认知架构,包括采用通用认知架构和特定领域认知架构,以改善智能体的推理能力。同时也介绍了使用 LangGraph 工具来实现这一目标。

我们从1年的大模型构建中学到了什么?[5]

O’Reilly 网站发布的文章“What We Learned from a Year of Building with LLMs”,涵盖了六位开发者在使用大型语言模型(LLMs)进行实际应用开发的一系列经验总结和最佳实践,包括提示技术、信息检索、调优和优化工作流程、评估和监控等方面。

Mem0[6]:个性化AI的记忆层

Image

Mem0 为大型语言模型 (LLM) 提供智能、自适应的内存层,通过保留和利用不同应用程序中的上下文信息来增强个性化 AI 体验。这种增强的内存功能使得 AI 能够记住用户偏好、适应个人需求并随着时间的推移不断改进。

LLM性能和价格分析网站[7]

被吴恩达老师点赞的网站。

Image

可以让开发者自由选择不同的模型进行生成质量、速度和价格方面的对比,快速筛选出合适的模型。

LLM API 管理系统[8]

Image
目前支持的模型

智元 Fast API 是一站式API管理系统,将各类LLM API进行统一格式、统一规范、统一管理,使其在功能、性能和用户体验上达到极致。

Album AI[9]

Album AI 使用刚刚发布的gpt-4o-mini和 Haiku 作为廉价的视觉模型,自动识别出相册中图像文件的元信息,然后借助RAG技术,实现了与相册对话的能力。

Image

也就是实现了使用自然语言搜索图片的功能。

参考资料
[1]

大模型是什么?: https://arxiv.org/abs/2407.08790

[2]

Llama 3.1: https://ai.meta.com/blog/meta-llama-3-1/

[3]

Mistral Large 2: https://mistral.ai/news/mistral-large-2407/

[4]

Planning for Agents: https://blog.langchain.dev/planning-for-agents/

[5]

我们从1年的大模型构建中学到了什么?: https://www.oreilly.com/radar/what-we-learned-from-a-year-of-building-with-llms-part-i/

[6]

Mem0: https://github.com/mem0ai/mem0

[7]

LLM性能和价格分析网站: https://artificialanalysis.ai/

[8]

LLM API 管理系统: https://github.com/iimeta/fastapi

[9]

Album AI: https://github.com/gcui-art/album-ai