微软开源 Visual ChatGPT，斩获25k stars！

来源：OSC开源社区（ID：oschina2013)

除了大力投资 Open AI ，微软还亲自下场大搞 AI 。7 天前，微软开源了 Visual ChatGPT ，这个软件可以连接 ChatGPT 和一系列视觉模型，以实现在 ChatGPT 的聊天过程中 发送和接收图像 。
众所周知，尽管 ChatGPT 的功能非常强大，甚至可以用来写小说写论文，但目前也仅限于文字交流。 但表情包早已成为日常文本聊天不可或缺的功能。 Visual ChatGPT 的出现，就像在以文字交流的 APP 中首次添加了表情包功能，而且还是根据用户输入的文本自动生成的 “定制化表情包”，大大提升了 ChatGPT 的趣味性和应用领域。

一方面，ChatGPT（或 LLM）充当通用界面，提供对图像的理解和用户的交互功能。另一方面，基础图像模型通过提供特定领域的深入知识来充当背后的技术专家。 仓库中列出了技术架构及原理图：

Demo 中共进行了三种不同类型的对话，分别是 Visual ChatGPT 接收 用户的图像、Visual ChatGPT 根据用户的文本 修改图像并发送 给用户，以及 Visual ChatGPT 识别图片 ，并回答用户的提问。Visual ChatGPT 会根据用户的输入，判断是否需要使用 VFM  （Visual Foundation Model，视觉基础模型）来处理 该问题。 仓库中还给出了 Visual ChatGPT 所使用的图像模型和显存使用情况：

更详细的内容可以阅读 Visual ChatGPT 的 arxiv 论文： https://arxiv.org/abs/2303.04671 Visual ChatGPT 在 3 月 10 日发布，截至 3 月 16 日早 15 点，该项目已暂获 21.9K Stars ，可谓是火箭式上涨。

相关链接： https://github.com/microsoft/visual-chatgpt - END-

• 征服统计学08|天天在用的P值到底是个啥？
• pythonic生物人去哪了？
• 《ggplot2: Elegant Graphics for Data Analysis》最新中文版来了！
• python可视化52|最有价值50图表（python实现代码分享）
• 详解Python列表推导式|迭代器|生成器|匿名函数
• Jupyter Notebook的16个超棒插件！
• 详解Python Matplotlib (pyplot法)
• 一图胜千言，超形象图解NumPy教程