以现实中的展架和亚克力包装盒作为参考,搭配米色墙纸和下午三点的阳光,打开应用,宛若泡上下午茶站在展架前静静欣赏。将来可无缝过渡到 Vision Pro 平台,打个响指,这个虚拟展架就穿越虚实边界,出现在你的房间。Vision Pro 版本概念设计
现代化风格:
现代化瀑布流视图,每个藏品都被放置在圆角矩形卡片内,保持框架的一致性和秩序,兼容各类异形藏品。黑色背景可衬托物品的高档感。还可以切换到宫格视图,信息密度更大。藏品越多,越有成就感。你更喜欢哪一种,各自的优缺点是什么?诚邀各位读者朋友在评论区点评指教。▍麻烦事,交给 AI 去做当你想要录入一件藏品的时候,你一定不愿意面对一张表格,逐一填写名称价格年份品牌,林林总总十几项。有的原始数据自己也不记得,还要跳出去查询。看到这么多要填的,头都大了在 AI 时代,能让机器完成的,就不要自己动手。我们把目标设定为「拍一张图就搞定一切」:
Step 1:拍照/导入图片
Step 2:AI 识图,制作藏品签
Step 3:用户小修小改
这事看起来简单,碰到的难题可不少。先说说以图识图。主流解决方案有三个:搜索引擎以图搜图、多模态大模型识别、电商平台拍照购接口。前两个方案的命中率不高,通常能得出品类(如手机、鞋、工艺品),但想要准确的藏品名称型号就很难,在测试集里的命中率不到 30%,加了跟没加一样。然后是阿里百炼等平台的商品搜索 API,命中率确实大幅度提升至 85%,藏品概况也很详细,毕竟背后有电商平台的商品源作为支撑。但是这个接口的费用实在是太贵了,每个月的基础费用就接近一千。达到一定的用户规模以后,可以考虑接上。所以在第一版交互里,需要简单描述藏品名(当然也可以顺势写个小作文),其余的交给 AI,它会联网搜索补全藏品的品牌、年份、价格、基本信息、媒体评价、收藏价值等等,还会根据你的小作文,做更深入的藏品介绍。简单描述藏品名称,剩下的 AI 来补全再来说说 3D 扫描建模。3D 扫描原先作为首版必达的需求,也确实在初版里调用了 iOS 自带的 3D 扫描接口,充分利用 iPhone 硬件的优势。但囿于 iPhone 自带的 LiDar 激光传感器的精度,只适合扫描建筑等大型物体。在扫描手办、手表、硬币这种小尺寸物件的时候,清晰度捉襟见肘。原本一个精美的拉姆,扫描完了就变成了邪典拉姆。iPhone LiDar 的 3D 扫描效果用户辛辛苦苦扫描了十分钟,最后得到的建模完全不具备可用性,只好含泪砍掉。一条路走不通,就试试别的路。我们先后研究了市面上各类 3D 建模解决方案和开源成果,从高斯喷溅、测量摄影到当下流行的 AI 图生成建模,还斥巨资购买主流民用 3D 扫描仪。四千元档扫描仪,和小朋友一起折腾东京大学生产技术研究所的工业级 3D 扫描仪以下是不同扫描技术的成果展示:高斯喷溅、3D 扫描仪、AIGC 生成等技术方案的效果坏消息是,截止现在我们仍然没能找到可用性、易用性、成本三者之间取得平衡的手机端解决方案。一个藏品的录入时间长达十分钟,对扫描技巧(布光、角度)有一定要求,单品云端计算的成本在 5-10 元,民用扫描仪更是高达三四千元。这三个指标注定不是大众用户可以接受的。所以这个版本,我们现用静态图抠像生成封面图为主。实际效果倒也不赖:好消息是,研究建模的过程,也是我们在整个项目中学到最多新知识的环节,接触了大量有意思的研究学者和创新项目,譬如东京大学 CV 领域的老师同学、海外的 Beautiful things 和国产之光 Kiri Engine,受益匪浅。在交流中我们达成了一个共识:未被满足的需求往往蕴含商业机会。如果虚实融合是大势所趋,那么低成本高精度的移动端扫描建模解决方案一定有非常高的价值,不限于收藏,在 3D 打印、内容创作、兴趣社交电商等领域都大有可为。这在业内目前还是空白。我们将持续研究这一课题,也欢迎有相关技术背景的伙伴私信交流,共同探索更优的 3D 扫描建模方案。▍「守护姨夫的微笑」和「锤科残党」在最早的设计里,我们借鉴了量化统计 app 的常见做法,有一个专门的统计页面,可以用条形图环形图热力图来看自己的收藏数据。但 demo 用下来,除了形式上的酷炫,并没有解决实际需求。随后进行大刀阔斧的简化,在主界面搭配筛选器,就可以明晰地看到某个品牌、年份、星级下的藏品分布情况,动态切换,直接定位。按照年份、品牌和星级进行排序和统计然后把统计功能放在展柜的顶部,由 AI 统计、概述数据。像极了博物馆专题馆的「前言」。每个藏柜,自成一展。你好,锤科残党值得一提的是,AI 会根据你的藏品数据和收藏偏好,颁发一些恰如其分的「成就」——我的称号分别是「守护姨夫的微笑」和「锤科残党」。当然,只有到达一定收藏规模以后才能触发,算是一个小彩蛋^-^。▍用一个 App,起一个号最后,我们希望这款工具成为连接小红书和闲鱼的「中间件」。即使用户不擅长设计,也可用它一键生成精美的藏品封面和内容介绍,以提升社媒账号的逼格:藏品封面设计稿我在小红书注册了个小号,叫做「海舟的博物馆」,本意是做不同功能的 A/B Test,结果获得了意料之外的点击量,最高的点击破十万,算是用一个 app 起了一个号,买了一碟醋送了一顿饺子。从录入、观赏,到统计和分享,至此,整个「大收藏家」的链路初步完备。▍诚邀内测,共创送码电影《头号玩家》中,有一个名为「哈利迪档案馆」的虚拟博物馆,它是绿洲的创始人詹姆斯·哈利迪留下的虚拟博物馆,其中存放了他一生的记忆、灵感和重要时刻。大收藏家瓦尔特·本雅明也曾说过,「物之所以珍贵,盖因其为私人时刻之容器」 。希望这个项目,能让你的藏品讲出自己的故事,让 AI 成为你的馆藏助理。诚邀各位感性的读者以及收藏爱好者加入我们的共创群,这里会提供包括 VIP 兑换码和实体奖品作为答谢。iPhone 用户现在就可以扫码添加运营同学账号,或者私信留言,获取内测链接。扫码进群,参与内测安卓版本尚未完工,敬请期待。最后,感谢少数派提供平台,这个项目从一开始,就离不开少数派的启发、鼓励和支持,希望今后有更多有意思的项目能与诸位交流!原文链接:https://sspai.com/post/96845?utm_source=wechat&utm_medium=social作者:朱海舟 责编:克莱德/ 更多热门文章 /