AI 重构 UGC 内容生态:酒店点评场景的三大技术实践
文章概览
引言
质量守卫:AI驱动的“秒级”极速审核体系
决策加速:多模态AI点评摘要的精炼与质量控制
价值闭环:基于差评分析的酒店静态信息纠错
总结与展望
作者介绍:
王升文,2021年加入去哪儿旅行国内酒店团队,酒店UGC业务技术负责人。
引言
在OTA领域,UGC(用户生成内容)是转化的核心驱动力。据统计,约30%的用户在下单前会深度浏览酒店评价,且90%的用户平均浏览量超过20条。然而,面对日均数万条的新增点评,传统的“人力审核+关键词”模式正面临前所未有的挑战:审核时效性差(平均延迟高达8小时)、内容冗杂导致用户阅读成本高、差评中蕴含的结构化价值被大量浪费。如何高效治理海量内容、提升信息决策效率、并利用负向反馈反哺基础信息质量,成为平台必须突破的瓶颈。
针对上述痛点,我们依托大语言模型对酒店点评的“入库、呈现、反馈”全生命周期进行了AI化重构,构建了三大核心应用场景:
质量守卫:AI驱动的“秒级”极速审核体系 通过多模态大模型替代人工,结合实时触发与异步并行架构,将点评审核延迟从平均8小时压缩至2秒,准确率提升至99.6%,彻底解决高峰期待审堆积与人工标准不一的问题。
决策加速:多模态AI点评摘要的精炼与质量控制 利用AIGC技术生成结构化点评摘要(全局总结+场景标签+精选相册),帮助用户10秒掌握酒店全景口碑,将浏览5条以上点评的用户比例显著降低,提升决策效率与转化率。
价值闭环:基于差评分析的酒店静态信息纠错 首创通过AI分析差评中的“货不对版”描述,自动比对酒店基础信息库,识别准确率超90%并触发修正工单,解决了人工难以发现的上百项信息错标漏标问题,有效提升用户留存意愿。
一、质量守卫:AI驱动的“秒级”极速审核体系
1.1 业务背景与挑战
在 AI 赋能前,酒店图文点评长期依赖纯人工审核,面临流量突增与高质量审核双重挑战。平台日均处理数万条点评,节假日、旅游旺季待审量翻倍,人工受限于人数与 8 小时工作制,极易出现大量积压,高峰期待审池超万条,点评从发布到露出平均耗时 8 小时,既影响用户分享意愿,也降低消费者决策效率。
更核心的是审核机制存在先天不足:一是人工审核标准难统一,60 多条细分规则下,面对隐晦讽刺、软色情暗示等模糊场景,易因主观差异出现误审、漏审,引发投诉;二是传统系统采用 “离线定时拉取 + 串行过滤链”,需经过十余个串行节点,单条耗时数十秒,成为效率瓶颈;三是人工扩容能力差,新增审核人员需提前一个月培训考核,无法应对突发流量洪峰。
1.2 技术方案:两步式重构与分层过滤架构
为彻底解决人工审核的效率、准确性与扩展性难题,我们采用 “分步突破、全面升级” 的策略,完成了从 “人工驱动” 到 “AI 驱动”、从 “离线批量” 到 “实时秒级” 的双重跨越,构建了 “传统策略预过滤 + LLM 深度审核 + 异步任务编排” 的复合架构。
1.2.1 第一步:AI 大模型替代人工,破解核心产能瓶颈
我们率先引入 多种多模态大模型进行评测,全面替代人工审核环节,从根源上解决 “人数限制” 与 “峰值应对” 问题。相比人工审核,AI 大模型具备三大核心优势:
无限扩容能力:AI 审核能力可通过动态扩容服务器资源实现弹性伸缩,高峰期只需通过调度系统增加计算节点,即可在分钟级提升审核吞吐量,无需额外的人员培训、流程适配,完美应对 “离店集中点评” 带来的突发洪峰,彻底终结待审队列堆积现象;
标准绝对统一:大模型通过对 60 余条细分规则的精准学习与固化,能够以 100% 的一致性执行审核判断,消除人工主观差异导致的误审、漏审问题,尤其在 “隐晦辱骂”“软色情暗示”“变相广告” 等复杂场景中,通过语义理解与多模态分析,识别准确率远超人工;
全时段无间断运行:AI 模型无需休息,可 7×24 小时持续处理审核任务,确保无论用户在凌晨还是节假日发表点评,都能得到即时响应,为后续 “秒级露出” 奠定基础。
通过技术调研,跑通了运营审核的SOP,确定AI可以替换人工审核。但是,AI审核的质量缺少评估标准,即AI审核达到什么水平可以上线接管人工审核。我们采取的方式是采用陪审团的机制,通过对比AI审核结果和历史人工审核结果,进行多轮评测优化,得到AI审核的最终准确率,最终判断是否可以上线接管人工审核。
1.2.2 第二步:系统架构全面升级,实现真正 “秒级审核”
在 AI 替代人工的基础上,我们针对传统审核系统的 “离线模式” 与 “串行架构” 两大痛点,进行全链路技术升级,将审核延迟从 “小时级” 压缩至 “秒级”。
(1)模式重构:从 “离线批量拉取” 到 “实时触发推送”
摒弃传统每小时批量拉取待审数据的模式,重构数据流转链路:用户发表点评后,系统通过消息队列(MQ)实时触发审核请求,将点评数据(文本 + 图片 / 视频)即时推送至审核平台,无需等待批量调度,彻底消除 “数据在队列中等待拉取” 的延迟,这一步将审核前置延迟从平均 30 分钟压缩至毫秒级。
(2)架构升级:从 “串行过滤链” 到 “异步并行编排”
对原有十余个串行审核节点进行服务化拆分与重新编排,设计 “同步核心校验 + 异步非核心检测” 的混合流程:
同步核心校验:将反作弊检测、敏感词过滤、黑名单校验等耗时短(≤50ms)、影响审核结果的核心节点保留为同步执行,确保审核准确性的基础上,快速完成初步筛选;
异步非核心检测:将图片摩尔纹检测、视频安全审核、深度风控校验等耗时较长(3-5 秒)的节点改为异步执行,通过回调机制反馈结果 —— 点评先经过同步核心校验后,若未命中违规规则,即可先放行露出,后续异步节点若检测到违规,再通过系统自动下架,既保证了 “秒级露出”,又不遗漏任何安全校验;
预过滤优化:在核心校验环节前,使用 20 余项轻量化预过滤节点,包括基于内存计算的 userDeleteFilter(用户主动删除标记校验)、blackUserFilter(黑名单用户快速拦截)、cheatingOrderFilter(虚假订单关联点评检测)等,这些过滤节点无需调用复杂服务,在内存中即可秒级完成计算,直接拦截 30% 以上的无效、违规内容,减少后续 AI 审核的计算压力。
1.2.3 极致性能优化:并发与耗时压缩
为进一步夯实 “秒级审核” 的稳定性,我们针对审核全流程进行性能攻坚:
并发能力提升:对 AI 审核服务、预过滤算子、异步检测节点进行并发改造,通过线程池动态调整、请求分片处理等方式,将单节点的并发处理能力提升 10 倍,支持每秒处理 500 + 条点评审核请求;
图片审核提速:图片审核采用 “异步回调 + 并行处理” 机制,将单张图片的审核耗时从原来的 3 秒压缩至 500ms 以内,P50(50% 的请求耗时)控制在 500ms,P99(99% 的请求耗时)不超过 2 秒;
1.3 落地效果:质量与效率的双重飞跃
通过 “AI 替代人工” 与 “系统架构升级” 的两步式重构,酒店图文点评审核体系实现了质的飞跃,核心指标全面超越预期:
审核效率:从 8 小时到 2 秒的突破:用户点评从发表到最终露出的平均延迟,从原来的 400 分钟(约 8 小时)直降至 2 秒,99% 的点评可在 1 秒内完成审核并露出,彻底满足了用户实时分享的需求,点评发表量同比提升 15%;
审核质量:准确率再创新高:AI 大模型的语义识别能力结合标准化执行,使审核准确率从人工的 99% 提升至 99.6%,误审率降至 0.4% 以下,违规内容漏出率控制在 0.1% 以内,远低于行业平均水平;
成本节省:释放大量运营人力:AI 完全替代人工审核后,每年可为业务节省大量运营人力成本,原审核团队可转向用户服务、客诉等更高价值的工作;
峰值应对:从容承接 5 倍流量:在旅游旺季的点评洪峰期,系统通过动态扩容与异步编排,成功承接了单日数万条点评审核请求,无任何队列堆积,审核延迟仍稳定在 2 秒以内,系统稳定性达到 99.99%。
Before(方案落地前)
点评运营人力投入大
用户点评等待审核时间过长,平均8小时。
After(方案落地后)
点评运营人员减少,转去支持其他高优任务
AI自动审核耗时短,用户点评审核时间8小时->2秒
AI自动审核规则执行稳定,准确率99.6%,高于人工
二、 决策加速:多模态AI点评摘要的精炼与质量控制
2.1 业务背景
酒店点评作为用户预订决策的核心参考依据,承载着连接用户需求、酒店实际体验与平台价值的关键作用。平台依托丰富的点评资源,为用户提供了充足的参考基础,但与此同时,点评相关的各类痛点也日益凸显,严重影响用户决策效率、平台体验及酒店转化效果。
为解决用户点评阅读效率低、信息杂乱等核心痛点,激活平台海量点评资源价值,衔接用户需求、酒店体验与平台发展,我们提出落地AIGC点评摘要生成项目,通过AIGC的总结提炼、情绪过滤能力,生成客观、简洁、全面的点评摘要,优化用户预订决策体验,缩小酒店与用户的信息差,最终实现用户、酒店、平台三方共赢,打造平台差异化竞争优势。
2.2 多维度多场景总结模式
针对用户 “阅读耗时久、核心信息难抓取”、“关注维度差异化” 的核心痛点,我们打造 “全局总结 + 场景标签总结” 双核心模式,搭配 “精选相册” 可视化补充,既实现信息的高效浓缩,又满足精准筛选需求。
2.2.1 全局总结:10 秒掌握酒店全景口碑
核心价值与优势:
对用户:告别 “逐条刷点评” 的低效模式,10 秒获取酒店整体画像 —— 涵盖优势亮点(如环境、服务)、待改进点(如餐饮、设施)、适配场景(如亲子、商务),直接缩短决策周期 60% 以上;
对酒店:核心优势被集中放大(如 “管家服务贴心” 被高频提及则重点突出),待改进方向精准呈现(如 “早餐种类少”),为运营优化提供明确依据;
对平台:将海量碎片化点评转化为结构化核心信息,降低用户使用门槛,提升平台信息处理效率与核心竞争力。
呈现效果示例:
2.2.2 场景标签总结:精准匹配用户个性化需求
核心价值与优势:
对用户:支持 “按需找信息”,无需浏览无关内容 —— 商务用户可直接查看 “位置(交通便利性)、服务(接待效率)”,亲子用户聚焦 “环境(儿童设施)、房间(空间大小)”,美食爱好者重点关注 “餐饮(菜品口味、种类)”,精准命中需求痛点;
对酒店:各场景优势与短板一目了然(如 “位置” 场景好评率 92%,“餐饮” 场景好评率 78%),便于针对性优化薄弱环节,强化优势场景竞争力;
对平台:实现点评信息的精细化分类,提升信息分发效率,让不同需求用户都能快速找到价值点,增强平台使用粘性。
五大场景标签呈现:
呈现效果示例:
2.2.3 精选相册:可视化补充,增强信息可信度
精选相册并非简单堆砌有图点评,而是通过严格筛选标准,从平台有图・视频点评中,精准挑选 高质量实景内容,既打造沉浸式浏览体验,又通过优质视觉呈现强化用户预订意愿,实现 “视觉种草” 到 “下单转化” 的闭环。
核心价值与优势:
对用户:
沉浸式浏览体验 —— 无需在海量杂乱照片中筛选,直接聚焦高清、真实、有代表性的优质内容,搭配 “大图预览 + 滑动切换 + 场景分类” 交互设计,仿佛 “云逛酒店”,快速建立对酒店的直观好感;
降低决策顾虑 —— 高质量照片真实还原酒店细节(如房间采光、餐饮品相、园林景观),与文字摘要相互印证,避免 “图文不符” 风险,增强预订信任感;
对酒店:
放大核心优势 —— 酒店的优质硬件(如豪华装修、特色设施)、景观资源(如海景、山景)、服务场景(如贴心接待、亲子互动)通过高质量照片精准传递,强化品牌形象;
激发消费欲望 —— 视觉化呈现 “理想入住场景”(如家庭在园林野餐、情侣在露台观景、商务人士在会议室办公),戳中用户情感需求,直接提升下单转化率;
对平台:
提升内容吸引力 —— 优质视觉内容让点评摘要更生动,降低用户阅读疲劳,提升页面停留时长;
强化差异化优势 —— 区别于普通点评平台的杂乱图片展示,精选相册的 “高质量 + 强交互” 设计,成为平台核心竞争力之一。
呈现效果示例:
2.3 技术方案
本次项目围绕酒店点评数据,通过情感标签提取、AI 摘要生成、缓存优化及前端交互,为用户提供结构化、高可读性的点评摘要服务。
✅ 1. 观点辨识度:明确区分“大多数用户”“部分用户”及总结后的观点与体验,不混淆群体反馈;✅ 2. 真实性:严格基于真实用户评论,不虚构、不夸大任何体验细节;✅ 3. 故事性:提炼评论中的故事性元素,增强总结吸引力;✅ 4. 情感色彩:传递真实评论情感,采用贴近用户日常交流的口吻;🔧 内容调整规范:🔸 1. 去除重复:自动检测并删除、合并重复表述;🔸 2. 语言润色:保证语言自然流畅,贴合真实用户口吻;🔸 3. 突出重点:优先强调评论中最核心的反馈点;🔸 4. 增加过渡:正负向情感、不同用户群体观点间添加适配过渡语;⚠️ 禁忌事项:❌ - 不提及人名、英文名、代称,不使用第一人称;❌ - 不过度强调负面评论,仅突出普遍且重要的负面反馈。
2.3.1 图片摘要生成
初始化(基建)
对所有酒店点评图片进行质量打分和图像分类打标,覆盖 17 类图像分类(房间、周边、公共区域、卫生间、餐饮、户外泳池、外观、走廊、前台、停车场、餐厅、健身房、室内泳池、儿童乐园、水上乐园、台球厅、会议室)。
图片质量分用于后续精选和封面选择,分类标签用于与文本情感标签映射。
精选相册生成
每个酒店按图像分类筛选,每个分类取质量分最高的 10 张图片,作为该分类的精选相册图片。
分类、展示顺序及每个分类的展示数量,通过 Config 配置灵活控制。
封面图片生成
默认列表封面:取前 3 个图像分类中质量分最高的各 1 张图片,共 3 张作为默认封面。
标签列表封面:
若该标签需要大模型映射,则通过 大模型异步获取映射关系(核心是 Prompt)。
若无需 大模型映射,则从 QConfig 中直接读取预设映射关系。
2.3.2 文本摘要生成
1. 最小生成单元
首先,我们先定义核心集合:
R:酒店所有房型的集合(如大床房、双床房、套房等)
T:点评类型的集合
L:点评标签的集合(如性价比、卫生、服务等,共 29 项)
最小生成单元 可表示为三者的笛卡尔积:U =R × T × L
2. 负向内容展示规则
前 40 条点评中存在负向内容且非极端观点,则在 “部分人” 观点中展示负向总结。
符合负向调控策略的内容,按策略进行处理(流程进行中)。
2.3 酒店 AI 点评摘要质量评测指标体系
2.3.1 核心评估目标
通过人工抽检标注 + 大模型多轮回扫 + 黑名单机制,构建覆盖全流程的质量管控体系,确保酒店 AI 摘要语义流畅、信息准确、特色鲜明,满足用户阅读体验与业务合规要求。
2.3.2 抽检样本筛选策略
样本范围:从北上广三个城市的有产出酒店中,筛选 300 家酒店作为核心评测池。
分层抽样规则:
按酒店评分:在 [0,3)、[3,4)、[4,4.5)、[4.5,4.9)、[4.9-5] 五个区间各抽取 20% 样本。
按酒店星级:在一星至五星五个等级中各抽取 20% 样本。
按点评量级:在 [40,100)、[100,500)、[500,1000)、[1000,10000)、[10000,+) 五个区间各抽取 20% 样本。
2.3.3 质量评估标准
允许审核通过的摘要内容需满足语义流畅性、信息全面性、特色辨识度及良好的阅读体验,以下为审核不通过的标准:
2.3.4 核心评价指标
2.3.5 评测结论
本次共完成 100家酒店 的AI摘要质量评测,覆盖北上广三地有产酒店,严格按照既定抽检策略、审核标准执行,结果真实反映当前AI摘要整体质量水平。
2.4 落地效果
AI摘要上线后,显著降低了用户的阅读费力度,用户在详情页的转化率得到了可观的提升。
浏览5条以上的用户减少,浏览5条以下点评的用户增加,用户浏览点评费力度下降
三、 价值闭环:基于差评分析的酒店静态信息纠错
这是我们最具创新性的实践——通过“用户负反馈”提升酒店静态信息质量。
1.1 业务背景与挑战
酒店静态信息是用户下单前的关键决策信息,而酒店业主在维护上百项静态信息时,经常出现错标、漏标等现象。最常见的比如无窗标为有窗,漏标假窗,收费停车场标免费停车场等等,这会给用户造成虚假宣传的体感,从而引发投诉或者用户流失,往往一个酒店经常会影响成百上千个酒店,对平台影响非常大。然而,对酒店静态信息纠错缺少抓手,人工检测难度大成本高,存在一定挑战。
核心指标:URS与UPS
为了衡量用户留存,我们引入了:
URS(User Retention Sentiment): 用户留存意愿,作为核心指标。
UPS(User Perceived Score): 用户感知得分,针对价格、体验、信息准确性进行具体量化。
通过定义测量发现,当前体验URS 中酒店“货不对版”是和核心问题之一,解决酒店“货不对版”问题,可大幅提升用户体验。
1.2 业务方案:AI分析差评驱动酒店信息纠错
酒店静态信息错综复杂多达上百项,用户差评更是成千上万条,首要目标是先定位到用户最关注,且最容易出错的静态信息,然后通过AI分析差评验证酒店是否存在信息错误。
经过定义测量发现,窗户、空调、押金、暖气、停车场、周边环境、面积、床型在用户问卷中负向反馈占比最高。因此我们对每个酒店的8项关键信息进行AI分析,驱动酒店静态信息纠错。
我们通过AI分析差评:
特征提取: AI识别出差评中的具体矛盾点(如“明明写着有窗户,结果没有窗户”)。
自动对账: 系统自动对比酒店基础信息库,识别信息不一致率。
闭环治理: 识别准确率达85%以上。系统自动触发工单至商家或运营进行信息修正,实现“用户评价 -> 平台识别 -> 商家修改”的良性循环。
1.3 呈现效果示例
AI分析差评不仅解决了酒店的“货不对版”问题,同时为平台节省了大量的平台运营成本,传统人工分析万条差评需要15人/日,AI分析仅需要0.5人/日。
同时实验数据表明,信息质量UPS的提升直接带动了URS的增长,也为用户带来了良好的体验,实现了AI驱动的信息纠正闭环。目前AI信息纠错已进入日常运维流程,周期性对全平台酒店信息纠错,成为平台静态信息的“天眼”。
四、 总结与展望
实践总结
本次实践核心是依托LLM推动OTA酒店点评业务从“人工驱动”向“AI驱动”转型,实现效率、成本与价值的三重优化,核心成果如下:
一是点评入库环节,重构审核体系,将审核延迟从8小时压缩至2秒,准确率达99.6%,年节省大量人力成本,可高效承接高峰期数万条点评;二是点评呈现环节,打造多模态AI摘要模式,帮助用户提升决策效率,激活点评资源价值,摘要整体通过率88.6%;三是点评反馈环节,构建差评驱动的静态信息纠错闭环,聚焦8项核心信息,识别准确率超90%,有效提升用户感知与留存。
本次实践完成了Java业务系统与大模型API的高效集成,实现了从“内容治理”向“业务提效及资产化”的跨越,所有项目均纳入日常运维,实现常态化运转。
未来展望
后续立足现有成果,务实推进迭代,重点围绕三方面发力:
一是优化现有项目,降低AI审核、摘要及纠错环节的偏差率与耗时,提升系统稳定性;二是深化LLM与业务融合,挖掘酒店服务优化、个性化推荐等务实场景,降低技术调用成本;三是强化运维与风控,完善监控及评测体系,沉淀可复用规范,支撑后续落地。