老董的视界深处

· 东吴证券 · 公司/行业基本面

房地产行业深度报告:地产+AI工具系列报告之八,AI投研如何降本提效——Token、耗时与Skill优化实践

摘要公开阅读;PDF 仅限有效会员阅读与下载,所有会员权限相同。 邮件登录

摘要

东吴证券房地产团队(分析师姜好幸、刘汪)发布'地产+AI工具'系列第八篇深度报告,维持房地产行业'增持'评级,聚焦AI投研降本提效的方法论与实验验证。 报告提出效率评价应从'模型账'上移至'任务账',以质量调整后任务成本(QATC=全部任务成本之和÷通过验收的交付件数量)为统一效率单位,并将Token、耗时与质量作为'三本账'同步计量。 工作流拆解识别出重复读取、上下文膨胀、全文重写和口径返工四类典型隐性成本,主张以Skill连接任务路由、工具调用、证据规则、失败处置和终止条件,其中证据型Skill通过证据卡、口径冲突闸门、程序断言和分层验证降低错误与返工。 P1先导实验中流程型配置获60/60分、其余三组均为56/60,证明'规则写出来不等于执行出来';正式48轮实验(4类任务×4种配置×3次独立重复)累计消耗286,118 Token、总耗时约5小时35分。 实验结论为'难任务见差距、复杂度有边界':T1数据核验四组质量中位数96.7—100,T2长报告审阅仅证据型配置实现100%首次通过(其余三组均为0%),T3估值任务中额外质量闸门反而拖累完成率,T4深度报告四组质量中位数均达100。 团队已将方法论实现为公开平台QATC Lab(qatc-lab.pages.dev),支持Kimi K3、GLM-5.2、DeepSeek V4 Flash三模型对照,累计真实实验已超60次,并建议研究团队按30/60/90天路径沉淀可评测、可回滚的Skill资产。

主要观点

  • AI投研效率评价应从'模型账'上移至'任务账':单次模型价格、Token数或响应速度仅反映局部成本,完整任务还包含检索、数据提取、口径核验、建模、写作、审校及返工,应以'通过质量门槛的完整研究任务'为效率单位,以质量调整后任务成本(QATC)综合衡量模型、工具、人工及返工投入。
  • QATC的分母纪律决定其含义:十次尝试只有六次达标时不能只算六次成功运行的成本,失败尝试同样计入;若一组任务最终没有任何交付通过,QATC应记为不可定义并直接披露零通过,而不是呈现低成本。
  • Token、耗时与质量应作为'三本账'同步计量且须来自同一轮独立运行:Token下降并不必然对应墙钟时间下降,搜索、文件解析、工具调用、人工确认和返工均可能成为关键路径,并需区分平台原生Token、分词器估计与字符代理等不同计量口径。
  • 重复读取、上下文膨胀、全文重写和口径返工是当前AI投研流程中较典型的隐性成本来源:同一份年报被多个阶段或多个Agent重复全文读取、历史对话和工具返回持续携带、局部修改触发整篇报告重新生成、前序口径错误导致分析链整体返工。
  • Skill的核心并非增加Prompt长度,而是将研究经验转化为可执行流程;面向正式投研场景'证据型Skill'尤其值得关注,其核心是将原始材料转化为可追踪的证据对象,并通过口径冲突闸门、程序断言和分层验证降低错误与返工。
  • P1先导实验(政策与行业数据核验任务,六条声明)显示:A无Skill、B提示词+清单、D证据型Skill三组总分均为56/60,仅C流程型Skill得60/60,差异集中在C1和C6——其余三组虽识别到对象替换却判为'部分准确',证明'规则写出来不等于执行出来'。
  • 正式48轮实验由4类任务×4种配置×3次独立重复组成,采用冻结输入、版本哈希和轮换顺序,正式批次累计消耗286,118 Token,总耗时约5小时35分(仅代表该冻结任务、模型和实验版本,不宜外推为真实研究项目成本)。
  • 简单任务与生成型任务中结构化方法优势有限:T1数据核验四组质量中位数为96.7—100,差异更多表现为资源消耗(D组Token中位数3048为最低);T4深度报告四组最终质量中位数均达到100,简单配置可能已能满足交付要求(A组首次通过66.7%,B/C/D均为100%)。
  • T2长报告审阅任务拉开显著差距:仅D证据型Skill组质量中位数达55.7且首次通过率100%,A/B/C三组质量中位数分别为0、4.3、18.6且首次通过率均为0%,表明结构化证据和程序约束的边际价值在错误隐蔽、需系统检查的任务中更易体现。
  • T3估值模型任务显示复杂度存在反例边界:C完成2/3、D仅完成1/3、B三次运行均未完成(处理失败3次);证据账本、质量闸门和返工机制本身也消耗资源,名义上更完整的配置反而可能降低完成率,真正有效的复杂度应能改变结构化状态、阻断错误或减少返工。
  • 证据卡有明确适用边界:QATC Lab证据卡复用实验显示,在仅约800字的短材料上,将材料结构化为多张卡片后输入文本反而显著扩大;当材料达到年报级长度且存在多轮、多问题复用时,一次结构化提取才更容易摊薄成本。
  • 组织落地重点由'个人会不会用AI'转向'能否形成可评测、可回滚的Skill资产'(含七类Skill资产目录与30/60/90天行动表);方法论已实现为公开平台QATC Lab(qatc-lab.pages.dev),提供三模型对照、48轮实验完整公开数据,截至报告完成累计超过60次真实实验,研究员仍保留问题定义、来源与口径裁决、核心假设审查及最终发布责任。

论述逻辑

  • 问题起点→效率口径重构:单次模型价格与响应速度仅反映局部成本→提出以'通过质量门槛的完整研究任务'为效率单位→定义QATC(全部任务成本之和÷通过验收的交付件数量),失败尝试计入成本、零通过披露为不可定义→并拆为Token、耗时、质量'三本账'同轮独立计量,缓存与并行不能替代任务级计量。
  • 口径拆解→泄漏定位:将投研任务建模为问题定义→来源发现→证据提取→分析建模→内容生产→验证交付的六阶段状态机(可回退)→归纳出重复读取、上下文膨胀、全文重写与口径返工四类主要Token与时间泄漏→推论出应以'目录—页段—证据卡'三级索引替代各Agent重复全文摘要。
  • 机制方案→实验验证:从Prompt(描述单次任务)→SOP(固化研究原则)→脚本(确定性计算)→Skill(连接任务路由、工具调用、证据规则、失败处置、终止条件)→证据型Skill以证据卡+口径冲突闸门+程序断言+四层验证守住质量边界→P1先导证明'规则写出来'与'规则执行出来'存在工程差异→正式48轮实验验证'难任务见差距、复杂度有边界',自然语言清单在困难任务上既不提高质量也不降低成本。
  • 实验结论→组织落地:方法收益具有任务依赖性(数据核验看成本、长报告审阅看质量与首次通过、生成任务简单配置即可)→归纳结构化读取、证据复用、程序计算、有限预览、局部修改、分层验证、显式终止等有效机制与并行Agent双重效应、真优化与伪优化判别→沉淀七类Skill资产、版本治理与回归测试→公开平台QATC Lab提供可测量效率证据→最终结论:降本提效核心是减少'没有新证据、没有状态变化、没有质量贡献'的重复工作,把模型从证据搬运中解放出来。

关键展望

  • 评级展望:报告维持房地产行业'增持'评级;按东吴证券行业评级标准,增持指预期未来6个月内行业指数相对强于基准5%以上。
  • 后续验证点:同一配置重复运行的消耗可能存在明显差异,'结构化流程是否降低方差'应作为后续扩大样本时的重要观察指标;实验每组合仅3次独立重复,不足以形成统计显著性结论。
  • 落地时间窗口:报告为研究团队给出30/60/90天行动表(对应正文7.4节),建议优先将高频、流程稳定、错误代价较高且结果可验证的任务Skill化,并建立统一日志、固定任务集、版本管理和回归测试。
  • Skill生命周期治理规则:按'候选—先导—稳定—退役'管理;若新版在固定任务集上出现重大事实错误、关键公式退化、来源绑定下降、处理失败显著增加或无法复现稳定版本,应停止推广并回滚。
  • 前瞻判断:'方法论+可验证平台'的组合可能成为继数据接口之后投研工具的新形态——不只是提供数据,而是提供可测量的效率证据;QATC Lab平台持续记录每次实验的平台原生Token、墙钟耗时、质量分与人民币成本。
  • 风险提示(六项):实验样本数量及任务代表性不足(每组合仅3次重复);模型及平台版本变化;大模型幻觉及数据口径判断偏差;Token、缓存和成本计量口径不一致;Skill过度固化及流程复杂化;数据安全、权限及合规风险。

推荐标的

  • 报告未明确给出个股推荐标的、评级或目标价:本篇为'地产+AI工具'系列方法论研究,聚焦AI投研效率框架与实验验证,仅维持房地产行业整体'增持(维持)'评级。

查找相关研报 →