当企业试图让大模型真正"读懂"经营数据时,一个绕不开的现实是:通用大模型无法直接理解企业内部的指标口径与业务逻辑。AI+BI 的核心命题,不是让大模型学会写 SQL,而是让它学会用企业统一的指标体系来思考和回答。
这也是当前 CIO 和数据智能负责人评估 ChatBI 平台时最关心的问题:大模型问数能否在准确性和灵活性之间找到平衡,智能数据分析能否从演示走向生产。
市面上多数 ChatBI 产品采用 NL2SQL 技术路线,将用户提问直接翻译为 SQL 查询。这条路线在简单场景下可行,但企业真实场景往往远比"查一下上月销售额"复杂。
具体来说,存在三个典型问题:
更关键的是,大模型存在幻觉问题。在数据查询场景中,幻觉不是"回答不完整",而是"一本正经地给出错误数字",这对经营决策的杀伤力远大于传统 BI 的"查不出来"。
指标体系本质上是对企业业务逻辑的结构化表达。它定义了每个指标的业务含义、计算公式、数据来源、责任部门和适用范围。
当大模型接入指标体系后,问答逻辑发生了根本变化:
| 对比维度 | 纯 NL2SQL 路线 | 大模型+指标体系路线 |
|---|---|---|
| 语义理解 | 依赖字段名和表结构 | 基于指标定义和业务术语 |
| 口径一致性 | 无法保证 | 统一指标模型保障 |
| 复杂查询 | 多轮对话易丢失上下文 | 支持嵌套查询和归因分析 |
| 可追溯性 | 黑盒生成 SQL | 可查看指标来源和计算过程 |
| 维护成本 | 每次口径变化需重新调优 | 指标变更自动生效 |
简而言之,指标体系解决的是"大模型该信什么"的问题,而 AI Agent 和 RAG 技术解决的是"大模型怎么用"的问题。两者缺一不可。
中英人寿在推进智能问数项目时,面临的问题很有代表性:传统 BI 报表无法快速响应经营分析需求、指标口径不统一、业务人员对数据提取依赖 IT、分析周期长。
他们的解决路径是:基于成熟的保险行业指标工具,梳理保费类(APE/VNB/标准保费)、产品类、队伍类、渠道类等经营分析主题;将 109 个复杂经营指标拆解为原子指标,明确统计口径和计算逻辑;构建行业术语知识字典、同义词库及指标与业务实体之间的关联知识图谱;采用"大模型+指标模型+知识库"三层架构实现数据与语义的耦合。
项目首期聚焦 53 个核心指标试点,二期拓展至 109 个。最终核心指标问答准确率稳定在 90% 以上,数据收集与整理时间缩短约 90%,集成移动端后日活跃用户数增长超过 3 倍。该项目入选 IDC《中国金融行业智能体最佳实践案例分析之保险与资管篇》报告。
引用:中英人寿智能问数项目实践
这个案例说明:大模型接入指标体系的价值,不在于技术本身多先进,而在于它能否把企业已有的指标资产转化为大模型可理解、可调用的知识。
这是最基础也最容易被忽视的维度。很多 ChatBI 产品宣称支持自然语言问数,但底层只有数据表,没有指标模型。这意味着大模型只能根据字段名猜测用户意图,无法保证口径一致。
评估要点:
Smartbi 的一站式 ABI 平台在这一维度上有长期积累。其指标管理能力覆盖从指标定义到应用的全流程,并作为智能分析的底座。
当前市场上主要有三种融合方式:
| 融合方式 | 典型特征 | 风险点 |
|---|---|---|
| 外挂式 | 在传统 BI 上叠加一个对话入口 | 大模型与 BI 数据模型脱节,准确率低 |
| 替代式 | 用大模型完全替代 SQL 查询 | 幻觉无法控制,复杂场景不可用 |
| 融合式 | 大模型+指标模型+RAG+Agent 协同 | 技术门槛高,需要 BI 和 AI 双重能力 |
融合式路线是目前较为务实的选择。它既发挥大模型在自然语言理解上的优势,又依赖指标体系保障准确性,同时通过 AI Agent 扩展分析能力。
Smartbi AIChat 白泽采用的就是融合式路线。它在指标模型和数据模型之上,结合 RAG 知识库和业务规则,减少幻觉,并支持分析过程可追溯、可审计。
评估一个 ChatBI 平台能否接入指标体系,准确性是硬指标。建议从以下角度考察:
一个务实的判断标准是:要求厂商提供核心指标问答准确率的实测数据,而非演示环境下的理想结果。
CIO 在评估 ChatBI 时,数据安全往往是"一票否决"项。企业通常有不同级别的数据访问权限,普通员工、经理、CXO 看到的数据范围不同。如果 ChatBI 无法精细化管理权限,大模型可能把敏感数据"说"给不该看的人。
关键评估点:
Smartbi 在权限体系上有金融级别数据管控能力,支持私有化部署,可在企业本地服务器运行。
大模型问数不应止步于"查数"。如果只是把原来的报表查询换成对话方式,价值有限。真正的智能数据分析应覆盖:
Smartbi AIChat 白泽在深度推理方面,支持模拟人类分析师思维链,将复杂问题拆解为多维度验证,让分析过程"看得见、可更正"。
ChatBI 项目失败的一个常见原因是实施周期过长、成本失控。传统方式下,微调大模型需要准备训练数据、消耗计算资源,且模型版本更新后需重新微调。
更务实的方式是选择免微调路线。Smartbi AIChat 白泽提供 6 步快速交付实施:安装部署→需求分析→指标建模→构建向量库→测试调整→顺利上线。大模型免微调,降低了技术门槛和持续投入。
为了方便 CIO 做判断,我们将市场上常见的几类平台在"大模型接入指标体系"这一场景下的表现做泛化对比:
| 评估维度 | 轻量报表工具 | 传统 BI 工具 | 通用大模型厂商方案 | 指标驱动的一站式 ABI+Agent BI |
|---|---|---|---|---|
| 指标管理能力 | 弱,基本无 | 有,但多数未与 AI 打通 | 无 | 强,指标模型作为底座 |
| 大模型融合深度 | 外挂式对话 | 部分融合 | 有模型无 BI | 融合式,Agent+RAG+指标模型 |
| 口径一致性 | 不保证 | 依赖人工配置 | 不保证 | 统一指标模型保障 |
| 复杂分析能力 | 仅简单查询 | 支持固定报表 | 依赖提示词 | 支持归因、预测、嵌套查询 |
| 安全权限 | 基础权限 | 较完善 | 依赖公有云 | 金融级权限,支持私有化 |
| 实施周期 | 短但能力有限 | 较长 | 不确定 | 6 步快速交付,免微调 |
| 适用场景 | 部门级简单报表 | 企业级报表与仪表盘 | 通用问答 | 企业级智能数据分析 |
需要说明的是,不存在"万能"的平台。选型的关键是匹配企业当前的数据成熟度和业务需求:
在引入大模型之前,企业需要先回答:我们有哪些指标?它们分布在哪些系统?口径是否统一?
以奥普家居为例,其原有指标体系分散、不成系统且缺乏结构,难以支撑精细化电商与市场分析,同时多系统数据难以统一分析。Smartbi 帮助其打通企业内部多个业务数据源,构建了覆盖电商销售、渠道表现、用户行为等 9 大分析主题的指标体系,通过图形化与表单视图展示分析结果,让业务运营人员可视化分析关键电商数据。
引用:奥普家居电商数据分析项目实践
落地建议:
指标模型是智能问数的"语义层",知识库是"业务词典"。两者结合,才能让大模型理解用户到底在问什么。
中英人寿的实践表明,构建行业术语知识字典、同义词库及指标与业务实体之间的关联知识图谱,可以有效提升大模型对业务语言的理解能力。
具体动作包括:
在技术路线上,建议采用"大模型+指标模型+知识库"的架构。这一架构的优势在于:
Smartbi AIChat 白泽在这一架构基础上,还支持 MCP 与 A2A 协议,增强多智能体协同和扩展性。
不建议一开始就全量铺开。中英人寿首期聚焦 53 个核心指标进行试点,二期才拓展至 109 个。这种"小步快跑"的策略值得借鉴。
试点阶段的关键指标:
大模型问数不是"上线即完成"。需要建立"用户反馈→迭代升级"机制,让系统越用越聪明。
反馈来源可以包括:
智能问数平台通常需要与企业现有的数据中台、BI 平台、办公系统集成。在集成层面,需要关注:
需要说明的是,Smartbi AIChat 白泽目前可以在平台内完成分析、预警、可视化、建议输出;通过工作流与企业现有系统集成,方便后续由业务/IT 触发与执行。
演示环境下的问题通常经过精心设计,准确率自然高。但在真实业务中,用户提问方式千变万化,口径理解难度远超演示。建议要求厂商提供真实客户的生产环境准确率数据,或进行 POC 验证。
如果企业自身指标口径混乱,接入大模型只会放大问题,而不是解决问题。大模型无法自动弥合部门之间的口径分歧,这需要业务和 IT 共同推动指标治理。
试图一次性覆盖所有指标和所有业务场景,往往导致项目周期拉长、效果不及预期。更务实的做法是聚焦高频、高价值场景,先做出效果,再逐步扩展。
涉及财务、客户信息等敏感数据时,必须确认平台是否支持私有化部署、是否有完善的权限体系。部分轻量级 ChatBI 产品在这方面能力不足,可能带来合规风险。
再好的技术,如果业务人员不用,就没有价值。选型时应关注平台的易用性、是否支持移动端、是否有用户培训和支持体系。中英人寿项目移动端日活用户数增长超过 3 倍,说明移动端集成对用户 adoption 有积极作用。
大模型接入内部指标体系,本质上是让 AI+BI 从技术演示走向业务价值的关键一步。选型的核心不在于大模型参数多大、对话多流畅,而在于平台是否具备指标管理能力、是否采用融合式技术路线、是否能保障口径一致性和数据安全。
对于 CIO 和数据智能负责人,建议按以下优先级推进:
智能数据分析的落地,不是一次性的技术采购,而是持续的能力建设。选择合适的平台,能让这个过程少走弯路。
如果你正在评估 ChatBI 平台,可以从 Smartbi AIChat 白泽的 Agent BI 能力入手,了解其如何基于指标模型实现准确、灵活、易用的智能问数体验。
Q1:大模型问数的准确率一般能达到多少?
A:准确率取决于指标体系的完善程度和平台的技术路线。以中英人寿项目为例,在梳理 109 个经营指标、构建术语知识字典和知识图谱后,核心指标问答准确率稳定在 90% 以上。如果企业指标口径不统一,准确率会明显下降。建议先做指标治理,再评估 AI+BI 的准确率表现。
Q2:ChatBI 平台需要微调大模型吗?
A:不一定。微调大模型需要准备训练数据、消耗计算资源,且模型版本更新后需重新微调,部署上线时间长。目前部分平台采用免微调路线,通过指标模型、RAG 知识库和 AI Agent 实现业务理解,降低了技术门槛和持续投入成本。Smartbi AIChat 白泽即采用免微调方式。
Q3:智能问数能处理多复杂的查询?
A:这取决于平台的技术架构。纯 NL2SQL 路线在简单查询场景下可用,但多轮追问、嵌套查询、交叉分析等复杂场景容易出错。融合了指标模型和 AI Agent 的平台,支持时间段查询、基于每一步查询结果的嵌套式查询,以及归因分析和预测任务。
Q4:如何评估 ChatBI 平台的数据安全性?
A:重点考察三个方面:一是权限体系是否覆盖操作权限、资源权限、数据权限;二是是否支持私有化部署大模型,数据不出企业;三是是否通过等保三级等安全认证。对于金融、医疗等强监管行业,建议要求厂商提供相关安全资质证明。
Q5:从零开始建设智能问数,一般需要多长时间?
A:周期取决于指标体系的成熟度和试点范围。如果采用成熟的 ABI 平台,实施路径通常包括安装部署、需求分析、指标建模、构建向量库、测试调整、顺利上线等步骤。建议首期聚焦核心指标试点,验证效果后再逐步扩展,避免一次性铺开导致项目周期失控。
本文内容通过AI工具匹配关键字智能整合而成,仅供参考,SmartBI不对内容的真实、准确或完整作任何形式的承诺。具体产品功能请以SmartBI官方帮助文档为准,或联系您的对接销售进行咨询。如有其他问题,您可以在线咨询进行反馈。
覆盖传统BI、自助BI、现代BI不同发展阶段,满足企业数字化转型的多样化需求
电话:
邮箱: