AI伦理观察丨阶跃星辰曹志敏谈深度核查:不让AI“拍脑袋” 赋能千行百业应用 -新华网
新华网 > > 正文
2025 10/23 15:42:36
来源:新华网

AI伦理观察丨阶跃星辰曹志敏谈深度核查:不让AI“拍脑袋” 赋能千行百业应用

字体:

  让“辨别真相”变得唾手可得,不让AI“拍脑袋”做判断,这正是阶跃星辰研发“深度核查”产品的核心初衷。

  在当前人工智能技术迅猛发展的背景下,AI伦理治理已成为关乎技术可持续发展的重要议题。作为AI领域的关键挑战,AI幻觉问题因其隐蔽性和普遍性,正成为行业伦理治理的核心痛点。

  面对这一挑战,阶跃星辰推出的“深度核查”产品,通过专门识别AI幻觉的技术,为行业提供了可信AI的实践路径。

  为专业AI智能体筑牢可信地基

  着眼当下,人工智能正从通用对话迈向赋能千行百业的关键阶段,然而,“AI幻觉”所导致的事实性谬误,已成为制约其在医疗、法律、金融等多个高价值专业领域深度应用的瓶颈。

  这一痛点不仅关乎技术效能,更直接触及人工智能伦理与治理的深层议题。在此背景下,阶跃星辰联合创始人、首席运营官曹志敏在接受采访时阐明了企业的技术初心:“我们的初衷很简单,就是让‘辨别真相’变得唾手可得。” 这一理念驱动阶跃星辰将AI伦理的抽象原则转化为可工程化的技术产品,其开发的“深度核查”技术,正是为了构筑专业AI智能体不可或缺的“可信”地基,响应了全球AI治理中对可靠性、透明性与可问责性的迫切要求。

阶跃星辰联合创始人、首席运营官曹志敏

  “深度核查”技术的诞生,源于对专业型AI智能体工作范式的深入理解。曹志敏认为:“信息核查不应是专家或大机构的专利,每一个用户都值得拥有强大的证据工具。” 这一判断的底层逻辑在于,专业工作型智能体与娱乐场景有本质区别,其研究、分析与决策必须构建在真实、可信的数据基座之上。缺乏精准的信息支撑,任何应用于医疗诊断、法律文书、金融风控或科学研究的AI模型,其输出结果都将缺乏实用价值,甚至带来巨大风险。

  因此,在开发“阶跃深研”等专业研究型AI智能体时,来自众多领域共建专家强烈提出的深度核查需求,坚定了公司攻克这一技术难题的决心,将其视为推动AI responsibly(负责任AI)落地的关键路径。

  在技术架构上,“深度核查”的优势体现在对幻觉识别全链条的精准把控。首先,在信息获取环节,该技术实现了搜索的实时性与全面性,通过多源信息抓取与跨渠道(网页、学术数据库、社交媒体)的实时信息解析,构建了完整的证据覆盖网络。此举旨在从根本上解决单一信源固有的偏差与片面性问题,为后续分析提供立体的信息维度。

  其次,在信息处理层面,其核心的交叉信源归纳技术,能够对异构来源的关键信息进行自动分类、量化与对齐,使用户能够直观审视所有证据及其原始出处,这极大地降低了信息甄别的认知负荷。更为关键的是,该系统内嵌了严格的“专家信源审美”机制,通过算法优先筛选并采纳一手、权威且客观的专业数据,从信息源头就规避了模型仅基于统计概率“自信”生成谬误的风险。

  值得一提的是,溯源链条的清晰构建与呈现,是“深度核查”区别于传统AI问答的一项核心创新。曹志敏特别强调:“产品明确不交付主观‘事实’,所有结论都必须提供来源和证据链支持。” 这一设计哲学直击了AI幻觉最隐蔽的痛点——以往模型生成的虚假信息因缺乏可验证的溯源路径而难以被快速证伪。通过提供完整的、可逐级回溯的证据链条,“深度核查”使得AI的每一个论断都变得可查、可证、可辩,极大地增强了输出的透明性。同时,该技术体系并非完全依赖自动化,而是与数百位行业专家协同共建,将人类的领域知识与专业判断转化为可被模型理解的规则与偏好,从而在关键环节注入专业认知,有效防止了AI“拍脑袋”生成内容,确保了输出结果的科学性与实用性。

  这些技术创新为企业的AI伦理实践提供了坚实的产品化支撑。“深度核查”不仅是模型安全与可信AI理论的技术实现,更是阶跃星辰主动参与并塑造行业伦理规范的实际举措。通过工程化手段使原本难以捉摸的“幻觉”问题变得透明、可控与可管理,公司真正将“科技向善”的价值观嵌入产品肌理。

  在伦理层面,该技术通过系统性提升AI输出内容的可查证性与可靠性,夯实了AI公平性、透明性原则的技术基础,从而显著增强了社会各界对复杂AI系统的信任度。正如曹志敏所言,“深度核查正在为专业智能体打造‘可信’地基”,这一地基的构建,标志着AI伦理正从一个宏观的治理框架,逐步转化为用户可感知、可验证的具体技术价值。

  动态治理护航AI商业新征程

  在人工智能浪潮席卷全球的今天,AI技术正在以前所未有的速度赋能千行百业。然而,在医疗诊断、金融交易、科学研究等对信息准确性要求极高的领域,AI系统因"幻觉"产生的错误信息可能引发严重后果。在此背景下,技术应用的场景落地能力,特别是确保信息真实可靠的能力,成为衡量AI价值的关键标尺。

  “我们推出的‘深度核查’产品正是瞄准这一核心需求,通过在真实产业场景中的扎实落地,致力于破解AI幻觉难题,筑牢数字时代的信任基石。”曹志敏说道。

  "深度核查"的价值在容错率极低的专业领域尤为凸显。曹志敏以医疗领域为例,具体阐释了其应用逻辑:"在医疗场景中,'深度核查'能够快速聚合权威的医学学术指南、期刊以及政府公告等多维度信息源。通过多角度证据的交叉比对与排查,该系统能够有效甄别并规避'AI编造疗效'等潜在风险,为临床决策提供更可靠的参考依据。"这一过程不仅提升了信息处理的效率,更重要的是构建了一道基于权威事实的安全防线,其现实意义在于直接将技术能力转化为对患者安全与医疗质量的保障。

  将视线转向金融领域,AI幻觉所带来的风险同样具有意义。曹志敏指出了伴随AI技术深度渗透而出现的新隐患:"当金融机构普遍采用同质化的大模型时,极易催生'模型共振'效应。这种现象会放大市场的'羊群行为',无形中加剧金融体系的顺周期风险和市场价格波动。"正因为预见到此类系统性风险的苗头,"深度核查"产品将辅助模型训练数据的有效性与安全性核查作为重点任务,旨在从数据源头着手,减少AI幻觉的产生,为金融市场的稳定运行注入确定性。

  应对AI幻觉不仅是技术攻坚,更是一场关乎伦理的实践。曹志敏在阐述"深度核查"的产品哲学时,特别强调了其对于公平性原则的恪守:"'深度核查'始终坚持以事实核查为核心产品原则。我们最为看重的,并非迎合某一类用户或特定人群的偏好,而是力求为所有用户输出中立、公正的内容。"这一设计理念确保了技术应用不偏不倚的普惠价值,使其成为对抗信息偏见、维护数字公平的有效工具。面对信息世界中大量存在的不确定性,曹志敏进一步介绍了产品的审慎处理机制:"在面对那些暂时无法找到可靠证据、不能核实的内容时,'深度核查'会明确告知用户'无法确定'。我们坚决杜绝冒然给出猜测或交付虚假信息等'幻觉'内容,将最终的判断权交还给用户。"

  随着AI技术日新月异的发展,其带来的伦理挑战也在不断演变。为应对未来可能出现的新问题,阶跃星辰构建了一套前瞻性的动态治理机制。曹志敏着重介绍了公众与用户参与的关键作用:"在'深度核查'产品中,我们非常重视公众和用户的共建反馈。用户对于信息源的评价、举报,以及专家用户的核查认可,都会被及时收集整理,这些宝贵的反馈将反哺用于算法优化和信源管理。"这套机制将社会智慧融入技术迭代闭环,形成了人机协同的良性循环。

  "深度核查并不是一个一蹴而就的产品,它会不断和人类专家认知、大模型技术一起迭代,"曹志敏表示,"这种开放的参与模式不仅让产品的核查能力得以持续升级,也确保我们能快速响应实际应用中产生的新需求和新问题,从而持续提升核查的准确性与权威性。"

  将阶跃星辰的战略布局置于全球AI治理的宏观图景下,更显其必要性。世界经济论坛发布的《2025年全球风险报告》已将"错误和虚假信息"列为全球五大风险之一,其中AI生成的幻觉内容被视作关键诱因。

  这一国际共识表明,防治AI幻觉已超越单纯的技术范畴,成为关乎数字经济健康发展与社会稳定的核心要素。在此时代背景下,曹志敏的论断揭示了行业发展的关键路径:"只有当AI技术真正解决了可信度问题,智能体应用才能在高风险要求的专业领域发挥其应有的价值。"这清晰指明了阶跃星辰深入研究产品未来的发展战略:即以"深度核查"为支点,通过夯实AI输出的可信度,撬动整个AI技术在高端专业应用场景中的深化与普及。(马渭淞)

【纠错】 【责任编辑:王蓓蓓】