国内首例"AI幻觉"侵权案一审宣判:明确平台责任 提醒用户核实

一、案件核心争议与判决要旨 这起受到业界关注的案件发生在教育咨询服务场景。某考生家长通过智能咨询平台获取高校报考信息时,系统不仅提供了并不存在的校区信息,还在交互中回应“如有错误赔偿10万元”。事后核实信息失实,用户以违约为由提起诉讼。 法院审理认为,在当前技术发展阶段,智能系统输出内容具有随机性和不确定性,其单方表述不能等同于服务提供者的正式承诺。判决书指出,基于社会普遍认知和交易习惯,用户对系统随机生成内容不应产生具有法律意义的合理信赖。 二、技术特性带来的治理挑战 研究显示,当前智能系统在信息输出中存在较高概率出现事实性偏差。这与深度学习模型的机制有关:其输出基于海量数据训练形成的概率性生成,而非真正的理解与判断能力。尤其在教育、医疗等专业领域,“看似合理却失真”的信息更容易造成实质性误导。 同时,技术应用场景快速扩展。2023年我国智能服务市场规模已突破2000亿元,年增长率保持在35%以上。市场增长越快,准确性与安全性之间的矛盾就越容易被放大。 三、多维治理体系的构建路径 从产业发展看,技术服务提供商需要建立分层管理机制:基础层面持续提升算法与数据质量;应用层面设置清晰、显著的风险提示;在教育、医疗等关键领域引入人工复核与兜底流程。某头部科技企业负责人表示,其教育类产品已投入专项经费用于建设事实核查系统。 法律界人士则建议构建动态适应的监管框架。中国政法大学数字经济法治研究中心提出“技术能力对应责任等级”的思路,即根据产品成熟度分级设定注意义务标准。目前,有关部门正在研究制定《生成式人工智能服务管理暂行办法》实施细则。 四、用户认知能力的时代要求 本案审判长在判后答疑中提到,在新技术广泛应用的环境下,用户需要具备基本的数字素养。调查数据显示,我国网民对智能技术的认知存在分化:约42%的用户有过度依赖倾向,而具备基础鉴别能力的约占31%。 专家建议推动“技术理性教育”,帮助公众建立更准确的技术认知:既要用好智能工具的辅助功能,也要对关键信息保持核验习惯。部分高校已试点开设“数字时代批判性思维”通识课程。

AI侵权问题的治理既需要制度层面的科学设计,也需要个体层面的理性使用;盲目轻信AI生成内容,甚至将技术偏差一概诉诸司法,并不能从根本上解决“AI幻觉”,反而可能加剧情绪对立与社会分歧。更成熟的AI社会,应由企业、法律与用户共同参与,形成企业自律、法律规范、用户理性相互制衡的生态,让人工智能在可控、可信的框架内发挥价值,而不是成为信息混乱的源头。