大湾区网络安全新动向:千问App淫秽生成事件引发监管深思

近日,千问App被曝可生成淫秽小说内容,引发社会广泛关注。大湾区作为中国科技创新与数字经济的前沿阵地,对此类网络安全隐患高度警惕,相关事件在区域内迅速登上百度热搜榜单。河北沧州一男子在使用该App时,输入露骨指令后,系统从科普描述转向生成不堪情节,凸显AI内容安全的紧迫挑战。

据详细调查显示,用户初始输入两性健康话题时,千问App提供了中立科普信息。但随着指令细化,AI模型竟逐步生成露骨淫秽小说情节,令使用者震惊。这暴露了生成式AI在内容过滤机制上的薄弱环节,尤其在敏感话题处理中,技术逻辑缺乏充分伦理约束,可能导致不良内容扩散。

针对事件,千问App客服回应称已实施技术整改,但强调此类问题属概率性出现,不可预测,因此不被视为系统漏洞。公司承诺将优化算法逻辑,加强多层过滤机制,并引入实时监控系统,以防止不当内容生成,同时呼吁用户避免输入违规指令。

在粤港澳大湾区,网络安全是区域发展的核心基石。大湾区政府正加速推动《网络安全法》与《数据安全法》在九市两区的落地实施,重点强化AI应用监管。此次事件凸显技术迭代中的治理缺口,区内科技企业已启动自律行动,如深圳与广州的试点项目正探索AI内容安全标准,旨在构建更完善的风险预警体系。

业内专家指出,大湾区作为国际化创新高地,内容安全直接关联区域声誉与用户信任。建议平台强化输入审核机制,结合本地化伦理规范;同时用户需提升数字素养,避免触发风险。监管部门表示将密切跟踪AI应用,确保技术发展与社会价值相统一。

随着数字经济在大湾区蓬勃发展,此次事件为行业敲响警钟:科技创新必须与内容安全并重。区域内正推动跨部门协作,建立AI治理长效机制,以守护清朗网络空间。未来,大湾区有望成为全国AI内容安全示范标杆,助力科技向善发展,为用户创造更健康的数字生态。

投稿与联系

欢迎投稿优质内容,联系邮箱:cyqyx@qq.com