在一年内,人工智能与数字委员会(Conseil de l’IA et du numérique)推出了什么成果?

En un an, qu’a produit le Conseil de l’IA et du numérique ?

Silicon.fr Quality unknown · 质量未知 by Clément Bohic 2026-08-05 14:42 Original
摘要
法国国家人工智能与数字委员会(CIANum)自2025年7月政府重组成立以来已发布多份报告与备忘:重点覆盖数字主权与教育领域的AI,并在2026年2月的《IA agentique(代理式AI)》说明中提出用“IA agentique”替代“agents IA”,同时给出代理式AI的5级自主性及其技术、伦理与法律风险。委员会还围绕Anthropic的Claude Mythos/ Fable 5在非美国用户被暂停访问、以及欧盟RGPD与代理式AI的冲突(目的、合法性、数据最小化、透明度、保存期限等)提出风险评估、系统隔离记忆与检测滥用等建议,并呼吁通过“欧洲公共采购偏好”、市场塑造与“Fabrique des communs numériques”等机制强化欧洲开源与公共数字基础设施的长期治理与资金支持。

成立一年后,Conseil national de l’IA et du numérique(CIANum)已交出一份相当密集的成果单。该机构于2025年7月23日由政府正式设立,作为 Conseil national du numérique(CNNum)的新形态,至今已发布两份报告,分别聚焦数字主权与教育系统中的AI,并陆续推出5份专题笔记,议题横跨AI agentique、网络安全、未成年人保护、RGPD适用以及AI在教育中的应用。

在AI术语上,CIANum明确建议不要再说“agents IA”,而应使用“IA agentique”。其理由是,这一表述更能避免把讨论简化为“自动化 vs 人类控制”的二元对立。该笔记将AI agentique划分为5个自治等级:基于规则复现的简单自动化、可提取数据或分析文档的代理、在自动化与人工验证之间交替的agentic workflows、可感知上下文并先准备后决策的半自主代理,以及完全自主代理。CIANum同时梳理了技术进展,如上下文窗口延长、后训练方法等,并提醒其技术局限,包括级联效应、编排漂移、语义失配、数据安全等问题,以及责任、算法偏见、透明度和可解释性等伦理、社会与法律议题。它还特别指出,当某项职业中可自动化任务占比低于20%时,AI在企业中的渗透往往非常缓慢。

在网络安全方面,CIANum的4月笔记显然是对Anthropic推出Claude Mythos的回应。当时该产品仅向约40家、几乎全部来自美国的机构开放。CIANum认为,随着软件漏洞修复需求增加,信息系统可能跟不上补丁节奏,因此对供应商刻意强调模型“落入坏人之手会很危险”的营销话术保持警惕,认为这是一种吸引公众和投资者注意的“巧妙方式”。它还提到Anthropic曾举办“AI道德峰会”,邀请约15名天主教神职人员参与。该笔记强调必须加强模型评估能力,并指出法国在信息不对称上明显落后于英国、美国和中国生态。

到了2026年6月,CIANum又在Anthropic单方面、且未提前通知地暂停非美国用户对Fable 5和Mythos 5的访问后发声。它将此视为向“kill switch”风险普及迈出的“额外、重大且前所未有的一步”,并把这一趋势放在此前主要由NVIDIA芯片出口限制体现的“containment”战略背景下理解。CIANum直言,欧洲数字自主的威胁已成为“切实现实”,并呼吁各方及时更新风险分析。它再次提醒,GAFAM常以灾难性甚至存在性风险的叙事,来证明只有少数主体应掌握最先进技术。由此,CIANum要求加快欧洲优先原则在公共采购中的落地,并推进市场塑形措施,如可移植性、互操作性以及税收或监管激励。

最新一份7月笔记则聚焦RGPD与AI agentique的冲突。CIANum指出,这类系统的运行方式会对GDPR的多项原则形成压力:目的限制方面,通用能力使处理目的更难界定;合法性方面,系统自治性使初始法律依据与后续操作之间的关联更难维持;数据最小化方面,大量数据在多个agent间流转,处理必要性不易证明;准确性方面,模型的概率性会导致错误传播;透明性方面,输出难以解释;保存期限方面,模型训练与改进又要求保留数据集。由此,数据主体的访问、更正、删除、反对和限制处理等权利都更难有效行使。CIANum特别强调,AI agentique会因多重数据流和“记忆空间”增多而放大问题,且这些记忆同步本身还可能损害数据准确性。

在治理建议上,CIANum主张更清晰地界定自动化决策的监管边界,并考虑引入对非预期或被滥用用途的检测/过滤机制。它还建议对系统记忆进行隔离——每个agent只保留自己的记忆,不应自动访问其他agent的数据——并限制记忆规模,例如让信息在一定时间后失效,或定期用更新数据替换,甚至按处理任务分隔记忆,以减少过度存储。与此同时,CIANum也指出,AI agentique使人们更难判断人类监督究竟有多强,而GDPR赋予个人不受纯自动化个体决策影响的权利。AI Act虽未设专门制度,但通过区分价值链中的不同参与者,事实上建立了某种责任框架。欧盟委员会与EDPB(欧洲数据保护委员会)预计将在今年发布关于RGPD与AI Act衔接的指南。

在未成年人保护方面,CIANum于2026年3月发布专门笔记,背景是法国国民议会刚一读通过一项法案,核心效果是禁止15岁以下使用社交网络。CIANum并不认同这种针对特定平台的做法,担心未成年人会转向更隐蔽的平台。它举例称,Roblox虽不受该法约束,但平台上存在大量超过10万成员的群组,交换恋童内容并向未成年人索取性行为。相比之下,澳大利亚在2025年12月生效的做法更偏向内容与服务类型治理:其在线安全代码覆盖暴力、色情、自杀鼓励等高影响内容,并适用于聊天机器人、应用商店、在线游戏、搜索引擎等广泛服务,目标是让儿童获得符合年龄的线上体验。法国的法律则只针对“由在线平台提供的社交网络服务”,CIANum认为这过于狭窄,尤其在用户行为和内容分发方式不断迁移的当下,更难有效覆盖有害内容。

关于年龄验证,CIANum梳理了欧盟委员会提出的三种方法:自我申报、估算(如人脸识别或使用数据交叉)以及凭证提交(实体身份证明或经验证的身份来源)。澳大利亚并未强制平台采用特定方法,但对Snapchat等平台是否真正用真实图像进行人脸识别表示担忧。法国在SREN法案(2024年5月)下也给色情内容服务留出方法选择空间,但必须符合2024年10月发布的技术参考标准。德国、丹麦、西班牙和意大利已建立类似义务;欧盟关于DSA的补充指南也在为这一做法“保驾护航”。围绕欧洲数字钱包的讨论同样升温,各成员国最迟需在2026年前至少提供一个钱包;法国等5个成员国已启动面向社交网络年龄验证的试点。

CIANum对“统一设定离线时段”也不热衷。它认为,保护需求应随年龄和成熟度而变化;一些平台推动在设备层面控制年龄,或在应用商店/操作系统创建账户时统一验证,但这对少数受影响服务而言过于宽泛,还可能促使开发者规避义务,并不适合家庭共享设备场景。至于强制设定断网时段,CIANum认为“在线时长”并不能说明用户接触了什么内容。韩国曾在2011至2021年实施类似措施,但因范围过窄、只针对网游而最终取消。CIANum更倾向于建立一种“界面参数设置的普遍权利”,包括更强的过滤选项、第三方算法以及受控并认证的外部审核服务。它也批评DSA虽然要求平台披露内容审核工具和推荐算法主要参数,但这些技术报告对公众并不友好,无法真正揭示平台背后的经济和注意力逻辑。更进一步,CIANum再次提出应重构“托管者/出版者”二分法:社交网络在电子商务指令下享有较轻责任,只有在知情后未及时删除内容才承担责任。早在2014年,法国国务委员会就建议超越这一二元结构;DSA虽未彻底改变,但已对在线平台施加更严格义务。CIANum认为,2027年对该法规的修订可能是转向“责任逻辑”的合适时机。

在数字主权报告中,CIANum于2026年5月指出,国家层面的口号与实践之间仍有“持续偏差”,因为政府服务“仍大规模依赖外国专有方案”。跨部委层面,DINUM缺乏足够资源和强制力来推动统一路线;企业和地方政府也各自为政。更糟的是,国家还在不同地区之间制造竞争,尤其是在争取公共资金时,导致各地只专注数字化的某一环节。尽管如此,CIANum也承认一些项目显示出与私营部门协同增强的趋势,例如FranceConnect和ProConnect,被视为公私协作治理的成功案例;DINUM参与Open Interop倡议也被视为积极信号。

但公共资金对数字公地和开源软件的支持仍然不足,欧洲层面尤其如此,因为现有资助标准并不适配其协作式模式。CIANum还批评资金周期过短,例如“未来投资计划”(PIA)多为18至36个月项目;另一些项目则出现“无效撒胡椒面”,如ALT-EDIC和LLM4EU联盟,4000万欧元分给70个主体。它认为,问题部分源于“开源即免费”的混淆,进而导致对服务水平的不现实期待。为此,CIANum提出建立“Fabrique des communs numériques”,由国家、Caisse des dépôts、地方政府协会、大型企业IT部门、方案供应商和维护者社区共同参与,Ariane(数字与AI管理局)负责实施。该结构将汇总依赖性诊断、绘制全国现状图谱、为符合开放治理、互操作性和可持续性标准的现成方案授予标签、通过伙伴机制或专门基金定向融资、支持开源社区治理,并让适合数字公地的法律结构更可见。

在可用法律工具上,CIANum列出SCOP、SCIC、SIEG、AAC和“fabriques de communs”等多种模式:SCOP有助于让项目长期保持初始价值观;SCIC可实现多方治理并容纳公私主体,同时保持“有限盈利”;SIEG可在不走传统公共采购重程序的情况下,为被认定为公共利益的数字公地提供长期维护资金;AAC则是识别公共利益挑战并资助承诺共同贡献某一公地的联盟;“fabriques de communs”则更像无独立法律结构的孵化器,通过“征集创意”筛选项目,再发起内部创业者和合作伙伴招募。CIANum还建议研究将魁北克“社会公益信托”模式移植到法国,以便组织在可信环境中共享数据并实行集体治理。欧洲层面,它认为可考虑扩大DC-EDIC联盟的职责,使其承担类似法国“Fabrique des communs numériques”的任务。

在教育领域,CIANum于2026年6月发布的报告认为,法国在AI教育方面的框架已属国际上较完整之一,尤其是在理解语言模型、其影响及法律边界方面,但“最后一公里”仍未完成。一个明显问题是教师培训人数“特别少”,与其他欧洲国家相比差距明显;由于缺乏清晰框架,真正创新的教师往往只能在“阴影中”实践,相关经验也难以被记录和传播。CIANum同时强调,AI工具可用于个性化学习路径和增强包容性,也能帮助学生理解社会议题。它举例Internet Sans Crainte项目在四年级到高中阶段组织“IAckathons”,让学生围绕现实挑战设计AI解决方案;还提到面向CP、CE1、CE2教师的Lailo平台,可根据学生进度差异化支持阅读学习。

不过,CIANum也警告AI可能带来“认知弃权”风险。它引用MIT Media Lab基于脑电图的研究指出,使用LLM复习的参与者,记忆保留明显不如采用其他方法者。因此,它主张采用“苏格拉底式”设计,即通过连续提问引导学生思考,而不是直接给答案。Khanmigo就是典型例子,但该应用尚未在法国发行。CIANum建议在2026年底前为初中和高中分别招标选择一款类似应用。它还担心学生被AI“孤立”,尤其是所谓“sycophantic”偏差——AI总说用户爱听的话。引用牛津和斯坦福的观察后,CIANum指出,长期接触迎合型AI会让人逐渐减少对真人情感支持和自尊反馈的偏好,过度个性化甚至会削弱孩子对他人情绪和认知状态的体察能力。

CIANum还提醒,ChatGPT等工具的易用性制造了“简单幻觉”,但它们并非为教育场景设计;同时也有“免费幻觉”,因为高质量语言模型的成本未来大概率会上升。AI普及后,评估方式也必须重构:应更多关注过程而非结果,强化口试和协作项目,并保留“无AI时间”,以确保基础知识真正内化。CIANum强调:“一个既能在没有AI时表现出色、又知道何时以及按何种协议使用AI的学生,才最能适应正在形成的社会。”

为落实这一教育目标,CIANum认为关键在于教师能否根据教学目的灵活使用AI,因此需要大规模继续教育培训。短期内,可在小学教师培养的LPE和M2E中普遍加入相关模块;线上资源方面,可利用Inria开发的“IA pour et par les enseignants”MOOC。它还建议在每所中学设立1至2名“AI référent”教师,甚至重新审视现有“数字 référent”岗位,必要时更换其承担者。对学生而言,法国总理已承诺自2027年秋季起,高一学生每周将有1小时AI教学;CIANum则要求进一步扩展为结构化的数字、AI、媒体与信息素养教育,类似于现有的情感、关系与性教育课程。它还建议连校医也要接受培训,重点关注心理健康与认知风险,并从2027年秋季起在其监督下组织相关工作坊。

Summary
France’s National Council for AI and Digital (CIANum) marks its first anniversary since being installed in July 2025, publishing multiple reports and notes on digital sovereignty, AI in education, and “agentic AI” (recommending the term over “AI agents”)—including a framework for varying autonomy levels and warnings about technical limits, security, and ethical/legal risks. It also reacts to Anthropic’s Claude Mythos access restrictions and argues this accelerates “kill switch” risk, urging stronger European procurement preferences, interoperability, and risk assessment. In parallel, the council analyzes how the GDPR applies to agentic AI—highlighting tensions around purpose, legality, data minimization, transparency, and user rights—and proposes compartmentalizing agent memory, improving detection of misuse, and issuing clearer guidance between the GDPR and the EU AI Act.

One year after the government installed the Conseil national de l’IA et du numérique (CIANum) on 23 July 2025 as the new version of the former CNNum, the body has published two reports and five notes, covering digital sovereignty, AI in education, cybersecurity, online child protection and the legal tensions created by agentic AI.

Its first note, released in February 2026, argues for using the term “IA agentique” rather than “agents IA,” to avoid framing the debate as a simplistic choice between automation and human control. The CIANum sets out five levels of autonomy: simple rule-based automation; agents that extract data or analyse documents; agentic workflows combining automated steps and human validation; semi-autonomous agent flows that can prepare and make decisions; and fully autonomous agents. It also reviews technical progress such as longer context windows and post-training methods, while warning about cascading effects, orchestration drift, semantic misalignment, data security and broader ethical, social and legal issues including liability, bias, transparency and intelligibility. It notes that AI adoption in companies remains slow when automated tasks account for less than 20% of a job.

In April, a note on AI and cybersecurity followed Anthropic’s launch of Claude Mythos, then available to around 40 mostly US organisations. The CIANum warned that the expected rise in software vulnerability fixes could outpace IT systems’ patching capacity. It also criticised vendors’ habit of emphasising how “dangerous” their models could be in the wrong hands, calling it a clever way to attract public and investor attention, and referred in particular to Anthropic’s “summit on the morality of AI” with about 15 Catholic clergy members. The note stressed the need to strengthen model evaluation capabilities and highlighted France’s information asymmetry versus the UK, US and China.

A June 2026 note came after the unilateral, no-notice suspension of access to Fable 5 and Mythos 5 for non-Americans. The CIANum saw this as a “significant and unprecedented further step” toward the practical generalisation of “kill switch” risk, extending the containment logic previously associated mainly with NVIDIA chip export restrictions. It said European digital autonomy had become a tangible reality and urged organisations to keep risk analyses up to date. It also called for faster action on European preference in public procurement and on market-shaping tools such as portability, interoperability and fiscal or regulatory incentives.

The latest note, in July, examines how the GDPR applies to agentic AI. It says these systems strain several core principles: purpose limitation, because general-purpose capabilities make it harder to identify processing; lawfulness, because autonomy complicates the link between the original legal basis and later operations; data minimisation, given the volume of data and sharing between agents; accuracy, because probabilistic models can propagate errors; transparency, because outputs are hard to explain; and storage limitation, due to tensions with retaining datasets for training and improvement. These issues also make it harder for individuals to exercise rights of access, rectification, erasure, objection and restriction. The CIANum warns that synchronising multiple memory spaces can itself undermine data accuracy, and that opacity complicates attribution of responsibility. It notes that the AI Act does not impose an explicit liability regime, though its value-chain approach creates a de facto one. It urges clearer rules on automated decisions, detection and filtering of unintended or diverted uses, and tighter compartmentalisation of agent memory, with each agent having its own memory and no automatic access to others’, plus limits on memory size and retention.

In March 2026, the CIANum also published a note on protecting minors online, against the backdrop of a French bill adopted in first reading by the National Assembly that would ban social networks for under-15s. It is sceptical of platform-specific bans, fearing migration to less visible services. It cites Roblox as an example: not covered by the law, yet allegedly hosting dozens of groups with more than 100,000 members exchanging child sexual abuse material and soliciting sexual acts from minors. The CIANum contrasts France’s narrow approach with Australia’s broader online safety codes, introduced in March and aimed at harmful content such as high-impact violence, pornography and suicide promotion across chatbots, app stores, online games and search engines. France’s law, by contrast, targets only “online social networking services provided by an online platform,” which the CIANum says leaves out other harmful environments.

On age verification, the Commission distinguishes self-declaration, estimation and proof-based methods. Australia left platforms free to choose, though it raised concerns about Snapchat’s facial recognition checks. France’s SREN law of May 2024 similarly leaves pornographic services free to choose, provided they meet the technical requirements of the October 2024 reference framework. Germany, Denmark, Spain and Italy have adopted similar obligations, while the Commission’s DSA guidance and work on the European Digital Identity Wallet are helping to secure the approach. A pilot involving five member states, including France, is testing age verification for social network access. The CIANum is unconvinced by device-level controls or fixed disconnection windows, arguing that screen time says little about content or behaviour and that such measures are too broad, could encourage circumvention and are poorly suited to shared devices. It instead calls for a general right to interface configuration, stronger filtering options, third-party moderation tools and a rethink of the host/publisher divide. It says the DSA’s transparency rules still produce technical reports that are hard for the public to read, and suggests the 2027 review of the regulation could be the right moment to move toward a true liability logic.

The May report on digital sovereignty says there is still a persistent gap between the state’s rhetoric and practice, with public services continuing to rely heavily on foreign proprietary solutions. The DINUM lacks the resources and binding authority to impose a unified approach, while silos persist across public enterprises and local authorities. The CIANum also criticises the state for fostering competition between territories for public funding, pushing each to specialise in a digital niche. It does, however, point to FranceConnect, ProConnect and DINUM’s participation in Open Interop as successful examples of public-private cooperation. It says funding for digital commons and open source remains insufficient, including at EU level, because collaborative models are poorly recognised. Funding is also too short-term: the PIA financed many projects for 18 to 36 months, while initiatives such as ALT-EDIC and LLM4EU spread €40 million across 70 actors. The CIANum argues that confusion between “free” and “gratis” fuels unrealistic expectations about service levels.

To govern demand more effectively, it proposes a “Fabrique des communs numériques,” bringing together the state, Caisse des dépôts, local authority associations, major corporate CIOs, solution providers and open-source maintainers. Run by the Ariane authority for digital and AI, it would map dependencies, build a national inventory aligned with the interministerial open-source baseline, label ready-made solutions meeting criteria for open governance, interoperability and durability, trigger targeted funding, support open-source communities and make suitable legal structures more visible. It lists SCOPs, SCICs, SIEGs, “appels à communs” and non-legal “fabriques de communs” as possible vehicles, and suggests studying Quebec’s social trust model. At EU level, it sees potential in expanding the DC-EDIC mandate.

The June report on AI in education says France already has one of the world’s most complete frameworks for understanding language models, their effects and legal oversight, but the “last mile” remains. Teacher training is still very limited compared with other European countries, and in the absence of a clear framework, innovative uses remain largely undocumented. The CIANum sees clear benefits in personalising learning and improving inclusion, citing Internet Sans Crainte’s “IAckathons” for students from lower secondary to high school and the Lailo platform for differentiating reading instruction in primary school.

But it warns of cognitive offloading. Referring to a MIT Media Lab EEG study, it says participants using an LLM to revise retained significantly less than those using other methods. It therefore favours “Socratic” designs that prompt critical thinking, such as Khanmigo, which never gives the answer directly but guides students through questions. It suggests a tender for one app for middle school and one for high school by end-2026. It also warns of social isolation and the “sycophantic” bias of AI systems that tell users what they want to hear; Oxford and Stanford findings suggest people exposed to flattering AI gradually prefer it over human emotional support and self-esteem. Over-individualisation, it says, may erode children’s “social patience” toward others’ emotional and cognitive states.

The CIANum says ChatGPT-like tools create an illusion of simplicity and free access, even though they are not designed for education and high-quality language models are likely to become more expensive. It calls for assessment methods to shift toward process rather than just outcomes, with more oral checks and collaborative projects, and for “AI-free” periods to consolidate core knowledge. Students who can perform without AI and know when and how to use it will be best prepared for the emerging society, it argues.

For teachers, it recommends a major continuing-training effort, including a module in the LPE and M2E, and making use of Inria’s “IA pour et par les enseignants” MOOC. It also wants one or two “AI referents” in every secondary school, potentially replacing the current digital referent role. For students, it notes the Prime Minister’s promise of one weekly hour of AI teaching in grade 10 from the 2027 school year, but says this should be expanded into a structured curriculum covering digital literacy, AI, media and information, similar to the existing programme on affective, relational and sexual education. It also wants school doctors trained on mental health and cognitive risks, with workshops under their responsibility from the 2027 school year.

Résumé
Le Conseil national de l’IA et du numérique (CIANum), installé en juillet 2025, a publié en un an deux rapports (souveraineté numérique et IA dans l’éducation) et plusieurs notes, dont une sur l’IA agentique (février 2026) qui propose de remplacer le terme « agents IA » et détaille cinq niveaux d’autonomie, tout en pointant des risques techniques, éthiques et juridiques. Le CIANum alerte aussi sur l’impact de décisions d’acteurs étrangers (suspension d’accès à Fable 5/Mythos 5) et appelle à renforcer la préférence européenne et la gouvernance des communs numériques, via une « Fabrique des communs numériques ». Enfin, il examine l’articulation RGPD/IA agentique et recommande des cloisonnements (mémoire, supervision, détection des usages détournés), tout en plaidant pour une éducation à l’IA mieux formée et encadrée dans le système scolaire.

Première bougie soufflée pour le Conseil national de l’IA et du numérique (CIANum).

Le 23 juillet 2025, le Gouvernement avait installé cette nouvelle incarnation du Conseil national du numérique (CNNum). Depuis, elle a produit, entre autres, deux rapports, respectivement au sujet de la souveraineté numérique et de l’IA dans le système éducatif. Elle a aussi publié 5 notes.

Ne dites pas « agents IA », mais « IA agentique »

La première de ces notes, datée de février 2026, traite de l’IA agentique.

Le CIANum suggère de privilégier ce terme à celui d’« agents IA ». Cela évite, estime-t-il, de réduire la discussion à une opposition binaire entre automatisation et contrôle humain.

La note distingue 5 degrés d’autonomie des IA agentiques :

Automatisation simple fondée sur la reproduction de règles

Agents capables d’extraire des données ou d’analyser des documents

Flux de travail agentiques (enchaînement d’étapes dans des processus alternant automatisation de tâches et validation humaine)

Flux d’agents semi-autonomes (sensibles au contexte et capables de préparer puis de prendre des décisions)

Agents entièrement autonomes

Le CIANum synthétise quelques avancées technologiques, de l’allongement des fenêtres de contexte aux méthodes de post-entraînement. Il revient sur les limites techniques (effets de cascade, dérive d’orchestration, désalignement sémantique, sécurité des données, etc.) et les enjeux éthiques, sociétaux et juridiques (responsabilités, biais algorithmiques, transparence et intelligibilité des IA…).

Une partie de la note est consacrée au remplacement du travail humain. Le CIANum y constate notamment la lenteur de pénétration de l’IA dans les entreprises lorsque la part des tâches automatisées correspond à moins de 20 % des tâches d’un métier.

Une réaction au lancement de Claude Mythos…

En avril avait suivi une note sur le sujet IA & cybersécurité. Anthropic venait de lancer Claude Mythos, alors ouvert à une quarantaine d’organisations quasi exclusivement américaines.

Projectant un accroissement des corrections de vulnérabilités logicielles, le CIANum s’était inquiété de la potentielle incapacité des SI à suivre le rythme de patching. Il avait aussi appelé à se méfier de la tendance des fournisseurs à vanter la « dangerosité » de leurs modèles si ces derniers venaientà tomber entre de mauvaises mains. Une « manière habile » de susciter l’intérêt du public… et des investisseurs, estimait-il. Et de faire référence, en particulier, au « sommet sur la moralité de l’IA » qu’Anthropic avait organisé avec une quinzaine de membres du clergé catholique.

La note insistait aussi, entre autres, sur le besoin de renforcer les capacités d’évaluation des modèles. Elle soulignait la forte asymétrie d’informations dont la France souffrait par rapport aux écosystèmes britannique, américain et chinois.

… puis à la suspension de l’accès

En juin 2026, une autre note était intervenue après la suspension – unilatérale et sans préavis – de l’accès à Fable 5 et Mythos 5 pour les non-Américains.

Le CIANum y avait perçu une « étape supplémentaire, significative et inédite » vers la généralisation pratique du risque du « kill switch », dans le prolongement de la stratégie de « containment » jusque-là incarnée principalement par les restrictions à l’exportation de puces NVIDIA.

La menace sur l’autonomie numérique européenne est devenue une réalité tangible, avait résumé le CIANum, invitant chacun à « faire et maintenir à jour son analyse de risque ». En écho à sa note précédente, il avait rappelé la grammaire du risque catastrophique voire existentiel dont les GAFAM usent pour justifier l’idée que seule une poignée d’acteurs devraient disposer des technologies les plus avancées.

Dans ce contexte, le CIANum avait appelé à une accélération sur le chantier de la préférence européenne dans la commande publique. Ainsi que sur les mesures de market shaping (portabilité, interopérabilité, incitations fiscales ou réglementaires…).

Un point sur les frictions entre RGPD et IA agentique

La dernière note en date (juillet) aborde l’application du RGPD à l’IA agentique.

Cette dernière, de par son fonctionnement, met sous tension plusieurs principes qu’établit le règlement. Parmi eux :

Finalité (les capacités généralistes des systèmes d’IA agentique peuvent compliquer l’identification des traitements)

Licéité (l’autonomie de ces systèmes peut compliquer l’établissement d’un lien entre la base juridique initialement choisie et les opérations réalisées ultérieurement)

Minimisation (avec la mobilisation de grandes quantités de données et leur partage entre agents, la nécessité des traitements n’est pas toujours évidente à démontrer)

Exactitude (la nature probabiliste des modèles implique un risque d’erreur qui peut se propager)

Transparence (sorties difficiles à expliquer)

Limitation de la durée de conservation (tensions avec la conservation de jeux de données pour l’entraînement et l’amélioration des modèles)

Des difficultés se posent en conséquence sur l’exercice effectif des droits des personnes concernées (accès, rectification, effacement, opposition, limitation du traitement). L’IA agentique amplifie le problème en raison de la multiplication des flux et des espaces de mémoire, dont la synchronisation peut par ailleurs compromettre l’exactitude des données traitées.

Une invitation à mieux cloisonner les systèmes agentiques

Le CIANum pointe aussi la difficulté à apprécier le degré réel de supervision humaine dans le processus décisionnel de ces systèmes. Or, toute personne, en vertu du RGPD, a le droit de ne pas faire l’objet de décisions individuelles automatisées.

L’opacité complique aussi l’attribution des responsabilités. En la matière, l’AI Act n’impose pas de régime exprès. Mais, à travers son approche distinguant les acteurs de la chaîne de valeur, il en instaure une forme.

La circulation continue des données plus globalement des points de faiblesse allant du risque de fuite et de manipulation des données à leur réutilisation non maîtrisée.

La Commission européenne et le CEPD (Contrôleur européen de la protection des données) préparent pour cette année des lignes directrices sur l’articulation RGPD / AI Act.

Du côté du CIANum, on invite à préciser l’encadrement des décisions automatisées et à envisager des mesures de détection/filtrage des usages non prévus ou détournés. On appelle aussi à cloisonner la mémoire des systèmes (à chaque agent la sienne, sans accès automatique aux données des autres agents). Et à limiter leur taille, par exemple en faisant expirer les informations au bout d’un certain temps ou en les remplaçant régulièrement par de plus récentes. La mémoire pourrait même être cloisonnée par traitement afin de limiter le stockage excessif de données.

Protection des mineurs : le ciblage de plates-formes spécifiques déplaît au CIANum

Au milieu de ces notes consacrées à l’IA, le CIANum en publié une dédiée à la protection des mineurs en ligne. C’était en mars 2026. En toile de fond, la proposition de loi ayant pour principal effet d’interdire les réseaux sociaux au moins de 15 ans. L’Assemblée nationale venait de l’adopter en première lecture.

L’Australie avait été le premier pays à voter une telle interdiction, avec une limite à 16 ans. Entrée en vigueur en décembre 2025, elle vise Facebook, Instagram, Kick, Reddit, Snapchat, Threads, TikTok, Twitch, X et YouTube.

Le CIANum adhère peu à cette approche ciblée sur des plates-formes spécifiques. Il redoute un report sur des plates-formes plus obscures. Et de donner l’exemple de Roblox, non assujetti à la loi, mais sur lequel existeraient des dizaines de groupes de plus de 100 000 membres s’échangeant des contenus pédocriminels et sollicitant des actes sexuels auprès des mineurs.

En mars, l’Australie a fait évoluer son approche, par l’intermédiaire de codes de sécurité en ligne. Ils visent des contenus (violence à fort impact, pornographie, promotion du suicide…) et s’appliquent à un large éventail de services (chatbots, magasins d’applications, jeux en ligne, moteurs de recherche…). Objectif : que les enfants vivent des expériences en ligne adaptées à leur âge.

La France a une approche plus restrictive. Sa loi ne vise en l’occurrence que les « services de réseaux sociaux en ligne fournis par une plate-forme en ligne ». Le CIANum regrette qu’elle se prive ainsi de contrôler d’autres plates-formes dont certains contenus peuvent être nocifs. A fortiori à l’heure où « les usages évoluent et se déplacent ».

Contrôle de l’âge : des perspectives autour du portefeuille numérique européen

Pour le contrôle de l’âge, la Commission européenne distingue trois méthodes : l’autodéclaration, l’estimation (par reconnaissance faciale ou croisement de données d’usage, notamment) et la communication de preuves (identifiants physiques ou sources d’identification vérifiées).

L’Australie n’a pas imposé aux plates-formes des méthodes spécifiques. Elle a toutefois exprimé des préoccupations, en particulier à l’égard de Snapchat, qui ne vérifierait pas que la reconnaissance faciale se fait sur des images réelles.

En France, la loi SREN (mai 2024) laisse également le choix aux services qui diffusent des contenus pornographiques. Ils doivent néanmoins respectent les exigences techniques du référentiel associé (publié en octobre 2024).

Allemagne, Danemark, Espagne et Italie ont mis en place des obligations similaires. Les lignes directrices de la Commission européenne complétant le DSA sécurisent la démarche. Des réflexions sont portées autour du portefeuille numérique européen, chaque État membre devant en proposer au moins un au plus tard pour 2026. Une expérience a été lancée dans 5 États membres – dont la France – sur la vérification de l’âge pour l’accès aux réseaux sociaux.

Le CIANum, pas enthousiasmé par les plages horaires de déconnexion

La mise en place d’une règle unique peut interroger, explique le CIANum : les besoins de protection varient en fonction de l’âge et du degré de maturité. Certaines plates-formes profitent de ce débat pour plaider un contrôle au niveau de l’appareil, lors de la création d’un compte sur un magasin d’applications ou via l’OS. Pour le CIANum, cette option est trop extensive au regard du faible nombre de services concernés in fine. Elle pousserait de plus les développeurs des services en question à se soustraire à leurs obligations. Et serait peu compatible avec les outils numériques partagés, par exemple au sein d’un foyer.

Quant à l’idée d’imposer des plages horaires de déconnexion, le CIANum rétorque que le temps passé en ligne ne dit rien des pratiques et des contenus visionnés. Il rappelle que la Corée du Sud avait mis cette technique en œuvre entre 2011 et 2021. Elle l’avait levée en raison de son périmètre trop étroit (jeux en ligne).

L’idée d’un droit global au paramétrage des interfaces

Le CIANum a une autre crainte : que les mesures ciblées sur les mineurs « débrident » les espaces numériques pour les autres utilisateurs. Il en appelle ainsi à un consacrer un droit global au paramétrage des interfaces. Cela passerait par des options de filtrage renforcé. Y compris via des algorithmes conçus par des tiers, parallèlement à des services externes de modération contrôlés et labellisés.

Le DSA impose la fourniture d’informations sur les outils de modération et les principaux paramètres des algorithmes de recommandation. Mais, d’après le CIANum, cela produit des rapports techniques peu lisibles par le grand public ; et qui ne permettent pas de bien saisir les logiques économiques et attentionnelles qui structurent les systèmes.

Le CIANum relance également l’idée de repenser la dichotomie hébergeur/éditeur. Au titre de la directive e-commerce, les réseaux sociaux bénéficient d’un régime allégé : ils ne sont responsables des contenus que leurs utilisateurs publient sauf s’ils en ont eu connaissance effective ou qu’ils n’ont pas agi promptement pour les retirer. Dès 2014, le Conseil d’État avait recommandé de dépasser cette dualité pour consacrer un statut spécifique. Le DSA ne va pas jusque-là, mais distingue, au sein des hébergeurs, les plates-formes en ligne. Et leur impose un régime plus exigeant. La révision du règlement en 2027 pourrait constituer un moment opportun pour passer à une logique de responsabilité, affirme le CIANum.

Souveraineté numérique : gare à la compétition entre territoires

Le rapport sur la souveraineté numérique est paru en mai. Le CIANum y constate un « décalage persistant » entre le discours et la pratique de l’État, dont les services « continuent [en majorité] à recourir massivement aux solutions propriétaires étrangères ».

Au niveau interministériel, la DINUM manque de moyens et de pouvoir contraignant pour imposer une approche unifiée. Le travail en silos se retrouve au niveau des entreprises publiques et des collectivités territoriales. D’autant plus que, d’après le CIANum, l’État a instauré une compétition entre territoires (notamment pour accéder à des financements publics), conduisant chacun à se spécialiser sur un volet numérique.

Des initiatives montrent néanmoins une volonté croissante de coordination avec le privé, reconnaît le CIANum. Il mentionne FranceConnect et ProConnect, « modèles de réussite en matière de gouvernance et de coopération public-privé ». Il évoque aussi la participation de la DINUM à l’initiative Open Interop, que porte le comité stratégique de filière « logiciels et solutions numériques de confiance ».

Inscrire les financements publics dans la durée

Reste que le financement public des communs numériques et du logiciel libre est insuffisant. Y compris au niveau européen, faute de critères adaptés à leur modèle collaboratif.

Autre remarque : les financements ne s’inscrivent pas toujours assez dans la durée. Le CIANum donne l’exemple du programme investissements d’avenir (PIA), qui a financé de nombreux projets sur 18 à 36 mois. D’autres initiatives ont abouti à un « saupoudrage inefficace », à l’image d’ALT-EDIC et du consortium LLM4EU (40 M€ répartis entre 70 acteurs).

Le sous-financement tient peut-être en partie à la confusion entre libre et gratuit. Celle-ci engendre plus globalement des attentes jugées irréalistes en matière de niveau de service.

Une « Fabrique des communs numériques » pour gouverner la demande

Pour concrétiser une gouvernance de la demande, le CIANum souhaite la création d’une « Fabrique des communs numériques ». Elle pourrait notamment associer l’État, la Caisse des dépôts, les associations de collectivités, les DSI des grandes entreprises et les représentants de fournisseurs de solutions et des communautés de mainteneurs.

L’Ariane (Autorité du numérique et de l’IA) assurerait la mise en œuvre de cette structure qui :

Consoliderait les diagnostics de dépendances

Élaborerait une cartographie nationale de l’existant, dans la lignée du Socle interministériel de logiciels libres

Attribuerait un label à des solutions sur étagère répondant à des critères de gouvernance ouverte, d’interopérabilité et de pérennité

Déclencherait des financements ciblés (via ses partenaires, via des appels à communs ou via un fonds propre dédié aux communs numériques)

Contribuerait à la gouvernance active de communautés open source

Rendrait visibles les structures juridiques adaptées aux communs numériques

SCOP, SIEG, SCIC… Des véhicules juridiques mobilisables pour les communs numériques

Parmi les véhicules mobilisables :

SCOP (sociétés coopératives et participatives)

Elles ont l’avantage de favoriser un attachement durable aux valeurs initiales du projet, qui ne dépend pas du choix d’un actionnaire majoritaire.

SCIC (sociétés coopératives d’intérêt collectif)

Gouvernance multipartite, avec possibilité d’intégrer des acteurs publics et privés en maintenant une finalité de « lucrativité limitée ».

SIEG (services d’intérêt économique général)

Permet de financer durablement la maintenance de communs numériques reconnus comme relevant de l’intérêt général, sans les procédures lourdes des marchés publics classiques.

AAC (appels à communs)

Identification de défis d’intérêt général et financement d’un consortium qui s’engage à contribuer à un commun partager.

Fabriques de communs

Incubateurs sans structure juridique qui lancent des « appels à idées » et sélectionnent des projets faisant alors l’objet d’un appel à intrapreneurs et à partenaires.

Le CIANum suggère aussi d’étudier la transposition en droit français du modèle des fiducies d’utilité sociale. Développées au Québec, elles permettent à des organisations de partager leurs données dans un environnement de confiance avec gouvernance collective.

Au niveau européen, un levier pourrait consister à élargir le mandat du consortium DC-EDIC, avec des missions sur le modèle de celles que la Fabrique des communs numériques endosserait en France.

Au sein de l’Éducation nationale, les usages innovants de l’IA restent dans l’ombre

Le rapport sur l’IA dans le système éducatif a été publié en juin.

Le CIANum y souligne les démarches de la France. Dont un cadre d’usage sur l’IA en éducation « parmi les plus complets à l’échelle internationale en termes d’appréhension de ce que sont les modèles de langage, leurs effets et leur encadrement juridique ». Le « dernier kilomètre » reste toutefois à accomplir. Témoin le nombre d’enseignants formés, « particulièrement faible » comparativement aux autres pays européens. Faute de cadre clair, ceux qui innovent le font dans l’ombre : leurs usages restent peu documentés.

Les outils basés sur l’IA peuvent permettre une personnalisation des parcours et une meilleure inclusion des élèves. Ils peuvent aussi fournir un moyen d’aborder des enjeux sociétaux. Le CIANum en veut pour preuve le programme Internet Sans Crainte. Il organise, de la quatrième au lycée, des « IAckathons » où les élèves imaginent des solutions concrètes intégrant l’IA pour répondre à des défis contemporains.

Sur la personnalisation des parcours, le CIANum cite la plate-forme Lailo, destinée aux enseignants de CP, CE1 et CE2. Elle aide à différencier l’apprentissage de la lecture en fonction de l’avancement de chaque élève.

Face au risque de « démission cognitive », soutenir les designs « socratiques »

Revers de la médaille : les outils à base d’IA posent le risque d’une « démission cognitive ». Sur ce point, le CIANum se réfère notamment à une étude MIT Media Lab à base d’électroencéphalogrammes. Elle a montré que les participants utilisant un LLM pour réviser retenaient nettement moins bien que ceux ayant recours à d’autres méthodes. De là, un appel à privilégier un design « socratique », qui exerce l’esprit critique. Exemple : l’application Khanmigo (non distribuée en France). Elle ne donne jamais la réponse directement, mais guide l’élève par des questions successives. La CIANum suggère de lancer un appel d’offres afin de sélectionner une app de ce type pour le collège et une pour le lycée d’ici à fin 2026.

Autre risque : l’isolation des élèves. On touche ici, en particulier, au biais dit « sycophantique ». Ou comment l’IA dit à l’utilisateur ce qu’il a envie d’entendre. À ce sujet, le CIANum mobilise les constatations d’Oxford et de Stanford : exposés à une IA complaisante, les humains perdent progressivement leur préférence du contact humain pour le soutien émotionnel et l’estime de soi.

Dans le même ordre d’idée, l’ultra-individualisation peut conduire à ne plus soucier du fonctionnement des autres. Un enfant pourrait ne plus avoir la « patience sociale » requise pour tenir compte des conséquences de l’état émotionnel et cognitif de ses interlocuteurs.

Des épreuves orales aux projets collaboratifs, repenser les modalités d’évaluation

Le CIANum avertit : l’accessibilité d’outils comme ChatGPT crée une illusion de simplicité, alors que ces technologies ne sont pas conçues pour un usage éducatif. Il y a aussi illusion de gratuité, alors qu’il est probable que le coût des modèles de langage de qualité croîtra avec les années.

La diffusion de l’IA impose également de repenser les modèles d’évaluation. Entre autres en l’axant davantage sur les processus que sur le résultat, tout en donnant de l’importance à la vérification par oral et aux projets collaboratifs.

La CIANum incite plus généralement à ménager des « temps sans IA » pour garantir la consolidation des savoirs fondamentaux acquis. « Un élève qui sait être fort sans l’IA et qui sait aussi à quel moment et selon quel protocole l’utilisaer sera le mieux préparé à la société qui se dessine », affirme-t-il.

Passer du « référent numérique » au « référent IA »… quitte à changer le titulaire

Opérationnaliser ce principe d’éducation dépendra de la capacité des enseignants à adapter l’usage de l’IA en fonction des objectifs pédagogiques. D’où la recommandation d’établir un programme massif de formation continue. Une évolution immédiate consisterait à généraliser un module dans la LPE (licence Professorat des écoles) et le M2E (master Enseignement et éducation). Sur la partie en ligne, le CIANum préconise de capitaliser sur des ressources comme la MOOC « IA pour et par les enseignants », qu’Inria a conçu. Il suggère aussi de nommer, dans chaque établissement du secondaire, 1 ou 2 enseignants « référents IA ». Y compris en réinterrogeant la fonction de référent numérique, quitte à en changer le titulaire.

Concernant les élèves, le Premier ministre a promis qu’à partir de la rentrée 2027, ils auraient, en classe de seconde, une heure par semaine d’enseignement à l’IA. Le CIANum demande à aller plus loin, pour inclure un programme structuré d’éducation au numérique, à l’IA, aux médias et à l’information, comme il en existe un pour l’éducation à la vie affective, relationnelle et sexuelle. Il conseille aussi de former jusqu’aux médecins scolaires, sur les enjeux de santé mentale et les risques cognitifs. Et d’organiser, à partir de la rentrée 2027, des ateliers sous leur responsabilité.

Illustration générée par IA

The post En un an, qu’a produit le Conseil de l’IA et du numérique ? appeared first on Silicon.fr.

AI Insight
Core Point

CIANum成立一周年发布多份报告与要点:聚焦“IA agentique”分级、RGPD/AI agentique合规张力、网络未成年人保护与数字主权/开源资金机制,强调风险评估与欧洲采购/互操作以避免技术依赖与“kill switch”外溢。

Key Players

CIANum(Conseil national de l’IA et du numérique) — 法国国家层面AI与数字政策咨询机构;基于巴黎/法国参与多项指南与建议。

Anthropic — 生成式AI公司;美国,推出Claude Mythos并引发非美访问中断争议。

Ariane(Autorité du numérique et de l’IA) — 法国数字与AI监管/执行相关机构(文中作为落地结构)。

DINUM — 法国数字化转型主管部门;推动跨部门数字政策但被指资源与约束力不足。

CEPD(EDPB) — 欧盟数据保护监管协调机构;与欧委会共同准备RGPD/AI Act指引。

欧盟委员会 — 制定DSA/AI Act相关政策与未来指引;推动未成年人年龄验证与指引。

Inria — 法国科研机构;提供“IA pour et par les enseignants”MOOC资源。

Khanmigo(Khan Academy) — 教育AI产品(文中作为“socratique”设计示例)。

MIT Media Lab — 学术机构;研究LLM复习导致记忆下降等证据被引用。

Industry Impact
  • Computing/AI: High — “IA agentique”分级、风险(级联/漂移/语义失配/数据安全)与RGPD落地要求影响产品设计与合规。
  • ICT: Medium — 强调欧洲互操作、采购偏好与开源/公共数字基础设施治理,影响供应链与采购策略。
  • Terminals/Consumer Electronics: Low — 主要讨论在平台/接口与OS层的年龄控制选项,直接硬件影响有限。
  • Energy: Low — 未涉及。
  • Automotive: Low — 未涉及。
Tracking

[Strongly track / Monitor] — 关注Anthropic“访问中断/kill switch”外溢风险、RGPD/AI agentique合规指引与欧洲开源资金/采购偏好落地进度。

Categories
人工智能 软件 网络安全 创业
AI Processing
2026-08-31 11:08
openai / gpt-5.4-nano