assessment 研究报告行业与产业研究其他2024-07

Meaningful human command: advance control directives as a method to enable moral and legal responsibility for autonomous weapons systems

However, a significant challenge is how humans can ensure moral and legal responsibility for systems operating outside of normal temporal parameters.

发布时间
2024-07
link 原始页面

notes 内容介绍

21世纪战争的速度在提升,常规力量与自主系统的大规模使用、人机整合叠加在一起。随之而来的难题是:当自主系统在正常时间参数之外运作——快于人类理解,或慢到人类注意力无法维持——人类还能否确保对其行为的道德与法律责任。S. Kate Devitt 的这份资料正是在追问这一点,它把问题推进得更具体:人类能否站在实时之外,通过事先建立某种契约,为未来情境中的自主系统行动授权。值得现在看的地方在于,它没有停在原则层面的呼吁,而是把医疗领域的「预先医疗指示」(advance care directives)当作法律先例,试着给出一条可操作的制度路径。

这份资料是专著中的第5章,开篇为引言,随后进入定义部分。论证方式以概念分析和法律类比为主,而非实证测量:它先把「有意义的人类控制」放到时间维度下重新审视,再借预先医疗指示的结构,提出「advance control directive」(ACD,预先控制指令)与「advance control planning」(ACP,预先控制规划)两个概念。支撑材料来自多个方向,包括 Asaro(2012)关于合法致命决策过程的要求、Ricoeur(1980)关于叙事与时间中介经验的论述、Maan 与 Cobaugh(2018)关于意义经由叙事建构的判断,以及 Smith(1981)、Dehais 等(2020)、Hancock 等(2008)关于人类因素与注意力的研究。武器系统的定义则引用美国国防部 3000.09(2023):一旦激活即可在无操作员进一步干预下选择和交战目标的系统,包括允许操作员覆盖、但无需持续操作员介入的监督型系统。

材料给出的关键判断之一,是合法致命决策过程本身有硬性条件。按 Asaro(2012)的框架,参与核实合法目标并发动致命武力的人类决策者,必须被给予足够的审议时间、受过适当训练且充分知情,并且被追究责任。换句话说,时间不是背景变量,而是问责能否成立的前提。作者进一步区分了自主性削弱人类参与价值的两种情形:一是系统响应刺激快于人类在行动时刻所能理解和反应,例如自主对抗措施武器对来袭导弹开火、达到威胁阈值时的自主网络攻击;二是系统长期休眠、极少行动或以极低风险方式运行,例如感知环境、在极深海域以几节速度航行,此时人类的注意力与技能同样派不上用场。

在人类因素层面,材料指出单调环境会降低大脑活跃度,缺乏参与和唤醒会把人推向走神

format_quote 原文摘录

自动提取自 PDF

5 MEANINGFUL HUMAN COMMAND: ADVANCE CONTROL DIRECTIVES AS A METHOD TO ENABLE MORAL AND LEGAL RESPONSIBILITY FOR AUTONOMOUS WEAPONS SYSTEMS Author: S. Kate Devitt Author ORCID: 0000-0002-6075-4969 Abstract: 21st century war is increasing in speed, with conventional forces combined with massed use of autonomous systems and human-machine integration. However, a significant challenge is how humans can ensure moral and legal responsibility for systems operating outside of normal temporal parameters. This chapter considers whether humans can stand outside of real time and authorize actions for autonomous systems by the prior establishment of a contract, for actions to occur in a future context particularly in faster than real time or in very slow operations where human consciousness and concentration could not remain well informed.