AI 代理的行为由它被设定与评价的目标决定。霍姆斯特罗姆与米尔格罗姆(1991)指出,当代理人的工作有多个方面、只有一部分被衡量和奖励时,代理人会把精力转向被衡量的那部分。如果平台以交易量、点击与使用时长评价代理,代理就会更频繁地提醒、更积极地建议交易;这些指标的提高,不等于用户的结果变好。美国证券交易委员会 2021 年就券商与投资顾问使用数字化互动手段公开征求意见,关注的正是游戏化设计、推送与提示对投资者行为的影响。
分清责任的前提,是事后能够还原发生了什么:代理当时看到了什么数据,依据委托书的哪一条,经过了谁的授权,执行层做了哪些检查。证券行业对记录的保存早有要求,例如美国证券交易委员会第 17a-4 条规则规定了券商须保存的记录及其保存方式。对 AI 代理而言,记录要覆盖到每一次关键行动:输入的数据与时点,依据的条款,授权的级别,执行的结果。记录完整,责任才能分清,补偿才有依据,同样的错误也才能被避免。
记录决定了责任能否分清
一起事件:代理卖出了一笔超出约定比例的持仓。事后要回答六个问题。切换记录的完整程度,看能回答多少。
示意。券商须保存的记录及其方式见美国证券交易委员会第 17a-4 条规则;对 AI 代理,记录还要覆盖输入、依据与授权。
七、对产品设计的含义
让代理的收入与目标站在用户一边,用结构而不是披露处理冲突;责任跟随控制,并以完整的记录为依据。
本章小结:让代理站在用户一边
四条设计要求,各自对应本章的一个机制。
代理有几个委托人明确代理服务于用户
把委托书与用户的净价值写进代理的目标,并向用户说明平台从哪里赚钱。
冲突会写进目标不以交易量与使用时长评价代理
评价指标以用户的净价值与守约为主,交易建议的频率接受监测。
披露不够用结构处理冲突
收入不随交易与推荐变化,建议时隔离产品收入信息,并定期独立审计建议的偏向。
责任跟随控制按最低成本避免者分配责任,并完整记录
执行与数据错误由控制方承担;每次关键行动记录输入、依据、授权与检查,出错时据此补偿与改进。
参考文献
Bernheim, B. D., & Whinston, M. D. (1986). Common agency. Econometrica, 54(4), 923–942.
Holmström, B., & Milgrom, P. (1991). Multitask principal-agent analyses: Incentive contracts, asset ownership, and job design. Journal of Law, Economics, & Organization, 7(Special Issue), 24–52.
U.S. Securities and Exchange Commission (2021). Request for Information and Comments on Broker-Dealer and Investment Adviser Digital Engagement Practices. Release No. 34-92766; IA-5833.
Cain, D. M., Loewenstein, G., & Moore, D. A. (2005). The dirt on coming clean: Perverse effects of disclosing conflicts of interest. Journal of Legal Studies, 34(1), 1–25.
U.S. Securities and Exchange Commission (2023). Conflicts of Interest Associated with the Use of Predictive Data Analytics by Broker-Dealers and Investment Advisers (proposed rule). Release No. 34-97990; IA-6353.
Calabresi, G. (1970). The Costs of Accidents: A Legal and Economic Analysis. Yale University Press.
U.S. Securities and Exchange Commission. Rule 17a-4: Records to be preserved by certain exchange members, brokers and dealers.