判案预测:83位法律专家PK大数据

2001年,宾夕法尼亚大学法律系教授特德·鲁格(Ted Ruger)正在参加一个研讨会,听取安德鲁·马丁(Andrew Martin)和凯文·奎因(Kevin Quinn)两位政治学家关于一篇大数据分析文章的报告。马丁和奎因所报告的文章称,仅仅利用与案件政治特征相关的几个变量,他们就能预测出高等法院法官的投票结果。对此,特德不以为然。

特德看起来一点儿也不像大家平时看到的那些貌似身体瘦弱的学究们;他的身材像运动员一样健硕,长着方下巴,脸上虽然布满皱纹但容貌英俊。他听研讨会时,不喜欢那些政治学家们报告其研究结果的方式。“他们实际上用了预测这一术语,”他告诉我,“我坐在那里听,就像一个怀疑论者。”他不喜欢这篇文章,因为他们所做的是预测过去。“跟很多法律或政治科学研究一样,”他说,“这篇文章本质上也是针对过去的。”

因此,在研讨会结束后,他走到他们跟前提出自己的建议。“从某种意义上来说,这一项目的起源就是我事后跟他们说,为什么不做一个前向的检验呢?”他们谈着谈着,就决定进行一场比赛——“友好的跨学科竞赛”,比较一下预测高等法院案例审判结果的两种不同方法。一边是政治学家的大数据分析预测,另一边是83位法律专家的意见。他们的任务是提前预测每位法官对2002年高等法院审过的每个案件的投票结果。专家就是真实的法律资深人士,包括法律系教授、法律从业人员以及法律博学人士(共有38人担任过高等法院法官,33人有教授职称,5人担任或曾担任法律系主任)。大数据分析计算程序要对所有案件的所有法官的投票做出预测,而专家只需预测在他们所专长的领域内的案件投票情况。

令特德没想到的是,比赛结果竟然打成了平手。政治学家的模型考虑了如下六个因素:

(1)案件最初的巡回法庭;

(2)案发地区;

(3)原告类型(如美国、公司雇主,等等);

(4)被告类型;

(5)低等法院规章的意识形态倾向(自由还是保守);

(6)原告是否称某项法律或条例不符合宪法。

特德说:“我原本认为他们的模型包含了决策制定过程中太多没必要的细节,因此法律专家应该预测得更好一些。”对于法律和过去案件的透彻了解毕竟还是管点用的。

这个简单的检验指出了最基本的问题:什么是法律。法官奥利弗·文德尔·霍姆斯(Oliver Wendell Holmes)首创了法律预测说。“法律的生命不在于其逻辑性,而在于经验。”对霍姆斯来说,法律只不过是“对于法官会怎么做的一种预测”而已。霍姆斯不同意哈佛大学主任(也是苏格拉底式法律教育方法的权威)克里斯多夫·哥伦布·兰德尔(Christopher Columbus Langdell)的观点,后者认为“法律是一门科学,这门科学所有能够获得的资料都已经包含在教科书中了。”霍姆斯认为准确的预测与“时间的紧迫性、对于公共政策的直觉、公开或下意识的甚至对于与自己观念相同的法官的偏见”等等密切相关。

政治学中的主流统计模型都是霍姆斯模型,因为该模型几乎完全强调法官的偏见,即主观意识想法。政治学家常常会假设政治理念固定不变,并且服从从自由到保守的平滑分布。根据这种大数据分析计算程序得出的决策树只有细微差别。马丁和奎因使用这9名法官以前审过的628起案件的历史数据,首先考察何时这六大因素预测出的决策结果是一致同意审理或一致驳回上诉。然后,再使用同样的历史数据,针对没有达成一致意见的案件,找出能够最好地预测出每个法官投票的流程图(有条件地结合上述因素)。例如,下面这幅图就是真实研究中用来预测桑德拉·戴·奥康纳(Sandra Day O’Connor)法官的投票流程图。

资料来源:Andrew D. Martin et al,“Competing Approaches to Predicting SupremeCourt Decision Making,”2 Perspectives on Politics 763 (2004)

这幅用于预测的流程图相当简单。第一个决策点预测只要低等法院的法案是“自由的”,奥康纳就会驳回上诉。因此,在“格鲁特对伯林杰”案(Grutter VS Bollinger)中,高等法院2002年所审案件挑战着密歇根大学法学院(Michigan Law School)同意审判的合宪决定,该模型仅仅因为低等法庭的审判(在支持法学院同意审判的决定方面)是自由的而错误地预测奥康纳会驳回上诉。如果低等法庭是“保守的”,流程图就会略微复杂一些,决定因素包括最初巡回法庭的预测、被告类型以及案件提交地区。当然,这种统计预测完全忽略了本案件及其之前该法庭所审案件的具体特定问题。而对特定问题了解深入的法律专家自然会做得更好一些。

请注意,使用统计模型时,我们仍然需要人来为案件编码。关键是要有专家来决定低等法庭的决策是“自由的”还是“保守的”。研究表明怎样使统计预测与主观判断相符且相关。统计决策规则不可能不依赖于专家或临床医生的主观判断。规则可以问护士是否认为病人看起来“感觉不舒服”。但这是一种不同寻常的专业知识。不需要依赖专家做出最终决策,专家只需要针对某个症状存在还是不存在给出意见。人类专家也许有一定的发言权,但是大数据分析方程限制了他们自由处置的能力。

特德“进行前向检验”的简单想法为进一步的检验铺平了道路。随着高等法院审判过程的进行,很多知情人都满怀兴趣等着看这项检验。做出最终决策之前,网站上会公布计算机和专家分别做出的预测,这样每个陪审员的观点提交上去时,人们就都可以直接看到结果了。

最后专家输了。对于2002年审判的所有案件,模型预测的法庭同意审判或驳回上诉的结果正确率为75%,而所有法律专家一起只预测对了59.1%。在预测奥康纳法官和肯尼迪的关键选票上,大数据分析尤为有效。对于奥康纳的选票,模型预测正确率为70%,而专家的正确率仅为60%。

极为简化的统计模型的预测能力不仅胜过律师,而且胜过拥有案件详细信息的该领域专家,这怎么可能呢?这一结果只是统计上的反常现象吗?它与法律界的特质或自大有没有关系?这些都是本章的核心问题。简单地回答,特德的检验代表了更加一般意义上的现象。几十年来,社会学家一直在比较大数据天才与传统专家的预测谁更准确。一个又一个的研究表明,大数据天才有占上风的趋势。

摘自:《大数据思维与决策》

图书简介:

《大数据思维与决策》是大数据时代的奠基之作,耶鲁大学计量经济学家伊恩·艾瑞斯早在20世纪末就洞察到大数据浪潮的到来。本书通过讲述各个领域有关大数据分析与决策的经典案例,为读者解答了一系列关系到现在与未来的问题,如为什么谷歌和亚马逊比你还了解你自己的喜好、医生如何利用数据分析做出正确诊断、教师是否要摒弃自身创造性为孩子提供精确有效的教育指导,以及政府、法院如何在推动信息公开的同时制定出有益于未来的制度和法案等。希望读者在阅读后,可以迅速在信息变革中把握机遇,充分利用大数据分析做出优质决策。

出版社: 人民邮电出版社;2014年10月

平装: 212页

作者简介

伊恩•艾瑞斯(Ian Ayres) 计量经济学家、律师,耶鲁大学法学院和管理学院教授,stickK.com网站的创始人,《法律、经济学和组织机构期刊》(Journal of Law, Economics, and Organization)编辑,曾著有11本书,发表过100篇文章。他是《福布斯》杂志的专栏作家,著名公共广播节目《Marketplace》的时事评论员,是《纽约时报》“魔鬼经济学”博客的专栏作家之一。 其著作《Insincere Promises: The Law of Misrepresented Intent》获得了由美国艺术与科学学院颁发的Scribes图书奖。他成就卓著、名声斐然,曾受到《黄金时间实况》、《奥普拉脱口秀》、《早安美国》节目以及《时代周刊》《Vogue》等杂志的采访,可以说伊恩•艾瑞斯是那一代人里成就最多、文章观点被引用最多、名气最大的法学教授。

目录

第1章 数据天才的时代 1 棒球界的奥利·阿什菲尔特 8 酒后吐真言 11 我为什么写此书 15 本书框架 18 第2章 谁在替你思考 19 eHarmony:大数据帮你找到另一半 24 用数据分析挑选职位应聘者、细分客户 29 比起消费者自己,企业知道的更多 33 消费者的反击 35 预测有多准确 38 Google:个性化数据挖掘 39 牵连效应 40 寻找“神秘数字”,杜绝欺诈 42 第3章 抛硬币创建数据 45 CapOne的掷色子试验 49 你正在浏览的网页是随机选择的吗 52 谁更有用,更有创造力 56 随机选择的作用仅仅是促进营销吗 57 别做白日梦,主动参与创建新数据 59 ...

原文发布于微信公众号 - 大数据文摘(BigDataDigest)

原文发表时间:2015-02-23

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏AI科技评论

干货 | 2019 AI 国际顶级学术会议一览表

AI 科技评论按:2017 -2018 年两年间,AI 科技评论秉承「洞见学术前沿,连接产业未来」的宗旨,走遍美国、加拿大、澳大利亚、法国、新加坡等多个国家,两...

2743
来自专栏新智元

未来中国版Kaggle锋芒初显 :CCF大数据与计算智能大赛完美收官

【新智元导读】2016年12月25日,“2016CCF大数据与计算智能大赛”(BDCI)正式落幕。多位大数据与计算智能领域顶尖强者,用作品赢得了行业专家的一致认...

3475
来自专栏CDA数据分析师

想太多,何不扎实的学?【统计学经典教材书单】

一、统计学基础部分 1、《统计学》 David Freedman等著,魏宗舒,施锡铨等译 中国统计出版社 据说是统计思想讲得最好的一本书,读了部分章节,受益...

28110
来自专栏华章科技

如果35岁时破产,还有多大可能逆袭?

最近在知乎上看到一个很有趣的问题:房间里有 100 个人,每人都有 100 元钱,他们在玩一个游戏。每轮游戏中,每个人都要拿出一元钱随机给另一个人,最后这 10...

873
来自专栏凌帅的阅读思考与实践

《股民的自我修养》读书笔记三:关于降维攻击

《三体》这部书里描述太阳系是这样毁灭的:外星人与地球人大战,使出了最终极的武器,先改变自己的维度,把自己从三维生物降低到二维生物,然后用一种二向箔...

501
来自专栏量子位

2018星际AI大赛冠军诞生!一个个机器学习算法,都输给不会学习的韩国bot

二十多个掌握了机器学习技能的AI,全都在一个不会学习、只会基于规则机械行动的bot面前,俯首称臣。

1093
来自专栏量子位

Nature机器学习子刊被讽开历史倒车,Jeff Dean等数百学者签名抵制

全球数百位学者联手署名反对的事情并不太常见。这次,大名鼎鼎的学术期刊《自然》(Nature)杂志却被机器学习界的朋友们集体抵制了。

1032
来自专栏量子位

Hinton:人类就是机器,绝妙的机器

原文《Mr.Robot》刊载于 Toronto Life 作者 KATRINA ONSTAD 摄影 DANIEL EHRENWORTH 编译 夏乙 唐旭 量子位...

3479
来自专栏AI科技评论

ECCV 2018 正会首日:论文投递量暴涨56%,参会人员翻倍

AI 科技评论消息,当地时间 9 月 10 日上午,经过两天 workshop & tutorial 预热,ECCV 2018 于德国慕尼黑正式开幕,正会将持续...

1892
来自专栏腾讯防水墙

为什么无牙象越来越多?防水墙助力大象公益,拒绝象牙买卖

1062

扫码关注云+社区