重庆大学刘礼 因果学习与应用 (重庆大学刘礼生病了)

文章编号:43429 资讯动态 2024-12-09 因果框架刘礼重庆大学

重庆大学刘礼:因果学习与

因果学习作为人工智能领域研究热点之一,其研究进展与成果也引发了众多关注。4月9日,在AI TIME青年科学家——AI 2000学者专场论坛上,重庆大学大数据与软件学院教授 刘礼 做了 《因果学习与应用 的报告。

普森悖论入手,分析了当前机器学习面临的困难,然后介绍了几个主流因果框架解决“非独立同分布”、“结合知识”的思路,以及框架的优缺点,

“目前有两套主要的因果模型:Pearl的结构因果模型,以及Rubin的潜在结果模型。两者都可以预测、干预以及回答反事实问题,但对于“发现定理知识”不确定是否可行。潜在结果模型的不同之处在于,可以从数据中学习,但结合现有知识较为困难,结构因果模型则相反,可以结合现有知识,但从数据中学习的能力还亟待进一步检验。”

此外,他还结合自己的工作成果,提到了因果框架如何应用于图像合成、疾病诊断、行为识别等例子,以下是演讲原文,AI科技评论做了不改变原意的整理。

今天报告的内容是因果学习及其应用。该领域最著名的一个例子是辛普森悖论:在700例肾病患者中,观察他们服药情况,发现服药男性的治愈率是93%,女性治愈率73%,不服药的男性治愈率为87%,女性为69%。分男女组别考察,能够得出”服药有助于恢复”的结论,但从整体样本考察,会发现不服药的治愈率83%高于服药的治愈率78%。

重庆大学刘礼:因果学习与

另外一个辛普森悖论的例子关于房价。10年前,某城市市中心的房价是8000元/平米,共销售了1000万平;高新区是4000元/平米,共销售了100万平;整体来看,该市7636元/平米;现在,市中心10000元/平米,销售了200万平;高新区是6000元/平米,销售了2000万平,整体来看,该市6363元/平米。因此,分区来看分别都涨了,但从整体上看,会有疑惑:为什么现在的房价反而跌了?

重庆大学刘礼:因果学习与

辛普森悖论虽然不是新提出的,但却是各领域不可忽视“顽疾”。2019年,新冠爆发时,有学者分国家对病死率进行了统计,如上图,在各个年龄段,中国的病死率都比意大利高;但整体统计下来,意大利却反而更高。

这种分组和整体结论不同的情况,也是机器学习模型的困境。例如训练数据和测试数据不满足独立同分布的假设,那么机器学习在分布偏移情况下很难鲁棒地学习,在新的场景中很难使用现有的模型。

目前基于数据驱动的机器学习方法,训练出的模型都得出的结论大多是变量和变量之间的相关关系,而不是因果关系。 例如之前有项研究发现,在某大国暴力犯罪与腌黄瓜消耗密切相关,但这种相关性并不代表因果性。

重庆大学刘礼:因果学习与

从因果的角度,辨析腌黄瓜和暴力犯罪之间的关系需要考虑混淆变量。如上图,混淆变量会同时影响独立变量和因果变量,从而造成两者之间的伪相关。如果将传统统计和因果推断进行对比,有以下几个特点:

重庆大学刘礼:因果学习与

在90年代,知识驱动的机器学习方法占据主流,基于人类知识,编码成规则,让计算机自动在规则之上进行推理。深入思考,其实西方科学的发展史就是因果问题,这套真理体系+推理体系我们从小就在学习:已知1+1=2, 1+2=3,可以推导得出1+1+1=3。

这套体系也有可能出错,例如牛顿定律在地球上适用,但在宇宙中就失效,从而爱因斯坦提出了相对论。

东方科学发展也有几千年,也大量地研究过因果关系。



超越数据驱动,迈向可解释性

主流数据驱动的机器学习已经非常成功,无论是阿法狗,还是GPT都带来了惊艳的效果。但有两个缺点: 没有可解释性、可控性差。

重庆大学刘礼:因果学习与

为了解决上述问题,图灵奖获得者朱迪亚·珀尔提出 因果关系之梯 。如上图,第一层次是关联,通过概率表达描述出观察到的一堆数据。第二层次是干预,不仅是观察,而且是进行实验改变,例如如果吃了阿司匹林,我的头痛会得到治愈吗?如果我们禁止吸烟将会发生什么?其中,吃药和禁止吸烟都是干预手段。第三层次是反事实,在既定结果已经发生的情况,假设当初采取另一方案,则会发生什么。反事实不会得到观察数据,毕竟不存在两个平行世界,但确实经常遇到的情况,经典的就是人们常说的“如若当初........就不会......”。

重庆大学刘礼:因果学习与

在概率空间层面,如何解释?如上图,观察到的数据,形成一个联合分布概率表达;加入干预之后,每一个操作对应一个概率分布,因此可能解决“独立同分布”假设带来的缺陷。

重庆大学刘礼:因果学习与

反事实问题目前非常难解决,也有很多例子。黑人被警察控制事件,反事实下,就对应:如若白人被警察控制了,会发生什么?在影视剧中,也常发出如若是另外某个明星参演,票房会有什么变化。这些反事实问题没办法验证,但需要回答。

重庆大学刘礼:因果学习与

针对此问题,目前有两套主要的因果模型:Pearl的结构因果模型;Rubin的潜在结果模型。两者都可以预测、干预以及回答反事实问题,对于“发现定理知识”目前还不确定是否可行。但潜在结果模型的不同之处在于,可以从数据中学习,但与现有知识相结合比较困难,而结构因果模型则相反,可以结合现有知识,但从数据中学习的能力还亟待进一步检验。

目前,因果范式有几个问题正在解决: 因果发现、因果推理。

重庆大学刘礼:因果学习与

因果发现需要基于已有的数据找出变量和变量之间的因果关系。目前有两套主流的方法:基于约束以及基于评分的。这两套方法不去详细讲述。但存在的问题是:随着变量的增多,需要检验因果图就会达到天文数字。因此,如何利用机器学习方法反过来提升因果发现,是目前流行的问题。

在机器学习领域中,Pearl的方法本质是基于结构方程,主流方向是用它进行因果解耦。同时,也有一些非因果的方法,例如在SVM空间中进行超平面切分。

重庆大学刘礼:因果学习与

在因果推理层面,Pearl提出了do算子,在因果图上给出了一系列定理和假设,用传统的概率表达形式进行操作,这就让“因果”变得可计算。Pearl同样给出了反事实计算框架,其最重要的是“孪生网络”,包含一个真实世界,以及一个反事实世界。Pearl这套理论其实也存在缺点,即假设因果图是存在的,并需要包含一些先验知识,例如方程的结构是线性还是非线性的。

因果效应评估,就是在有一堆观察变量以及未观察变量的情况下,如何评估出变量X对变量Y的因果效应有多大。目前主流方法包括倾向得分、工具变量等等。




应用例举,因果框架符合现实假设

目前的图像自动生成很多都是以条件为主的,例如给定标签的控制、图像的控制、文字的控制,考虑如何基于已有的观察数据进行训练模型、进行生成。

与基于条件的生成方法不同,基于潜在变量数据的方法目的在于解决“某些变量无法直接被观察”的困境。

因果干预图像合成方法,是对相应的变量进行解耦,即观察变量变化如何导致结果变化,该方法能够精准控制图像的某一部分合成。

重庆大学刘礼:因果学习与

此外,因果方法在医疗领域有很多应用。基于结构函数的因果模型,设计因果发现框架,试图超越分子与分子之间的关联性,找出其因果性。具体操作分成两步:第一步发现变量和变量之间,包括潜变量之间的因果图;第二步基于因果图,确定明确的结构函数关系。

目前,我们开发出基于贝叶斯图学习因果模型,超越了传统学习函数步骤,使用因果图进行描述关系,也是分为两步:第一步边定向,需要满足马尔科夫等价条件,使得因果效应最大化;第二步是因果效应评估。目前,该方法已经应用在最具代表性肿瘤特征选择这一课题上。

最后一个应用是人体行为识别。人体识别多是采用传感器和视频流的方式进行,会有前后的因果关系。因此,可以用格兰杰因果方法解决时序因果中的问题。

重庆大学刘礼:因果学习与

最后推荐几本书,《WHY》、《Causal Inference in Statistics》、《Causality》、《Elements of Causal Inference》、《What If》 都非常棒。其中,《Causality》目前,我们历经3年时间已经翻译成了中文,即将出版,请大家期待。

重庆大学刘礼:因果学习与

原创文章,未经授权禁止转载。详情见 转载须知 。

重庆大学刘礼:因果学习与

全局中部横幅
设计师网

中国设计师网,隶属于北京赛尔文化传媒有限公司,服务于工程技术设计人员。为电气设计师、照明设计师、暖通设计师提供专业的技术交流平台。

狗窝宠物网

狗窝宠物网(Gouwo.net)专注分享实用的宠物知识。

免费发布平台

寻企网是免费的产品信息发布网,欢迎您来到寻企网查看最新最全的生活服务信息,同时可以免费注册发布您公司的产品信息广告,让更多有需要的客户找到您.

保驾护航装修网

保驾护航装修网汇集全国近十万家优质品牌装修公司。为您提供装修效果图,装修预算报价,装修设计方案,装修知识案例,受全程网络媒体监督装修装饰,30%工程赔付保障。省钱省时又省心!

汽车氛围灯改装

南京好样的汽车用品有限公司专注从事汽车氛围灯,汽车发光出风口,3d旋转高音等产品的生产营销工作,产品种类齐全,能够根据用户需求,选择不同型号产品,厂家直接供应,质量保障,价格实在,有汽车氛围灯,汽车发光出风口,3d旋转高音改装需求,欢迎来电咨询:15651026589.

张万福珠宝官网

张万福珠宝,湖南珠宝店,长沙珠宝店,湖南黄金加盟,长沙黄金加盟,长沙戒指定制,湖南翡翠加盟,长沙翡翠加盟,长沙婚嫁定制,湖南彩宝,长沙彩宝,长沙黄金价格、长沙定制结婚戒指、湖南珠宝加盟,长沙珠宝加盟,长沙黄金回收、长沙钻石回收、长沙玉石回收、长沙珠宝鉴定、长沙黄金鉴定、长沙玉石鉴定中心、湖南钻戒加盟,长沙钻戒加盟,长沙钻戒定制,。集张万福珠宝首饰有限公司理念、服务、产品于一体,全面的展现张万福在黄金、戒指、钻石、翡翠、彩宝领域的领先与独特,是婚嫁选择与定制的最佳平台。

最新最热门手机游戏下载大全

小虎游戏为游戏玩家提供免费的手机游戏下载,在这你可以第一时间了解到最新最热门的手游资讯、提供游戏精品攻略等等,为用户提供丰富多样的游戏体验。

谷歌GMS认证

中联检(深圳)检测集团有限公司,是一家专业从事国际第三方检测、中国能效标识、FCC认证、ROHS认证、质检报告、欧代协议技术咨询服务公司。无论电子电器、日用消费品、新材料新能源、还是医疗行业,我们都能从产品的研发、质量、安全等环节着手助您维护品牌、确保质量。我们致力于以国际视野在全球化背景下整合国内外法规、检测与认证资源,为中国制造走向世界提供权威、专业、高效的检测认证技术服务平台。

真空泵

无锡市钱盛机泵厂建于1980年,地处风景秀丽的惠山之麓。是一家具有国家发明专利的专业生产各类真空泵的真空泵厂。主要生产往复式真空泵、W型真空泵系、水环式真空泵系列、旋片式真空泵、无介质(无油、无水)真空泵、移动式全自动真空泵、罗茨真空泵机组、玉和树脂产品专用真空泵的专业真空泵厂。该各类真空泵广泛用于冶金、化工、医药、轻纺、食品、航空、电子、科研等行业和部门。

中国机电产品流通协会工程机械信息采集服务中心

中国机电产品流通协会工程机械信息采集服务中心

日企在中经营与人才战略管理网

中国でうまくいく企業は「人事」が違う! 中国ビジネスを支援する中智上海経済技術合作公司日本企業倶楽部(中智日本企業倶楽部)及び中智日系企業智櫻会のサイトです。中国進出日系企業様向けの人事・労務・法務関連情報の提供や、中国人事コンサルタント、中国人材紹介、日中経済動向調査、企業教育・研修コンサルティング等のHRMソューションををご提供しております。

建业地产股份有限公司

建业地产控股有限公司,是香港建业住宅集团有限公司于1992年5月在国内创办的专注住宅产业开发的独资企业,公司具有国家房地产开发一级资质。公司定位为专业化领袖型区域品牌地产开发商。扎根中原15年,先后成功开发了金水花园、建业广场、建业城市花园、建业新天地·桂园、郑州建业·森林半岛、郑州联盟新城、建业置地广场及省内16个中心城市绿色家园系列、森林半岛系列等多个具有行业指向地位的高档商品住宅小区,开发销售商品房总面积逾300万平方米,共为5万余户家庭提供了住宅。公司还创立了省内首家客户关系组织建业会,建业物业首1111批通过ISO9000质量体系认证。目前,建业在“2007中国房地产百强企业名单”中位列第41位

全局底部横幅