基于能量模型的异常分布检测方法研究

来源 :东莞理工学院 | 被引量 : 0次 | 上传用户:my2002hhl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在实践中,基于深度学习的分类模型经常会遇到明显偏离训练数据分布的未知(Out-Of-Distribution,OOD)样本,此时分类模型仍然可能以较高置信度将该样本识别成某种已知(In-Distribution,ID)类型,这会造成严重的后果。异常分布检测旨在确定模型的输入是来自训练数据分布的正常样本,还是来自其他分布的异常样本。异常分布检测对于确保模型的可靠性和安全性至关重要,尤其是高风险应用场景。例如,在无人驾驶中,希望系统能够在检测到未知/异常场景或物体而无法做出安全决策时,及时发出警报并且迅速将驾驶控制权移交给驾驶员。异常分布检测已经成为现实世界应用中安全部署模型的关键组成部分。这个问题于2017年首次提出,由于其重要性迅速引起了研究界的广泛关注。业界提出了越来越多的异常分布检测方法,包括基于分类的方法、基于密度的方法、基于距离的方法等。本文重点研究基于分类的方法,这类方法使用预训练完成的分类模型,从其特征空间、梯度空间、或者输出空间等域中,推导出一个衡量不确定性的度量函数,用于计算待测试样本的异常分数,以区分正常样本和异常样本。能量模型(Energy Based Model,EBM)是一种未归一化的概率模型,它通过捕捉变量与能量之间的相互依赖关系来对问题进行建模。能量模型用一个未知的归一化常数计算样本的概率密度,由于该未知参数通常难以估计,训练能量模型十分困难。而在基于能量的异常分布检测方法,并未涉及到训练能量模型的过程,可以直接使用能量分数计算待测试样本的异常分数,判断输入是否为异常。本文的工作采用能量分数的方式检测异常样本,提高了检测性能。稀疏表示试图用尽可能少的数据表达尽可能多的信息,可在高维空间中带来诸多好处,例如降低运算的开销、防止模型出现过拟合等。当前的异常分布检测方法,通常直接采用模型提取的信息去计算异常分数,在很大程度上忽略了稀疏表示的作用。本文的第一个工作在学习的过程中引入了稀疏模块,提出了一种基于稀疏优化方法的异常分布检测框架,根据辅助数据集的可用性,分别提出两种优化策略:辅助数据集可用情况下的稀疏正则化方法,以及不可用情况下的稀疏异常值暴露方法。异常值暴露借助一些真实存在的多样化数据作为辅助异常样本,建立了一种新的异常分布检测范式。这类方法在实验中采用了一个相当大规模的辅助数据集,与正常训练样本的比例悬殊太大,实验设置显得十分不合理。在开放世界环境中,由于客观条件限制,难以对所有可能的未知分布进行建模。本文的第二个工作构造了一个微型的辅助数据集,优化了实验设置,并验证了实验结果的可靠性。另外,从信息论的角度,给出了异常值暴露方法的一种理论解释。
其他文献
钢渣作为冶炼钢铁的副产物,每年产量巨大,但综合利用率较小,将钢渣合理的应用到道路工程中,既解决了天然石料资源匮乏的难题,又可以实现钢渣的固废利用。本文以钢渣为主要研究对象,对其进行表面改性处理,研究将改性钢渣作为粗骨料掺入沥青混合料的路用性能、裂纹扩展规律和生态经济效益,为改性钢渣的推广利用奠定理论基础。本文选用甲基硅酸钠溶液、二氧化硅胶体溶液和聚丙烯酸酯乳液三种有机改性剂对钢渣进行表面改性处理,
<正>为了以优质高效地服务满足经济社会发展和人民美好生活用能需要,营造更好的电力营商环境,2019年9月国网益阳供电分公司(以下简称“益阳公司”)创新服务体系,以期通过对现有体系的深化和原有机制的提升,建设精益管理水平更高的“全业务协同全链条贯通”供电服务指挥体系(以下简称“‘两全’体系”),实现更高水平的供电服务运营。以推动供电服务向精益型管理转型升级为目标,建立强有力的组织保障体系,明确体系内
期刊
新课程改革背景下,为了进一步提高课堂教学效率,教师在教学中要注重对学生的学科核心素养进行培养,这其中包含兴趣、能力、情感价值观等三维教学目标,并且通过对教学模式的改革创新,引导学生进行主动学习探究,不仅要理解掌握知识,更是要实现综合素质的培养和发展。高中数学教师也要与时俱进,基于核心素养视角进行课堂教学模式的改革,要努力激发学生的学习兴趣,采用多媒体教学方式,还可以创设生活化情境,引导学生巧用数学
本文分析了新基建背景下交通投资集团的数字化转型的路径。本文以我国智能交通新型基础设施发展以及交通投资集团类型企业的数字化建设现状为背景,从原则、方法论和目标等角度重点分析了交通投资集团类型企业数字化转型的总体思路,提出了系统的方案规划,包含整体架构、基础设施、集团大脑、应用系统、治理体系等多个方面。
本文以广式高盐稀态酿造酱油为基础,通过对比不同发酵周期下原油中风味物质的变化,结合5’-呈味核苷酸二钠、蔗糖素的使用,综合提升酱油产品的感官品质。结果表明,随着发酵周期的增长,原油中风味物质的含量不断提高,但当发酵周期大于115 d,原油中还原糖含量开始下降。从原油指标需求以及生产周期综合评定后确认发酵周期115 d为宜(可随季节上下波动10~15 d)。该条件下辅以I+G添加量为1.3‰,蔗糖素
<正> 我院收治2例剔颈自杀者,均救护成功,现将急救与护理介绍如下。 (1) 解除呼吸道梗阻:剔颈后血液流入气管或管腔塌陷,迅速远端气管插入气囊气管导管,吸出血液及分泌物,保持呼吸道通畅。(2)止血。及早彻底止血,同时静脉输液、输血。(3)彻底清创,仔细查明有无重要血管神经及其他组织损伤。(4)密切观察下T、P、R、Bp、变化及伤口出血情况。(5)重视口腔护理。(6)制动体位。术后取半卧位,尽量头
期刊
学位
拉考沙胺是一种新型抗癫痫发作药物,目前已被批准用于治疗4岁及以上局灶性癫痫患者。为了评估拉考沙胺对成人及儿童不同类型癫痫的疗效和耐受性,对MEDLINE、Pubmed and Google Scholar进行了系统回顾,检索自2014年1月—2022年5月的文献,主要结果是拉考沙胺对成人及儿童不同类型癫痫的疗效和不良事件,并进行系统报告。目前的证据表明,拉考沙胺对成人及儿童局灶性癫痫、全身性癫痫、
为了提高DC-DC开关电源的瞬态响应速度,针对Buck转换器提出了一种V2预测无差拍控制算法.基于V2预测无差拍控制的Buck转换器系统结构,根据输出电压纹波的特点提出了适用于V2控制Buck转换器的预测无差拍控制.进一步提出了改进的V2预测无差拍控制器,使该算法更易于数字实现.Simulink仿真验证结果表明:与传统电压模式控制相比,V2控制算法在输入电压变化2V条件下,调整时间缩短60%;在负