人工智能目标检测中的“神奇指南”——平均精度(mAP)曼孚科技技术博客

这听起来似乎很简单,但是当人群中人头攒动、各种因素干扰时,你会发现自己很难进行准确的识别。目标检测任务也是如此。

只不过,我们的“人群”是一张张复杂的图像,而我们要寻找的目标则是各种各样的物体。这时,平均精度(mAP)就像是我们的“神奇指南”,可以帮助我们从杂乱无章的图像中,准确地找到目标。

提到mAP,不得不介绍一个名词——精度(AP),想得到mAP,需先确定AP值。

AP的计算原理是将所有物体按照置信度从高到低排列,然后逐个计算它们的准确率和召回率,最终得出的相应值,该比值可以反映出目标检测算法的整体性能和准确度。

如果一个算法的AP很高,意味着它在目标检测任务中表现出色,可以得到更好的效果。

当然,AP并不是万能的。它仅仅是目标检测中的一项指标,还需要和其他指标一起综合考虑,才能真正地评估一个目标检测算法的性能。

下面,本文将围绕AP概念,简要介绍常见的模型评价语。

AP值的计算需要一系列指标做铺垫,其中涉及的名词如下:

(1)IOU:IOU是一个比值,是预测框与实际框的相交部分与两者全部面积的比值;(2)TP:被正确地划分为正例的个数,即实际为正例且被分类器划分为正例的实例数;(3)FP:被错误地划分为正例的个数,即实际为负例但被分类器划分为正例的实例数;(4)FN:被错误地划分为负例的个数,即实际为正例但被分类器划分为负例的实例数;(5)TN:被正确地划分为负例的个数,即实际为负例且被分类器划分为负例的实例数。

2.计算公式

目标检测任务中,需要两个指标衡量模型的AP值,即精确率(P)与召回率(R)。

TP与FP的分类标准为IOU,P与R的分类标准为置信度。

精确率的计算公式为precision=TP/(TP+FP),即模型给出的所有正样本中,正确预测的结果所占比例。召回率的计算公式为recal=TP/(TP+FN),即模型给出的所有预测结果中,正确预测的结果所占比例。

3.P-R曲线

P-R曲线是所有precision-recall点连成的曲线,用于计算AP值。通常来讲,P在纵轴,R在横轴,P值越高,R值越低。

AP是PR曲线下的面积,它是精度和召回率的函数,取值范围在0到1之间。AP越高,代表模型越好。如果PR曲线下的面积为1,则代表模型的性能最佳。

得到AP值后,mAP的计算就变得很简单了,就是取所有AP的平均值。

在解释这点之前,先来分析下目标检测的特性。

目标检测任务是对图像中的目标位置物体进行分类,是计算机视觉领域的核心技术之一。

该技术通常是在一组固定类上训练,所以模型只能定位和分类图像中已有的类别,这正是其相对不同且有趣的地方。

模型不仅要识别物体,也要精准的找到物体位置。举个例子,即使你的目标检测器检测到一张图片中有猫,但是如果你找不到这只猫在图片中的具体位置,那么这个检测器便没有任何用处。

对整个任务来说,每张图片都可能包含不同类别的不同目标。因此,精确率,这个图像分类问题中常用的标准评价度量,并不能直接用在这里,需要mAP作为目标检测算法模型的重要衡量指标。

如上文所述,IOU是预测边界框和参考边界框的交集和并集之间的比率,利用这个比值,可以知晓每个检测结果的正确性。

将IOU与阈值进行比较,最常用的阈值是0.5,如果IoU>0.5,那么认为这是一个正确检测,否则认为这是一错误的检测。

以此类推,计算出所有检测框的IOU值,求解其P与R,最终得出mAP值,利用这些平均精度值,便可以轻松地判断模型对任何给定类别的性能。

如果说AP衡量的是训练好的模型在每个类别上的好坏,那么mAP衡量的则是模型在所有类别上的好坏。

1.mAP对模型质量的影响

mAP不仅在目标检测任务中扮演着重要的角色,同时也会对模型的整体表现产生深远影响,例如模型的准确性、稳定性、普适性与优化等方面的影响。

1)模型的准确性:较高的mAP意味着模型能够更准确地检测出目标物体,提高了模型的准确性。

2)模型的稳定性:较高的mAP能够帮助评估模型在不同场景和数据集下的稳定性,从而提高模型的泛化能力和鲁棒性。

3)模型的普适性:一些高精度要求的场景,如自动驾驶,需要更高的mAP来保证安全性。而在一些相对低要求的场景,如智能安防,mAP可以适度降低,以换取更高的实时性和效率。

4)模型的优化:mAP也是检验模型性能的重要指标之一,通过对mAP的监控和分析,可以发现模型的不足之处,针对性地进行模型优化和改进。那么,mAP值的决定因素有哪些?

mAP值是评估目标检测算法性能的重要指标之一,它可以受到多个因素的影响。以下是常见的六种影响因素:

1)目标类别数量:目标类别数量对mAP值有着显著影响,当数量较少时,模型通常可以获得较高的mAP值,而当数量增加时,模型的mAP值可能会降低。

2)目标大小:较小的目标通常更难以被准确检测,因此模型在处理小目标时会出现性能下降的情况,从而导致mAP值的下降。

3)目标遮挡程度:目标被其他物体遮挡的程度也会影响mAP值的大小。如果目标被遮挡的程度较大,模型就更难以准确地检测出目标。

4)数据集质量:数据集对模型的训练和测试有着重要影响,如果数据集的质量和多样性较差,会直接影响模型的泛化能力和检测准确性,导致mAP值下降。

5)模型结构与参数:模型结构和参数设置也会影响mAP值,如果模型结构不合理或参数设置不当,便会影响模型的检测性能,从而影响mAP值的大小。

6)检测阈值:在目标检测中,设置检测阈值可以调整模型的召回率和准确率,从而影响的mAP值的变化。以上五点,便是影响mAP的常见因素,在建立模型时需着重注意这些因素,以提高模型的预测准确性。

掌握评估机器学习模型的能力与掌握训练模型一样重要。本文主要阐述了mAP对目标检测算法性能检测的重要性,作为目标检测的常用评估指标,mAP可以衡量不同阈值下的模型性能表现、帮助调整模型参数、优化模型表现等。

不仅如此,mAP的计算方法难度适中,易于理解和使用。因此,在进行目标检测算法性能评估时,应尽可能地提高对mAP的理解和应用能力,以便更好地评估模型性能,进一步提高模型的精度和实用性。

曼孚科技,用数据解放AI的一切可能。专注于数据服务领域,尤其是数据标注行业,用于自身独立研发的数据标注工具。

THE END
1.公安机关查处网络谣言丨AI背后的陷阱:有图未必有真相,警惕谣言好奇之心要适度:面对新奇夸张的信息,先别急着一探究竟,AI就是选择、抓取大家关注话题来制造网络谣言,利用网民好奇心进行传播。 来源不明不轻信:切记不要盲目相信和传播未经证实的信息。在社交媒体或网络上看到可疑信息时,可以先进行核实或者等待官方消息发布后再做判断。 http://www.songxixww.com/2024-12/10/content_1937716.htm
2.警惕四大AI新骗术,有人10分钟被骗430万今年3月,一份名为《暂停大型人工智能研究》的公开信在未来生命研究所官网上发布,包括特斯拉CEO埃隆·马斯克(Elon Musk)、苹果公司联合创始人史蒂夫?沃兹尼亚克(Steve Wozniak)等人在内的千名科学家、企业高管签字呼吁暂缓GPT-4以上版本的研发,他们矛头所指都是强大AI技术可能的负面用途。 https://www.lyzg168.com/info/299.html
3.AI诈骗,老年人怎么防?一图支招AI诈骗,老年人怎么防?一图支招 随着社会的快速发展 诈骗手法日益翻新 近期出现了多起利用“AI换脸”“AI变声”等技术 实施诈骗的案件 “AI诈骗”是如何行骗的? 老年群体又该如何防范呢? ↓↓↓https://mp.weixin.qq.com/s?__biz=MzA3MjYyMzAzOQ==&mid=2650922308&idx=4&sn=71d4e8a07772520c6c4dbce95a524961&chksm=85a0bc617162f6c04d7a753bc41ee5586aff9781dff7e90b50ee60f1cc5a0fca4ac82cf4c602&scene=27
4.AI时代,你会担心隐私信息泄露吗?从侵权形态来看,涉及侵害个人信息的知情权与决定权的案件最多,主要侵权形式为未经同意收集、公开、提供个人信息,或超范围收集个人信息。部分案件中反映网络平台运营者未尽到保障用户个人信息安全的法定义务,导致用户个人信息遭受泄露、篡改、冒用。所以,作为用户隐私安全的第一道也是最重要的一道防线的智能手机操作系统https://baijiahao.baidu.com/s?id=1814940354814993002&wfr=spider&for=pc
5.百度ai面相测试免费ai智能系统如何测试?三、ai测试发型的软件? 测发型app 是非常好用的帮助用户快速检测适合的发型的手机软件,在这里用户们能够找到非常便捷的测发型的功能,能够一键检测适合用户的发型进行推荐,让用户能够更好的更换发型,对自己的发型能够有更好的选择,解决大量用户的烦恼。 四、AI智能测试是什么? https://tool.a5.cn/article/show/72503.html
6.颠覆共变与融合:人工智能与密码学的融合发展前瞻3.人工智能无感的物理不可克隆函数(AI-Unaware PUF) 本部分研究利用人工智能对物理不可克隆函数(PUF)发起的攻击。PUF是一种硬件安全技术,利用固有的设备变化来对给定的输入产生不可克隆的唯一设备响应,即通过提取芯片制造过程中随机工艺偏差,产生无限多个特殊的密钥。但已有研究表明,可利用基于人工智能的机器学习攻击、https://www.secrss.com/articles/62963
7.《2021科技趋势报告》重磅发布,正视中国AI发展力量,预言未来世界2.2 AI 首次药物发现 新冠肺炎加快了人工智能在药物发现中的应用。一个国际团队在不到 48 小时的时间内合成了 2000 个分子的候选物,其中包括了一种 Covid 抗病毒药物 —— 这一过程可能需要人类研究人员一个月或更长时间。倡导者说,人工智能将使药物开发和临床试验更加有效,从而降低药物价格,为更个性化的药物铺https://www.cn-healthcare.com/articlewm/20210323/content-1202112.html
8.ai测脸型配发型软件借助ai识别脸型的软件ai测脸型可以用ai测试脸型的软件有哪些?本站为大家提供一些免费的人工智能测脸型app,通过自拍或者扫一扫的方式,来帮助用户知道自己的脸型情况,还可以进行发型,服饰搭配,ai测脸型更便捷,更准确,喜欢的快来试试吧!点击查看 资源列表 评论(0)AI工具管家app最新版2024 v1.0.0免费版 15.3M / 2023-04-18 下载 http://m.5577.com/k/aiclx/
9.AI发型设计智能匹配发型,测发型软件AI发型设计-智能匹配发型,测发型软件También te puede interesar 穿搭盒子-穿衣搭配发型设计妆容造型 易标招标宝-全面招标信息导航 情侣小日常 - 情侣实时定位,互动 AI试穿-买衣服穿搭必备神器,虚拟穿搭穿衣助手 专属创意壁纸设计-AI壁纸,手机动态主题,膨胀壁纸 https://apps.apple.com/es/app/ai%E5%8F%91%E5%9E%8B%E8%AE%BE%E8%AE%A1-%E6%99%BA%E8%83%BD%E5%8C%B9%E9%85%8D%E5%8F%91%E5%9E%8B-%E6%B5%8B%E5%8F%91%E5%9E%8B%E8%BD%AF%E4%BB%B6/id6479401977?see-all=customers-also-bought-apps
10.必须收藏智能网联汽车技术及标准法规精华整理腾讯关于车联网安全的二块业务: ① 自发型:针对具体产品做深入研究汇报给车厂,车厂据此修复自己的产品。 ② 定制型:针对车厂或者供应商的咨询和测试需求,做定制化解决方案。 对于车联网安全的思考: ① 信息安全是汽车智能网联的必然挑战。 ② 攻易守难,信息安全建设需要全局思维。 http://www.cheyun.com/content/16816
11.开发商的锁一定要换?!一步到位选门锁,看华为智能门锁图注:AI 3D人脸识别 2.0 接着开始了我的换装秀,华为智能门锁 Pro 经过了大量日常出行场景的测试,装扮变化不成问题,它可以轻松的面部解锁成功。 图注:AI 3D人脸识别 2.0 换个装扮以及发型试试,OK,依旧没有难度。 图注:AI 3D人脸识别 2.0 我不信邪的又带上了鸭舌帽,当我走近门锁,它竟然秒开了,真正见识到了什https://post.smzdm.com/p/a96ndz4e/
12.zfcg.fuzhou.gov.cn/upload/document/20210531/a2f60d92e4d649a9A4.智能运维箱方案 3 在满足投标文件要求的基础上,投标人提供针对本项目的智能运维箱方案的完整性、合理性、可行性由评委进行评议:完整性、合理性、可行性最强的得3分;完整性、合理性、可行性较强的得2分;完整性、合理性、可行性一般的得1分;未提供方案的不得分。(满分3分) A5.培训方案 3 在满足投标文件要http://zfcg.fuzhou.gov.cn/upload/document/20210531/a2f60d92e4d649a9bd2b904312f583f0.html
13.android人脸识别换发型,换发型测脸型换发型测脸型是一款智能的拍照测脸型软件,上传自己的照片,AI智能面部分析,让你清楚知道自己是什么脸型,换发型测脸型安卓版(免费测试)还有实时换发型功能,帮你找到最适合自己的发型,感兴趣的小伙伴快来下载换发型测脸型app吧! 换发型测脸型介绍 换发型测脸型是一款为用户朋友们打造的发型设计相机,换发型测脸型可以为https://blog.csdn.net/weixin_32784349/article/details/117761982
14.AI测肤立即在线测肤 由Vanta认证符合HIPPA标准的 SaaS安全平台 HD高清皮肤分析 vs. SD标清皮肤分析 一次检测14种健康纬度,获得不同精度的检测结果 体验玩美移动的AI皮肤分析解决方案,掌握最新的护肤技术,该方案提供高清(HD)和标清(SD)版本。此高精度解决方案专为护肤品牌、美容院和护肤专业人士量身定制,位消费者提供更加个https://www.perfectcorp.cn/zh-cn/business/products/ai-skin-diagnostic
15.quinovare.com/xxxr84821217<!DOCTYPE/960969.htm宋雨琦ai智能换脸视频梗_参考消息 9u9u有你有我已满18 18.61MB 89%好评857人) 欧美电影院 亚洲激情乱伦日韩 塚本AV片 99.21MB 01%好评75人) 国模天花板性爱视频 ?一下就有蜜汁流出视频 xxxx欧美直播 65.76MB 29%好评959人) 茄子视频在线观看国产最新 性别 射精 动漫 插入 嗯,啊不要嗯http://quinovare.com/xxxr84821217%3C!DOCTYPE/960969.htm
16.www.scmc操淫逼网站 李一桐AI智能人脸替换造梦视频什么梗李一桐AI换脸被C可以 秀人网糖豆 色小说av 色黄触手插骚逼 做受视频蜜臀 国模美女裸体阴道沟沟黑森林 动漫美女人物被 黄漫视频 王者AV 女子越叫男子越往里面塞 丰满人妻AV免费区 日韩生活片在线看片免费 黄色搞基毛片 别揉我奶头视频网站 国产精品欧美激情http://www.scmc-xa.com/xxxr/613973.shtml
17.智能面相测试免费智能面相测试免费网站ai智能测面相能被利用刷脸吗人工智能看面相软件久安运势。 而且这种脸型类似于瓜子脸无论是长发还是短发都很适合心形脸,最近朋友圈有一个面相测试看面相准不准超级火爆它是一款人工智能的面相测试这个号称“准的有点可怕”的人工智能面相测试激起了我的好奇心我也不由自主地。 https://www.01973.com/bazi/201.html
18.智能人脸测试下载APK1.1.0412 智能人脸测试 2021-06-24 11.7MB 相关合辑 人工智能聊天app人工智能语音助手软件手机测试性能软件明星脸相似度测试app国内的人工智能软件人工智能软件手机性能测试软件可以对话的人工智能appai人工智能软件能让照片的人脸动起来的软件手机性能测试工具app测试发型配脸型app智能机器人对话软件智能机器人通用https://m.liqucn.com/os/android/rj/1229178.wml