安徽省联社:数据挖掘和模型管理平台未央网

清华大学金融科技研究院孵化金融科技与金融创新全媒体

0"v-text="'原作:'+postInfo.postMetas.postOriginal">

案例名称

安徽省联社“数据挖掘和模型管理平台”

案例简介

随着安徽农信系统数字化转型的不断深入,如何从海量数据中挖掘有效价值成为大数据应用的一项主要挑战,“数据挖掘和模型管理平台”的建设,解决了大数据应用过程中数据价值挖掘环节系统承接问题,通过数据分析工具的集中化、流程化与资产化的管理,赋能行内的数据分析人员、模型开发人员,实现数据应用能力的提升,同时引入业内规范的模型管理流程,实现模型全生命周期风险集中管理,充分保障模型在业务决策中的支撑作用。

创新技术/模式应用

本平台具有以下几个主要功能特点:

(一)松耦合式模块化设计

本平台的核心功能包括数据管理、模型管理、模型构建、模型服务、模型监控共五大模块,各服务模块基于微服务架构实现松耦合式设计,支持容器化部署、使用K8S定制场景资源配置,数据计算采用主流的分布式Hadoop大数据平台,用于数据、指标以及模型的分布式计算,同时满足大规模数据的分布式存储,在部署、计算、存储等方面均具备横向扩展能力。

(二)标准化模型管理工作流

(三)通用型模型构建平台

本平台提供代码建模、可视化建模、智能建模三种建模方式,搭建了低门槛、易用、适应不同建模场景的统一建模平台,能够使专业建模人员或业务人员共同参与到模型开发的工作中,实现了建模过程的标准化管理,包括代码标准化、模型包管理、开发报告管理等。

(四)全线上模型服务管理

本平台可作为模型服务的统一发布平台,通过服务列表对模型服务统一管理,支持模型部署发布审批流程、上下线流程配置,同时提供接口调试、A/B测试等工具,对模型服务实际效果跟踪比较,实现模型版本的流畅切换。基于业务场景需要,模型服务提供实时调用或批量调度两种调用方式。

(五)实时监控预警体系

本平台构建了全面细致的模型监控预警体系,对模型结果分布、特征稳定性、预测有效性进行定时跟踪,帮助模型管理人员及时掌握当前模型的整体性能。报告内容支持自定义预警规则,可以对特征变化幅度、模型退化程度、在决策中的效果等设置预警,通过平台内消息和短信进行提醒告知,及时采取处置措施。

项目效果评估

(一)完善大数据应用体系,助力数字化转型

本平台是安徽农信系统大数据应用体系的重要拼图,从系统层面上填补了数据挖掘和模型管理功能上的空白,通过与大数据平台基础数据资源对接,提供了对海量数据进一步挖掘的安全环境。本平台的投入使用,对安徽农信系统数据应用水平的提升具有引领作用,可充分发挥省联社服务、监督、管理的职能,促进金融科技在安徽农信系统内的进一步发展。

(二)建立模型工作流标准,规范模型风险管理

模型在为业务服务的同时,其自身也应受到监管,以防范模型使用不当所带来的风险。本平台通过模型工作流模板建立了标准化的模型管理流程,明确了模型管理各个环节人员职责,防止兼岗、越限操作情况发生。通过模型管理流程的确立,为模型风险防控提供了明确措施,解决了系统内模型管理缺少统一规范的问题,同时也满足了监管部门对模型风险管理日趋严格的要求。

(三)探索模型优化升级,提升业务智能化水平

本平台引入了主流的数据挖掘、机器学习技术,以数据为驱动实现模型的优化升级。目前平台内已上线3个业务模型,为线上信贷、信用卡、综合收单业务提供模型服务,在前期申请、定价和中期风险管理等业务环节对客户信用风险进行预测,模型算法采用了逻辑回归和集成学习算法,模型效果评估KS指标值均超55%,对不良表现具有显著预测能力。

(四)构建模型监控体系,加强模型效果跟踪

本平台通过监控报告、自定义看板、模型大盘形成了“自下而上”全面的模型监控体系,对模型运行效果实现多角度跟踪,帮助不同层级管理人员审视当前模型工作,辅助未来决策。模型监控体系的构建,为安徽农信系统内模型效果监控提供了统一渠道,可改变模型效果缺乏跟踪、感知滞后的现状,为模型有效应用提供新的保障。

项目牵头人

蔡玉林安徽省联社电子银行部副总经理(主持工作)

项目团队成员

水坤、叶长明、韩彬、丁伟民、王瑾、孟佳乐、殷悦、杨宜辰、潘乐观、彭静

以上信息我们将会严格保密,报名结果以官方通知为准。

非常感谢您的报名,请您点击下方链接保存课件。

0postInfo.postAuthor.authorDes:'TA还没写个人介绍...'">

THE END
1.数据挖掘类文章属于什么类型mob64ca12e83232的技术博客随着数据量的增长和技术的发展,数据挖掘的潜力将愈发显著。未来,数据挖掘将在决策支持、市场分析、个性化推荐等领域发挥更大的作用。 希望通过本篇文章,您对数据挖掘类文章的内容及其实现有了初步的了解。如需进一步学习,建议深入阅读相关领域的专业书籍与文献,探索更复杂和有趣的算法与技术。https://blog.51cto.com/u_16213397/12827058
2.数据挖掘算法实战:从传统统计到机器学习的商业智能分析完整技术栈通过数据挖掘算法,可以对用户的行为进行分析,包括用户偏好、购买行为、活跃度等,从而为企业的精准营销、产品推荐等提供支持。 风险管理 利用数据挖掘算法可以对风险进行识别和评估,包括信用风险、市场风险、操作风险等,帮助企业更好地进行风险管理和决策制定。 https://www.jianshu.com/p/e8efcaaf4349
3.中国建设银行申请数据分析方法相关专利,能解决无法及时有效识别和发专利摘要显示,本申请提供了一种数据分析方法、装置、设备、介质及产品。属于网络安全技术领域,该方法包括:获取各机构报送的各机构的从业人员的行为数据;对行为数据进行数据清洗和数据格式转换后,存入空白数据集中,得到行为数据集;采用关联规则挖掘算法挖掘行为数据集中行为数据之间的关联性,得到目标关联规则;根据聚类分析算https://www.163.com/dy/article/JJN5Q8DK0519QIKK.html
4.数字营销数据:深入挖掘价值在当今的数字时代,数据已经成为企业竞争力的重要组成部分。数字营销数据挖掘是一种利用大数据技术来分析和挖掘营销数据,以提高营销效果的方法。这篇文章将讨论数字营销数据挖掘的核心概念、算法原理、具体操作步骤以及数学模型公式。 1.1 数字营销数据挖掘的重要性 https://blog.csdn.net/universsky2015/article/details/135211815
5.浅谈数据挖掘中的个人信息保护【案例分析】 在“互联网+”时代下,传统行业能够突破自身局限走向终端智能化,升级用户体验,增强用户粘度,促进产品的全面提高,是未来获得新竞争优势的新动力。目前,各大企业都致力于搜集并分析用户数据,用以辅助经营决策。在数据挖掘的相关过程中,经常会涉及用户的个人信息和隐私。 http://media-ethic.ccnu.edu.cn/info/1168/2097.htm
6.数据挖掘与数据分析的异同点及典型应用案例在现代数据驱动的世界中,数据挖掘和数据分析已经成为了许多行业的重要工具。尽管这两个概念经常被人混淆,但它们各自有着独特的作用和应用场景。作为一个数据分析的从业者,我也曾在入门时对这两个术语感到困惑。经过实践,我逐渐发现了它们的异同,并且这些知识也帮助我在实际工作中做出更为精准的判断。 https://www.cda.cn/view/204806.html
7.数据挖掘应用(精选十篇)数据挖掘应用案例 篇2 康乃尔大学 Weill 医学院的研究者们,花了 18 个月的时间执行了一项大数据项目。他们用鉴识科学常用的棉花棒,在 486 个纽约地铁站搜集目标样本,车厢门、楼梯扶手、座椅、灯杆、垃圾桶都不放过,最后总共发现 1 万 5 千多种微生物,将近一半的样本是人类未知的有机生物,27% 是活性并俱有抗https://www.360wenmi.com/f/cnkeymoknlxl.html
8.数据分析报告(精选15篇)简单来说,数据挖掘是基于“归纳”的思路,从大量的数据中(因为是基于归纳的思路,因此数据量的大小很大程度上决定了数据挖掘结果的鲁棒性)寻找规律,为决策提供证据。从这种角度上来说,数据挖掘可能并不适合进行科学研究,因为从本质上来说,数据挖掘这个技术是不能证明因果的,以一个最典型的例子来说,例如数据挖掘技术https://www.ruiwen.com/fenxibaogao/8204699.html
9.数据挖掘应用案例分析,和数据挖掘应用案例分析的更多相关内容三个皮匠报告为您整理了关于数据挖掘应用案例分析的更多内容分享,帮助您更详细的了解数据挖掘应用案例分析,内容包括数据挖掘应用案例分析方面的资讯,以及数据挖掘应用案例分析方面的互联网报告,券商研究报告,国际英文报告,公司年报,招股说明书,行业精https://www.sgpjbg.com/labels/shujuwajueyingyonganlifenxi.html
10.生活中哪些数据挖掘的例子帆软数字化转型知识库电商平台如亚马逊、淘宝和京东利用数据挖掘技术来推荐商品。通过分析用户的浏览记录、购买历史、购物车内容和产品评价,平台能够生成个性化的推荐列表。这些推荐算法通常包括协同过滤、内容推荐和混合推荐等技术。亚马逊的推荐系统被认为是最成功的案例之一,它不仅通过用户行为数据推荐商品,还结合了其他用户的评价和购买记录,形https://www.fanruan.com/blog/article/600792/
11.数据挖掘成功案例3篇.doc数据挖掘成功案例3篇.doc,数据挖掘成功案例3篇 篇一:数据挖掘应用成功案例 1电话收费和管理办法 加拿大BC省电话公司要求加拿大SimonFraser大学KDD研究组根据其拥有的十多年的客户数据,总结、分析并提出新的电话收费和管理办法,制定既有利于公司又有利于客户的优惠政策。 https://max.book118.com/html/2017/0118/84897835.shtm
12.一小时了解数据挖掘②:分类算法的案例应用一小时了解数据挖掘②:分类算法的案例应用 关于本站 人大经济论坛-经管之家:分享大学、考研、论文、会计、留学、数据、经济学、金融学、管理学、统计学、博弈论、统计年鉴、行业分析包括等相关资源。 经管之家是国内活跃的在线教育咨询平台! 经管之家新媒体交易平台https://bbs.pinggu.org/jg/kaoyankaobo_kaoyan_3281329_1.html
13.哪些广为人知的数据挖掘案例其实是一地鸡毛?最近搜刮了几个典型案例,分别是啤酒与尿布、Google预测冬季流感、大数据预测纸牌屋、天气精准预报、股市K线预测,希望看了后于你有启示。 1、啤酒与尿布是数据挖掘最大的谎言 这个案例估计是数据挖掘界的头号代表。 全球零售业巨头沃尔玛在对消费者购物行为分析时发现,男性顾客在购买婴儿尿片时,常常会顺便搭配几瓶啤酒来https://maimai.cn/article/detail?fid=828484229&efid=z9pS7vah5hirX3wsSkSEyQ
14.数据挖掘案例实战:利用LDA主题模型提醛东评论数据(二)专栏中的每四篇文章都是一个完整的数据挖掘案例。案例介绍的顺序是:首先通过数据案例背景提出挖掘目标,然后阐述分析方法和过程,最后完成模型构建,同时穿插操作培训,将相关知识点嵌入相应的操作过程中。 为了方便读者轻松获得真实的实验环境,本专栏使用了众所周知的实验环境Python语言处理样本数据进行挖掘和建模。 https://www.ruidan.com/infomation/detail/152869
15.《数字法治》刊发上海法院文章肖凯及小同牛元宏:从经验理性到数成文法体系中,案例参照制度作用机理的本质仍然在于推动制定法在司法适用过程中的协调统一,而非发起“遵循先例”的动议、直接作为司法机关调整社会关系的工具或方法论。换言之,司法机关对于类案的“参照”权力,并非源于法院的“造法”权能,仅隶属于法院的“适法”权能。这也是类案智能推送机制建设中必须厘清的前提性概https://www.thepaper.cn/newsDetail_forward_27785753