袋鼠云助力银行机构数据治理构建全行数据资产体系
发布日期:2023-11-30 23:42:48 文章作者: 纽扣系列
近年来,随着信息化、数字化、智能化的加快速度进行发展,数据从资源逐渐转变为资产。金融行业具有海量数据资源和丰富应用场景优势,在企业经营管理、产品研制、技术创新等关键环节中发挥着及其重要的作用。数据治理作为释放数据价值的基础,在推动银行数字化转型的过程中扮演了“承上启下”的关键角色。
袋鼠云通过数据治理咨询,结合数据平台建设和数据应用实施,构建科学的组织架构体系,完善数据治理流程制度与规范,建立数字化协同机制,整合并打通银行内多源、零散的异构数据体系,构建全行业数据资产体系,完善数据权限、数据血缘、数据质量、分级分类等管理体系,借助数据产品对数据资产进行深度加工挖掘价值,面向零售、风险、财务等输出更加全面的数据及统计指标,推动银行业务数字化转型。
数据资产盘点有实体盘点,第 一点是设计分类框架,为了方便对数据资产来管理,需要对数据资产进行分类,按照业内惯例,大体上分为三级分类。分类依据可参考企业的流程框架,按照业务分类进行分类。
第二点是明确盘点范围,对人力、财务、营销业务系统中的业务对象进行盘点,需要系统研发人员、业务人员共同参与,解决梳理过程中遇到的业务和技术问题。
除了实体盘点外还有数据项盘点。数据项的盘点依赖于实体的盘点,每个实体有若干个数据项,数据项是业务开展的基础属性,这些属性可以从业务系统界面获取,也可以从后台获取。
数据标准是进行数据标准化、消除数据业务歧义的主要参考和依据。对数据标准做分类,将有利于数据标准的编制、查询、落地和维护。数据标准有多种分类方式,对于不同的分类方式,均可采用以数据元为数据标准制定的基本单元构建数据标准体系。
数据可大致分为基础类数据和指标类数据。基础类数据指业务流程中直接产生的,未经过加工和处理的基础业务信息。指标类数据是指具备统计意义的基础类数据,通常由一个或以上的基础数据根据一定的统计规则计算而得到。
相应地,数据标准也可大致分为基础类数据标准或指标类数据标准。基础类数据标准是为了统一企业所有业务活动有关数据的一致性和准确性,解决业务间数据一致性和数据整合,按照数据标准管理过程制定的数据标准。指标类数据标准大体上分为基础指标标准和计算指标(又称组合指标)标准。
基础类数据标准和指标类数据标准通过分别建立基础类数据元和指标类数据元,并将基础类数据元和指标类数据元与数据映射,实现基础类数据标准和指标类数据标准的落地。
具体来说,对于结构化数据中的任意一个字段,当其不具备指标特征时,可直接将其与某一业务类别下的基础类数据元(如包含命名规则、数据类型和值域等属性)映射,实现该字段的标准化(符合命名规则、数据类型和值域的规定);当其具备指标特征时,可直接将其与某一业务类别下的指标类数据元(如命名规则、约束规则、数据类型和值域等)映射,实现该字段的标准化(符合命名规则、约束规则、数据类型和值域的规定)。
根据《个人金融信息保护技术规范》(JR/T 0171-2020)及《某银行数据安全管理办法》要求,个人客户C3、C2 类别信息在后台管理与业务支撑系统展示时,除银行卡有效期外,C3 类别信息不应明文展示;C2 类中支付账号、客户法定名称、支付预留手机号码、证件类或其他类识别标识信息应当做遮蔽处理,且不提供批量查询和批量下载功能。
如特殊情况C2 类上述敏感字段仍需完整展示或明文下载,则必须有如下管控措施:
1)需求提出部门必须限定最小用户使用范围,并经过本部门总经理(如果是分行,则为分行主要负责人)审批授权。审批单参照《某银行个人分类分级数据授权审批单》,并在OA项目需求发起时必须含有该审批单附件。
3)C2 类中支付账号、客户法定名称、支付预留手机号码、证件类或其他类识别标识信息前台页面展现需增加水印处理,禁止复制粘贴;且批量下载时文件一定要通过DRM加密,并经过审批授权流程,审批授权至少至分管部门总经理或分行主要负责人。
4)个人客户C2 类敏感信息在做批量查询或者下载必须有审计日志功能,必须明确谁在什么时间,什么场景使用,使用权限范围,审批流程等,日志支持前台页面查询。
6)以上管控措施涉及应用系统开发的,应该在开发全流程中形成闭环管控机制(包含相关业务需求的提出到业务验收测试环节)。对于涉及上述敏感信息展示但没提供经领导审批的《某银行个人分类分级数据授权审批单》,一律不予启动开发。
7)涉及业务部门授权审批的管理环节,需求提出部门要做好相关审批授权文档的存档,以备后续审查。
协助完善数据治理组织架构(涵盖数据治理决策层、管理层和执 行层)及数据治理相关的制度、流程和评估标准。完善数据标准,完成 10 个系统的数据对标,并完成主数据和元数据的梳理。建立数据质量的检核、整改、评价等工作流程,提升数据质量。制定数据资产盘点、评估与管理工作机制,完成 10 个系统的数据资产盘点。构建指标管理体系,协助梳理全行基础指标。
数据平台包含数据治理平台和数据应用平台,实现数据的“管、 治、用”。数据治理平台提供离线开发、数据标准、数据建模、数据质量、主数据、元数据、指标管理、数据资产和数据安全等功能,实现数据开发与治理一体化。数据应用平台包括数据智能分析模块,提供有效的数据分析工具,满足灵活性、安全性和便利性。
完成面向大数据平台的数据血缘关系梳理。重构大数据平台中间层(200 张表)数据模型,并进行落标实施。依据数据质量检核规则,在数据平台上对源头数据和结果数据进 行规则稽核。
结合营销与风控应用场景,完成至少 200 个基础指标加工。提供不少于 5 个建模场景要求的数据支持和不少 5 个应用场景的功能支持(开展数据自主分析、开发报表和管理驾驶舱等)。
一是数据治理战略目标,治理顶层设计、治理目标、治理运营、治理成果等数据治理相关的战略规划设计材料。
二是治理组织及规章,设计某银行数据治理组织架构,并根据数据治理目标定制相关的规章制度来保障治理落地。
三是治理实现路径,明确某银行数据治理工作的实施路径,细化数据治理工作的关键步骤并交付相关文件给某银行。
四是治理考核及运营,结合某银行数字化考核目标制定数据治理考核方案,并提供数据治理支持运营及优化的方法论材料。
五是数据资产目录,梳理某银行业务系统、数据仓库的数据资源,完善数据各项属性元数据,构建全行级数据资产目录。
六是数据标准体系,梳理某银行现有的数据内容,搭建围绕基础类数据和指标类数据两大标准体系,并完成历史数据落标工作。
七是分级分类体系,按照人行数据分级分类指南相关规划构建某银行数据分级体系,并完成历史数据的分级分类工作。
八是数据治理体系,围绕人行、银保监数据报送校验规则结合某银行数据加工过程校验规则,构建全行级数据质量监控规则体系。
一是大数据平台血缘解析,某银行ImpalaSQL的ETL任务进行数据血缘解析,包括表血缘、字段血缘等信息,同时借助袋鼠云数据平台实现跨系统数据交换的血缘关系。
二是数据质量规则体系搭建,围绕银保监East4.0/5. 0 数据质量规范,构建监管数据检核规则,包括监管报表单体校验、跨系统数据校验( 1104 与East)、溯源数据质量检验等信息。同时,根据人行反洗钱监管要求构建交易对手信息检核满足人行反洗钱检查要求。
三是大数据模型重构,根据某银行项目要求重构大数据平台中间层(近200 张表)数据模型,通过数据模型平台进行模型设计、模型建标和模型落标,并通过行内现有数据来进行模型验证。
四是指标体系设计及搭建,结合某银行在信贷营销与风控领域的应用场景调研指标体系,并针对业务实际的需求完成至少 200 个基础指标加工及复杂衍生指标搭建;梳理数据资产(包括核心、信贷、 网贷等至少 10 个系统)并搭建数据资产目录;根据监管及内部管理需求梳理数据标准体系并通过平台落地;围绕人行金融数据分级分类规范搭建某银行数据分级体系并结合银保监数据加密规范实现数据安全保障体系。
五是数据分析场景服务,根据某银行应用需求提供不少于5 个建模场景要求的数据支持和不少于 5 个应用场景的功能支持开展数据自主分析、开发报表和管理驾驶舱等。
特别声明:以上内容(如有图片或视频亦包括在内)均为站长传媒平台用户上传并发布,本平台仅提供信息存储服务,对本页面内容所引致的错误、不确或遗漏,概不负任何法律责任,有关信息仅供参考。站长之家将尽力确保所提供信息的准确性及可靠性,但不保证有关联的资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。任何单位或个人觉得本页面内容可能涉嫌侵犯其知识产权或存在不实内容时,可及时向站长之家提出书面权利通知或不实情况说明,并提供身份证明、权属证明及详细侵权或不实情况证明(点这里就可以看反馈联系地址)。本网站在收到上述法律文件后,将会依法依规核实信息,沟通删除相关联的内容或断开相关链接。
11.11云上盛惠!海量产品 · 轻松上云!云服务器首年1.8折起,买1年送3个月!超值优惠,稳定性很高,让您的云端之旅更加畅享。快来腾讯云选购吧!
进入到2023年以来,一度被怀疑的数字资产受到传统金融机构的欢迎,包括高盛、摩根士丹利、纽约梅隆银行、汇丰银行、摩根大通,以及最近向美国证券交易委员会申请提供比特币交易所交易基金的全球最大资产管理公司Blackrock贝莱德。据欧科云链研究院发布的《全球银行业加密版图》报告数据显示,截至2023年10月,全球已有超过70余家银行正参与和探索数字资产业务,尤其近两年来慢慢的变多的大型银行机构开始以更积极和更深入的方式将传统金融与这一领域连接起来。欧科云链提供了一站式Web3数据分析平台,汇聚各类链上数据、榜单、巨鲸、名人、SmartMoney等全景数据,供多生态角色驱使,包括数字资产交易服务商、投资机构、应用开发者等等相应的分析工具则可为高校、媒体、科研机构、咨询机构、政府智库所用。
随着数字化的经济的迅速发展,国民经济与社会持续健康发展越来越依赖海量数据和信息网络。随之来的是一系列与技术相关的新问题:一些平台滥用算法、进行网络监听、侵犯个人隐私、泄露数据等违背法律规定的行为给消费者和公司能够带来了巨大的损失和安全风险隐患。销售易将继续通过专业的安全产品和服务,切实满足企业的安全合规需求,助力行业高质量稳健发展。
11月9日,2023年世界互联网大会“数据治理推动全球数字化的经济发展论坛”在浙江乌镇召开。下一代互联网国家工程中心主任、澳门科技大学下一代互联网国际研究院院长刘东出席论坛,并以“澳门数据跨境流动实践”为题发表主题演讲。此次数据治理推动全球数字化的经济发展论坛以“深化数据跨境流动合作,赋能全球数字化的经济发展”为主题,邀请了主管部门、港澳和地方政府、高校科研机构、全球相关行业和企业代表、国内外数据领域专家学者,旨在深入交流探讨数据跨境流动合作的方法途径,分享粤港澳大湾区数据跨境流动合作的实践经验,阐释数据跨境流动规则的“中国方案”,展现倡导支持开展数据跨境流动合作的积极姿态,为我国加入DEPA、CPTPP等多边机制营造良好的舆论环境,促进数据跨境安全、自由流动,推动全球数字化的经济发展。
中小企业是国民经济的重要组成部分,在促进经济发展、增加就业机会、提高国民收入等方面发挥着及其重要的作用。截至2022年,我国中小微企业已超过5200万家,占企业总数的99%。身边云用心做好客户服务,以维护企业利益为根本,构建事前、事中、事后全流程覆盖的法律风险防范体系,帮企业将法务风险扼杀于摇篮中,守护企业长足发展。
OpenAI最近宣布了DataPartnerships计划,旨在与第三方机构合作,创建用于AI模型训练的公共和私有数据集。这一举措旨在解决现有AI模型训练数据集中存在的问题,其中包含有毒语言和偏见。在克服数据集偏见等挑战方面,OpenAI是否能做得更好,仍有待验证。
近期,智联招聘《 2023 年三季度人才市场热点快报》显示:在 13 个行业大类中,“IT/通信/电子/互联网”作为最受跳槽者青睐的行业,期望跳槽入行的职场人占比高达18.2%。数字化时代,IT科技风起云涌,互联网产业日新月异,时代风口让慢慢的变多的求职者争相涌入。顺势而为,方才大有可为。积云教育作为IT职业教育TOP品牌,始终秉持“人人皆可成才”的育人理念,累计服务
在医学临床科研领域,数据的管理和分析一直是一个重大挑战。大量非结构化的影像数据需要耗费大量的时间和人力来手动标注线下标注工具功能单一、操作呆板,限制了工作的效率和灵活性。数坤科技还将持续用原创的技术和产品,推动医疗健康行业的数字化发展,让更多医者和患者都能享受到数字医疗带来的高效、便利。
场景金融成为零售金融发展的关键领域,零售银行正朝着场景化转型。无论是一杯咖啡、一部电影还是一张车票,都可能会成为金融场景。在未来金融市场的发展中,百融智汇云将继续发挥其优势,推动金融行业的创新和进步。
面对新的发展形态趋势,财富管理业务的数字化服务能力是引导客户回心转意的关键。日前百融云创围绕“银行财富管理怎么来实现数智化”进行了详细阐述并表示,当前商业银行逐鹿财富管理战场,以迅速做大AUM作为纲领,尝试多种手段激发存量基础客群,数字化能力是引领财富管理变革的重要力量,“数智化客群细分经营”理念将会在未来发挥及其重要的作用。百融云创作为一站式服
桃心云手机自发布上线以来,一直秉承着用户至上的原则,致力于为广大新老用户提供更安全、更优质的云手机服务。桃心云基于ARM云服务器,实现虚拟手机系统的运行,让你可以把游戏、应用都放在云手机,全天候24小时在线运行。期待新版本更新后,能够让用户更加轻松、愉快、便捷地使用桃心云手机,感受到桃心云不断进步的品质和服务。
StockmusicGPT是一个使用人工智能创作背景音乐的平台。用户可以选择音乐类型、自定义设置,并生成符合自己需求的音乐作品。支持多种功能和音乐风格,用户可以下载和分享创作的背景音乐。
Bedtime Bot是一个帮助繁忙的父亲通过睡前故事与孩子建立牢固关系的手机应用。它提供大量优质睡前故事素材,支持语音朗读,并有智能推荐功能,使父亲选择适合孩子的睡前故事变得非常容易。该应用还提供父子关系建设挑战和订阅服务。它的定位是成为最理想的父子睡前故事互动工具。
SuperBot 可以让企业和个人在几分钟内训练出自己的 AI 驱动的 GPT 智能对话机器人。用户只需要上传自己的知识库、FAQ 或网站 URL,SuperBot 就可以自动理解并训练出适合您业务需求的智能对话机器人。它拥有简单易用的设置、可自定义性强、支持多语言、与网站及第三方工具无缝对接等多项功能,旨在简化客户互动、优化业务流程。
StoriesOnBoard是一个AI驱动的敏捷需求管理平台。它可以在几秒钟内自动生成用户故事、验收标准甚至故事地图,从而帮助产品经理和开发团队提高工作效率。
itair 是一款帮助用户规划行程的智能旅行助手应用程序。它通过问答了解用户的喜好,利用人工智能技术为用户匹配最佳路线和景点,并定制个性化旅行建议,帮助用户规划理想的旅行体验。它能轻松管理所有旅行细节,用户只需按照系统建议进行操作,就能创造美好回忆。
Meditron 是一套开源的医学大型语言模型(LLM)套件。它通过对一份经过综合筛选的医学语料库进行持续预训练,包括选定的 PubMed 论文和摘要、一份新的国际认可的医学指南数据集以及一个通用领域语料库,将 Llama-2 适应到医学领域。Meditron-70B 在相关数据上进行了微调,性能优于 Llama-2-70B、GPT-3.5 和 Flan-PaLM。
极简智能王是一款智能创作工具,可以帮助用户快速生成各类文案,包括新媒体运营、职场效率提升、创意功能写作等。它提供了丰富的模板和功能,用户可以根据自己的需要选择合适的模板,进行创作。极简智能王具有简单易用、高效快捷的特点,可以极大地提升用户的创作效率。
Stepsize AI是一个使用AI分析项目管理系统的产品迭代数据,自动生成每周报告的网站产品。它可以监控产品开发指标,总结development sprint的主题和目标,概览产品开发进度,聚焦具体项目的详细进度。这样可以帮助产品经理和项目经理快速了解团队的工作进展。
鸠摩搜书是淘宝网站推出的图书折扣优惠活动,用户可以在购买图书时使用优惠券享受折扣,省钱又省心。优势:提供丰富的图书选择,价格优惠,定价:免费使用,定位:为用户更好的提供图书购物优惠。
小K电商图是一款商用级电商AIGC图片产品,无需模特和摄影师,减少95%制作成本。自研优化算法,生成图片更可控。用户都能够生成适合世界各地市场的AI模特和AI场景的电商图片,解决AIGC图片背景可控性问题。同时,还提供定制专属AI模特和企业解决方案,针对客户的个性化和精细化需求提供定制服务。
Predict Investments and Venture Matching是一个VC投资预测和匹配平台。它可以预测初创公司可能获得的投资轮次和估值,同时匹配创业者与感兴趣的VC。该平台让创业者可以更高效地融资,让投资人可以发现潜在机会。
Fortune App是一个AI财务管理软件,通过连接企业的所有银行账户,自动跟踪资金流动,进行精确的交易和账户监控,利用AI技术进行高级分析并提供洞察建议,帮助企业管理层更好地了解公司财务状况并制定决策。
天壤小白大模型是基于语言大模型的 AI 应用开放平台,无需代码开发,即可快速、灵活地搭建个性化的 AI 应用。通过提示词工程、语义搜索、向量数据库等各类 AI 工具组件,破解幻觉难题,为开发者和企业提供一站式的大模型应用服务。覆盖知识管理、市场销售、客户服务、内容生成、辅助决策、多语言翻译等多个场景。
Walling是一个用于组织工作和呈现想法的新型媒体平台。它提供了一个直观的视觉界面,使团队能够高效地收集、整理和共享项目相关的笔记、文档、链接、图片、视频等,并实时协作和交流。Walling让工作和想法的呈现更具吸引力和印象深刻。
Devv Search是一款针对程序员的新一代AI搜索引擎,能够帮助开发者快速准确地找到他们需要的代码片段和解决方案。通过强大的人工智能技术,Devv Search能够理解开发者的搜索意图,提供精准的搜索结果,极大提高了开发效率。定价灵活多样,适合个人开发者和企业用户。
麦耳会记是一款集实时语音转写、实时翻译和 AI 辅助写作功能为一体的 AI 办公助手。它可以用于办公会议、学生网课、客户访谈录音等场景。软件支持边录音、边转写,录音结束后,音频、文本实时同步至 PC 端、手机端。采用云端存储资料的方式,无论是办公、地铁,还是旅游途中,都可以随时随地查看文档或音频。麦耳会记还提供实时字幕同传功能,帮助听力受损人士更好地参与会议。
AppMaster是一个无代码平台,用户都能够通过简单的提示,在几秒钟内部署整个后端基础架构,包括数据库、API等,大大简化了后端开发。该产品免费提供部分功能,通过订阅计划可以解锁更多高级功能。
Rotato是一款用于生成个性化3D模型和电影的工具,用户可以在几分钟内生成令人惊叹的3D模型,无需具备3D设计经验。产品拥有30多种经过验证的3D设备模型,提供免费模板库,支持50多种图片和视频格式,以及Figma插件。用户可以在PowerPoint、Google Slides、Docs、电子邮件、App Store图片、App Store预览、TikTok、Instagram等任何地方使用Rotato生成的模型。
Zixflow是一个面向客户管理、工作流自动化和与客户互动(通过电子邮件、短信或WhatsApp)的一体化解决方案。它能够在一定程度上帮助企业管理客户关系,并通过AI推动业务成功。主要功能包括:自定义CRM,工作流自动化,多渠道客户互动等。关键优势是全能工作区,使用灵活,强大的定制能力。
大饼AI变声是一款全链解决方案,支持Win/Mac/iOS/Android版本可选,提供SDK及高DAU使用。除了实时变声,还为声音从业者打造了音色转换工具,为内容创作者提供了文本转语音等功能。
下一篇:袋鼠贷不还钱了袋鼠贷款