一、案例概述本项目针对支付产业收单业务,运用大数据技术体系中的数据采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等技术,搭建一个集数据采集清洗、实时分析、离线分析、数据挖掘、数据可视化、元数据管理、报表推送、以及BI商业智能等功能于一体的支付产业一站式大数据智能分析平台,实现交易系统、对账系统、清结算系统、风控系统等支付基础系统无缝对接,完成了支付数据从抽取到价值实现的所有功能。
二、案例背景及目标近年来,我国支付产业科技快速发展,在多个领域已经走在世界前列。大数据、人工智能、云计算、移动支付等技术与支付产业深度融合,大大推动了我国支付产业转型升级,更好地服务实体经济,有效促进了经济发展。从发展特点和趋势来看,大数据与支付产业的融合应用正在不断强化,基于大数据的支付产业分析平台也正在成为大数据应用的新方向,支付产业数据的整合、共享和开放正在成为趋势,给支付产业带来了新的发展机遇和巨大的发展动力。本项目旨在为整个支付产业提供跨企业、跨部门的数据综合服务平台,承载着支付+业务的核心枢纽,为企业及其相关机构提供全栈大数据服务,包括技术平台、数据应用及产品、数据服务。本项目并不仅局限于使用大数据技术构建数据分析平台,而是基于云计算、云服务的理念,打造企业“数据即服务”的平台理念。通过整合企业、子公司、支付+平台、第三方等数据,通过授权机制为企业、合作伙伴、投资方等提供经营、风控、决策、营销等所需的相关大数据能力和数据服务。
三、典型做法与经验采用分布式调度系统,用于负责任务的调度运行(如数据仓库调度),是一个批量工作流任务调度器,用于在一个工作流内以一个特定的顺序运行一组工作和流程。调度系统定义了一种KV文件格式来建立任务之间的依赖关系,并提供一个易于使用的Web用户界面维护和跟踪的工作流。嘉联支付围绕其收单核心业务,主要有五大协作平台:业务风控平台、智能大数据平台、交易支付平台、嘉联开放平台以及自动化运维平台。大数据技术在整个平台中起着不可替代的作用。业务系统整体架构如下图:
如图所示,五大平台互相协作,形成了一条完整的支付链条。其中业务风控平台与智能大数据平台利用大数据技术体系中的数据摄取、数据存储、流式计算、智能分析、数据应用等先进技术,一方面对交易中的欺诈交易、伪卡交易、反洗钱交易等提供了实时风险监控,另一方面又充分发挥数据的驱动力,从多源、跨域的海量数据中快速获取有价值信息。因此,大数据技术对于收单业务的重要性不言而喻。
四、技术应用与功能服务结合支付产业特点,针对公司主营收单业务,灵活运用大数据技术体系中的数据采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等技术,搭建出一个集数据采集清洗、实时分析、离线分析、数据挖掘、数据可视化、元数据管理、报表推送、以及BI(商业智能)等功能于一体的面向支付产业的一站式大数据智能分析平台,实现和交易系统、对账系统、清结算系统、风控系统等支付产业基础业务系统的无缝对接,完成了支付数据从抽取到价值实现的所有功能:1.为支付产业构建数据资产为企业构建统一的数据存储和数据处理资源,围绕支付企业的业务开展大数据应用建设,最终形成面向服务化的数据资产。
2. 打造第三方支付大数据风控管理平台通过对结构化、非结构化数据的整合,运用大数据等技术重塑第三方支付的业务流程与风险管理模式,基于数据驱动对交易风险实时监测的关键技术研发,主要针对支付环境中的交易风险监测、交易分析的需求,设计和实现交易事中监测预警、事后交易分析、交易风险识别、监测规则可灵活配置的实时交易风险监测平台,保障现有金融支付环境安全,将大数据应用作为提升第三方支付风险管理能力的关键工具和重要途径,提升企业运营效率,特别是对于突发事件、实时预警监控、隐藏风险知晓的及时性,可有效规避风险发生造成企业损失。
3. 支持支付产业的营销预测与科学决策通过数据采集,将支付产业的企业的各种公开信息进行清洗规整,并进行数据补全,构建满足丰富业务需求的企业知识图谱,从而支持营销团队根据自身业务需求,定制和挖掘特定行业的深度数据,支撑企业进行科学的营销决策。
4. 构建智能化的营销全流程系统通过不断挖掘和分析全网信息,挖掘企业的全量知识图谱,并在此基础上结合NLP、机器学习算法等人工智能技术,能够为企业提供从线索挖掘、商机触达、客户管理到成单分析的全流程、一站式的智能营销服务,帮助企业解决在寻找、联系、管理业务时遇到的难题,让企业高效获取精准营销线索,降低获取成本,从而全面提升营销效率和业绩,构建一站式的智能营销全流程系统。
五、实际效益与亮点本项目搭建的面向支付产业的一站式大数据智能分析平台,以银行卡刷卡交易数据为基础,搭载当前业内最先进的大数据分布式架构技术,使用成熟的挖掘算法和可视化手段,打破原先封闭的周边商业信息壁垒,从区域范围、时间、银行卡类型、交易金额、交易笔数、商品品类等多个维度的数据交叉、关联和聚合运算结果中,为商户揭示出隐藏在数据背后的商业经营情况、营销白名单以及局域性竞争预测等开放式信息,助力线下实体商户商业经营管理从“经验值”转变为“数据化”、“场景化”的智能决策和智慧化经营升级转型。项目落地后,为接入支付体系的千万户商户提供数据化决策支持。原先不起眼的POS交易数据,不仅可广泛应用于融资贷款、投资理财、风险监控、客户营销等涉及商户经营管理的多个领域,更可在各类民生服务中发挥更大的价值。产品主要应用于嘉联第三方支付系统,包括风控平台、商户管理平台、终端管理平台等子系统。目前收入主要是来自于支付系统服务费用即持卡人在消费过程中产生的手续费。平台上线后的收益,同时提供技术服务、技术瓶颈攻克等取得的营业收入,在实施期间已实现销售收入为4940.75万元,累计纳税741.15万元,净利润1432.88万元。
