金融大数据银行项目详细设计说明书.docx
金融大数据银行详细设计说明书XX科技股份有限公司编制目录一、 金融大数据银行系统软件模块设计二、 金湫大数据银行项目系统接口及函数42.1数据生产42.1.1数据生产函数42.2 数据采集52. 2.1数据采集接口53. 2.2数据存储函数62.3 数据分析72. 3.1数据分析函数72.4可视化展示71.1.1 1用户接口71.1.2 菜单接口81.1.3 4.3角色接口91.1.4 业务分析接口91.1.5 交易方式分析接口101.1.6 平台分析接口111.1.7 地区业务分析接口111.1.8 交易量分析接口12三、金融大数据银行系统数据格式121.数据格式设计说明12四、金融大数据银行系统数据库表结构151. 表结构设计图15表1金融大数据银行模块设计表序号一皴模块二皴模块三效模块说明1数据生产金融大数据银行数据生产2数据采集/存储使用FIUm°、Kafka组件将数据存储到HBASE中3数据分析使用MapReduce将HBASE中的数据经过分析处理之后导入到MySQ1.中4可视化展示系统管理系统状态监控、系统信息查看5权限管理资源管理系统菜单管理、路径管理6角色管理系统使用角色管理、权限管理7用户管理系统登录用户管理8银行数据分析业务分析使用图形展示各种业务类型占比情况。9交易方式分析使用图形展示各种交易方式类型占比情况。10地区业务分析使用图形展示各个业务地区数量情况。11平台交易分析使用图形展示各种平台交易金«5趋势情况。12系统交易分析使用图形屣示各个系统交易类型占比情况。13交易分析使屈图形展示各个交易平台类型占比情况。14交易量分析使用图形展示各个业务类型在不同时间周期中金额趋势情况。二、金融大数据银行项目系统接口及函数2.1数据生产2. 1.1.数据生产函数函数类com.product,test.MockRecords生产类TestMockRecords需求优先级高系统输入或系统外激励系统响应系统调用生产函数，设定相应的输出文件及输出路径根据设定路径，生产相应的数据文件功能需求数据生产例外以及相应处理调用的功能数据生产注释和说明2. 2数据采集2.2. 1数据采集接口接口地址hhrzkgsystemdataCo1.1.ection用户类系统需求优先级高系统输入或系统外激励系统响应设定f1.ume采集的源文件和数据下沉的位置，将数据采集到kafka集群中Kafka集群出现相应的数据功能需求数据采集例外以及相应处理调用的功能数据采集注释和说明2.2.2数据存储函数函数类cod.hbase.consumer用户类HbaseConsumer需求优先级高系统输入或系统外激励系毓响应设置kafka消费主诞.使用HBASE消费数据将kafka集群中的待数据存储到HBASE中功能需求数据存储例外以及相应处理调用的功能数据存储注科和说明2.3数据分析2.3.1数据分析函数函数类com.bigdata,ana1.ysis,runner用户类CountDurationRunner需求优先级高系统输入或系统外激励系统响应配置源HBASE、目标MYSQ1.数据格式.配置清洗策略将HBASE数据经过分析后存储MySQ1.功能需求数据分析例外以及相应处理调用的功能数据分析注释和说明2.4可视化展示2.4.1用户接口接口地址hhrzkgsystem/admin用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入用户名、密码1.比对输入用户是否存在，并返回相应结果。2 .新增用户：3 .删除用户;4 .修改用户。功能需求用户登录系统、用户修改信息、管理员新增和删除用户例外以及相应处理调用的功能系统登录、用户信息修改、新增和删除用户注释和说明2.4.2菜单接口接口地址hhrzkgsystemres用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户捺入菜单名称、菜单地址、上级目录.1 .比对输入菜单是否存在，并返回相应结果.2 .新增菜单;3 .删除菜单；1.比对输入菜单是否存在，不存在即修改菜单。功能需求系统管理员查询、新增、修改、删除菜单例外以及相应处理调用的功能菜单查询、新增、修改、删除注释和说明2.4.3角色接口接口地址hhrzkgsystemro1.e用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户捺入角色名称、角色权限1.显示角色名称、权限等信息2 .新增角色；3 .删除角色:4 .比对输入角色是否存在，不存在即修改角色。功能需求用户授权，系统管理员对角色新增、删除、修改、查询例外以及相应处理调用的功能角色查询、新增、修改、删除注释和说明2.4.4业务分析接口接口地址hhrzkgsystembusiness用户类系统用户需求优先级高用户输入或系统外激励系统响应1.1.显示各种业务类型占比情况功能需求图形化展示各种业务类型占比情况例外以及相应处理调用的功能业务分析注释和说明2.4.5交易方式分析接口接口地址hhrzkgsystem/exchange_type用户类系统用户需求优先领高用户输入或系统外激励系统响应显示各种交易方式类型占比情况功能需求图形化展示各种交易方式类型占比情况例外以及相应处理调用的功能交易方式分析注春和说明2.4.6平台分析接口接口地址hhrzkgsystemp1.atefor三用户类系统用户需求优先级高用户输入或系统外激励系统响应显示各种平台交易金额超势情况功能需求图形化展示显示各种平台交易金额趋势情况例外以及相应处理调用的功能平台交易分析注释和说明2.4.7地区业务分析接口接口地址hhrzkgsyste三zone用户类系统用户需求优先级高用户输入或系统外激励系统响应显示不同地区银行业务情况功能需求图形化展示不同地区银行业务情况例外以及相应处理调用的功能地区业务分析注释和说明2.4.8交易量分析接口接口地址hhrzkgsyste三exchange-anount用户类系统用户需求优先级高用户输入或系统外激励系统响应展示各个业务类型在不同时间周期中金额趋势情况功能需求图形化展示各个业务类型在不同时间周期中金额趋势情况例外以及相应处理调用的功能交易量分析注释和说明三、金融大数据银行系统数据格式1.数据格式设计说明Text类型。CHAA(S1.M)个字符.VARCMAA(Mt)伸存可要Kf1.rE(可包含字.ImMHM祎)在基号E9aw大长>2SS个K11wmMWJtass.m力TexTb.T1.NYTeXT存放大Zt为255个升丽TfXTWM大较力5,535个钟丽音B1.OBJif认OeS(5rv38OBjects).%M+5.535TMWK.MeOtUMTIXT中放大怕力,777,zi5-rwms.MeDtUMBtOBHfBtoe*(SrV38OBjcti).11tt*1,”九XSTWMK.1.0NGTBXT用航大帔为4.294.967t29StTWT.or*G1.RTUOBs(皿r1.>qOBjcti).4.2X,X7.295m0MB.ENUMWc.)的仲人司三K1B司IUaNUM列中内由大65535个.如内*中不存人附«.KBA1M1.HW即UUrais1.aA司HMieNuM(M,v.)SeT与ENUH4HU.SeTS含M个K1.1.,和SFT可IH1.一个以上方.Number类型。这些整数类型拥有额外的选项Unsignedo通常，整数可以是负数或正数。如果添加UNSIGNED属性，那么范围将从O开始，而不是某个负数。T1.NYINY(3)-12W1271t«.0M2SS无符SMAUJNT(Sije)3278M“767«®.0M65535班号大使!.MediuminT(W)-3860e鼾8388607««.0to16777215无符q.在Jeq中电»大恰IHT(Z)-2X4743648H2147483647IM1.0列4294967”S无符勺在0号型艮定0tt.BIGINT(Rt)92233720Ue5477S>eM922337203MM77507W1.0H1B44744073709S51615JUW.我!»««火粒。,F1.OAYg带有淳RM1.Bzr.ttw>wrxttM.在ae中埋定石大00.DOVB1.e(Stt.d)懵&补WDr大位Rd中曜/4M6KN大馆管.DeC1.MAM5,SG为加率3MDOUetf鬟R.比济f1.Mf1.NW,Date类型。即便DATETIME和TIMESTAMP返回相同的格式，它们的工作方式很不同。在INSERT或UPDATE查询中，TIMESTAMP自动把自身设置为当前的日期和时间。timestamp也接受不同的格式，比如Yyyymmddhhmmss、Yymmddhhmmss,yyyymmdd或yymmddoOATK)BB.式：YYYY-MM-DD克随BM100O-O1.-Or!9W-12-31,OATFHMf()日漫合.Ie式YYYY-MM-DDNH：MM:5Siiw9M)9UUM100O-O1.-O1.00:00:00,*9999U3123:59:5911MCSTAMP()WW.11MESTAMPmxe('1970-01)1.00:00:00'c)M专的Iitf尊万W式：YYYY-MM-DDIiW丈MHtUMM,19700X0100:00:01'UTCr,203S>1.>903：14：0TUTCT1.MCOBh式HH：MH:SSriW：变>H91.f1.UBM7"：59:59'划018:59:59注“4位式晰元评的值1901M2
