金融大数据银行基本设计说明书.docx
金融大数据银行项目基本设计说明书XX科技股份有限公司编制目录金融大数据银行项目2(一)金融大数据银行项目中心架构2(一)数据处理流程3(三)网络拓扑图3数据生产展示4数据采集展示5数据分析展示7数据可视化展示71. 权限管理:72. 金融大数据银行:9项目安排12金融大数据银行项目(一)金融大数据银行项目中心架构图1金融大数据猊行架为图1) 数据生产模块:da1.aS。UrCe金融大数据银行数据源。2) 数据采集/存储模块:通过FIUme采集数据到Kafka集群,然后由HBASE消费Kafka集群中的数据。3) 数据离线分析模块:将数据经过清洗转换后存储到Hive数据仓库中,然后提取其中需要展示的数据到MySQ1.数据库。4) 系统展示模块:通过前端技术jquery,ajax,echarts进行数据展示。(一)数据处理流程(三)网络拓扑图03金融大数据银行项目区络柘扑图网络划分为:用户子网、大数据集群子网、Web服务器子网、数据库服务器子网。数据生产展示孑于奇.亨于万于奇,元68/4/4,*0/4/4,?OV"42W"V4,?«W%?eeW4,拗eW“4m阳,”07防“648.5.皎*十«5耳68我以六月夕,6«8财收通现)6%。.66,*愤基£,/(必王平格”中,林当+.”梅中.林峙中,口将中林林中,Roe*b.R0QA6.M>"%W9b6.JOg/"*yXR/*6,RoW”60方,快667,防<1,8<18.66%:+上口,88666.六力侪.&&财疗。,>»6.畀,0.66,布0不0,6666,王尊格格十*彳+.*.HM÷.*.M-W÷.2ee6o2W.2w9e5.09/02.2999/0/e.2999/e/e.2w50gB.5n37,M<kof*6.状.&效口.886讣二月性.S68,IKH欠付.335,女,0.55.*0融依./5升:麦,1听铮诉.除t.*M,tt三f.*Af.J3,2ee933.2W933.2eW33.29W33,209933.299y3少观»乙防“。1«1,0.».皎*中敏。,6”.五月今5«<.云内付R95支.,.55,4向火|敷如3>王0儿,事子«.,子伞.萼于奇.¥子亨子奇,¥子*2"5S.2W55,询/5/5,丽/,/5R6Q/S/5,=eSS26O5S斯,皿九防<1,。1&8.5,欢欣中©8.即乂用,六月督.必;,酎”通.火弘,男,8.8.冷0M故8王子弊临中,2中,稼梅中林峰中,呼梅中I峰中,Ree/66.Mo/6/6.XQ66/6/6.XK66.州g66,WK1./6/6不»."7,6“8*8.”较歌+般已,656月田法登2:8付,3095.女6.班,如缺豕。,“65王小儿*+。.率/。予的,于华,?奇子我.29W>5,KW9/»bR0<W3RWA.K9C.Z99bCB.44127,10S.6.45.Ha.3S6n.-f.365.iJ6e.W.,e.5S.tt.6SS.*e.W,MW.f1.ffi,mW.iW.IWMI.21.22.2919/2/1.2919/2/1.21.92U291971.»19/2/1.21921十度,5m7,防“。匕6.%.欣:中政口,65五月价.56幺,及内付,205,女0.%,除向或目数,“655.王|>儿->于奇.予于,*÷.*÷.*.*÷Q.2W55.2e955.2ee9V5.e55.2e55.2eM55.2W5A18九6“。|<1,6.5.故:中敷8.>0六月蚀.8«财门:«乃9讥男.08.审0敷3"王子格梅51<4»中算梅中,林号中,弊姆中”环中,咒66.R606”.MQ"6.2MO/6/6.刈介,6N>.2W6”,挑8/6/6个,.”7防”。150.*.51十跤日65五月华,乂81:内付>995女,9.”回缺“士知”.王修儿*孑命车:子。于身.多子0,千于奇.子.105C.K>g5八,K)g5>R<W55,E*C5WVS八.XVV5rftM.53n7.Mdro1.d.55,fteU,886J3.三fr58,<iJtW,m5.e.S5.Wtt<tt.5955.HP.ttWf.a.X*.*a.Wa*.2W6VJ.e9VJ.2W93J.2WJ1.29WJZ3.2999JJ.2999JJ我口,如47,6小。06.$5,和外虹口,8&*0外饰,$658,|1支”.185.女.&.55尸耽?效,8K51¥于奇月千小¥于奇多子的.李子。季孑由7988/4/4.2ee44.2W9/4/4.2999/4/4,2909/4/4.2999/4/4.2909/4/4图4获取数据井去抵俄感词通过函数生成金融大数据银行数据,需配置生成文件名和生成路径。数据采集展示T-y*s(Kr1(«MB.MBfA*t*<wS4w*f<KiM*«Im«<Im*«*»«Wb*1fca.<Ut.<<<<*<*HUHtit*.3”AJr<MM<<U(U41tW,*MQkM*QZNMf<rM,X”UW<M>*O.iM.<<ifJM.wW<M.k<1rAkhkit3R.Uf1.Q”.,1一MeM%).kr*W*4.«««*<*4B*-R.U<JXt<M*<*v.)tV*r«M1.kwW*.tt(kVMvari4M<Mt*M4Mj5W*I*Mf11rK4MRAIt11fHe41.“ry”1.»IW>M1.<kf*M1.t*rm<3tnt.>,n>1.n4*HtnB«M1.k*y««*<femJMM««t.k*yt<.tMMIQ.k*Mx“tk*-.Q*M*t*VK<<<U*5.r*U.Vw>>.>>f三MMtMtM.M.1r*MM*r<*MtBM1.IMt*.<r*4ttre.M4iMM1.frt*t*f«««5.QEE*<yt*M*Mm<*IMM.w*S*jm<Im«*f-W*k*1a<M.w*1.U*1.M.y<*4r0fk1.im卜.uwt,.“3"*w*3“««”,.un所),hI1.U>WHtU.aM-1.<WW<3",”1-8WbI1.1.4,metrVBMtHiMRwtrxYMII*M<M<*<“QkS8,三*k1.<3,1.M,*vk1.1.<>>U1.M<rM<4>MRNH*t*M<erV(>M»QEMW.m*b1.tf<4E5f1.ume采集图6kafka集群待消费数据S1.4J:Foundbindingin(jer:fi1.e:/vsr/1.o<a1./hba««/1.ib/51.f4j-1.og4)12-1.7.5.jar!or1.f4)apVStatic1.Qgern<r.c1.,Mf4):Foundbindinginjr"i1."sr八oc1.h*docp八hr1.MBX)p(an1.ib,1.f4j1.9j1.21.7.SWtor9W4j,p1.Sttid099*rin<fef.c14S1.F4J:Seehttp:/MM.s1.t4j.or9/c(xSos.htB1.mu1.t1.pU_b1.ndii>9«foranexp1.anation.S1.F4J:Actua1.bindingisoftypeorg.1.f4).Uapt.1.094)1.09QcrfCt0ryMa*She1.1.:enter'he1.p<fttTWM>,for1.istofMOrted<camand.IypceMittt.1.1.H>to1.e4wtheHUdVMieUVrionI.2.<<f5.1.4.2.rIMknown.Tve曲,271):11:54POTR18hba(B1.11H1.re1.istTAB1.tcwt1.og2niZ29n<*rp<ebfox>4n1.ogbfM>xi4n1.ogfM»0pc»<kw>9*r<1*<w>:tC1.*mC1.woj1.atX1.F1.ogehdAtqtMMogei(M*paccdatCIean1.og2:datdC1.can1.o211cspccfc*tx1.og:fenxi1.ogne.Mxcqupiaoto9:gupiaotogn»e_$pece_in(*mt1.og:intefnt1.ogn三*-p*tiftShn1.og:ji*Sho1.09Ocm(>in.2,。CgdSgfeventIoq29151229*.11ae5p0ccbaoxian1.ogrbaoiian1.oQ".nacpcedangc«Ie;dong«Iedn.MMedtX1.en1.og01zdtC1.en1.og91.'nepcedet1.e4n1.og92:detdC1.een1.og92a(an<*>p*efc<txi1.og:fe11xi1.ogavn.*ce-gui<>1.09:ifo1.09,n*p4ceinter*et1.oq:1ntemet1.09.*三w*p<kfjihw1.og:j14nShMi1.og*1hbaM(Minj:ee?:O>图7HBASE存储数据IxS7X1.OM1.BA9O1XBDes2>e16.1.2«:45:»|xf<o1.uMf1.:pkM,tbtdi6141.)a47M8,g1.s3*58xS7m8DXxE5iBAi861e20R1001.a:45:Wst<ne1.tfN”:r«C,2t”xtiv¼t三p*161451SMM."1.ucR1.9A1.87xanxESxBA61.9M29291.ei29: