《煤矿大数据基本设计说明书.docx》由会员分享，可在线阅读，更多相关《煤矿大数据基本设计说明书.docx（12页珍藏版）》请在课桌文档上搜索。
1、煤矿大数据项目基本设计说明书XX科技股份有限公司编制目录一、煤矿大数据分析项目3（一）煤矿大数据项目中心架构3（二）数据处理流程3（三）网络拓扑图4二、数据生产展示4三、数据采集展示5四、 数据分析展示6五、 数据可视化展示61. 权限管理62. 煤矿大数据7六、 项目安排10一、煤矿大数据分析项目（一）煤矿大数据项目中心架构图1俄矿大数据平台架为图（二）数据处理流程图2爆旷大数据项目数据处理流程图(三)网络拓扑图图3煤矿大数据项目同络拓扑图网络划分为：用户子网、大数据集群子网、Web服务器子网、数据库服务器子网。*MV.图4获取数据并去掉批感词通过函数生成煤矿大数据数据，雷配置生成文件名和生
2、成路径。三、数据采集展示T-y*s(Kr1(MB.MBfA*t*wS4w*fKiM*ImIm*Wb*1fca.Ut.*HUHtit*.3”AJrMMU(U41tW，*MQkM*QZNMfrM，X”UW*O.iM.ifJM.wWM.k1rAkhkit3R.Uf1.Q”.，1一MeM%).kr*W*4.*4B*-R.UJXtM*v.)tV*rM1.kwW*.tt(kVMvari4MM1.kf*M1.t*rm,n1.n4*HtnBM1.k*y*femJMMt.k*yt.tMMIQ.k*Mx“tk*-.Q*M*t*VK.f三MMtMtM.M.1r*MM*r*MtBM1.IMt*.r*4ttre.M4i
3、MM1.frt*t*f5.QEE*yt*M*Mm*IMM.w*S*jmIm*f-W*k*1aM.w*1.U*1.M.yWHtU.aM-1.WW3，”1-8WbI1.1.4,metrVBMtHiMRwtrxYMII*MM*“QkS8，三*k1.3,1.M,*vk1.1.U1.MrMMRNH*t*MMQEMW.m*b1.tf；Z4r,k11.MiM1.M.*1(.Aa*.MU,t21*9fZ79JDMIMtv1.fi.*UM(9MtV!mUtIMdWtw8-1.try1.fyvr.*M.1.fBtQUW!Vf1.Mrf1.UM，tU.*V1.U1.*1.4w*1.Mj*4JFwMMMSiIinW:
4、/W(rAKeUWKoM?1.iWM1.UfjD1.:，/，M*IC1.1.ow(e1.。.41.U41.tek1MM.1.t4).*c4M.M1.MZtiXU2-*1mCU4*Im,TJ，*UM.1.k0!*u1.1.:，ha11M1.*2UHM0-t4rI*jfVMt*ImwtMMto-U*1.Utew*.TNMIf1.!1.-MR1WIMIAKt(M*1t4e.c1.*0w41.7k(4JM.Q.mI!ta.t.tIJamrwMHiCMM.r*MmrwuC*nM*w*m*wwcm*e445*1.N1.2V11mCjtfi“21.M1.rIiar*M,:IvrwnC1.WMX小，A:IA1
5、.eaE”jm*3Am4Mi44Nimniu4)VIM.H:1.*Mm?n|1.|axmsc*m.gnwvnI.M0tA.i1.*iWtAJn1.wrvn11:Int7wntk2miM:Imiimmki11IaMIirftIM1.1.MMK1.mv*ic、im”iiIn,11MJnA.9m:IM1.iMMK1.UC!ISe1.m；6,“MWI”fRK，C1.rAJI8HN11*MMQ*)1.nMIVIMJMW7111.JWIVMNItMMMM)t-M7rMM,yM7”“%IWHMMIWMT11jBM*wt%.amMIi!J*7*1.rMMI1W1MM7I1ICMMI7VM1IMMNCi1.Av
6、eaaX4*wtRmEM711,*BnICKMI”EM2IM1.11V!Krw4i%tMMW.K，*；IVM1.MMNI”MM41.*kM1.1.MMK1.MI4B.HMnIIMMK1.ixm*2W,IMMNMraa11.0wca*图7HBASE存储故据1(4w*1.1.14H1.1.1.rt49e1.t1.1.Mtn*1.HMjrrEtfM*1.“1.t1.Iwtw1.1.44iMtWnwMI-m1.1.e*M三*H1.a.M*vtat.vs1.1.41.MM21.1.TRA力HtP-4UMn;IWMUaRMtaB*ia;MMJ，”.wU*IWIMIMMa*“，”，.-一31UE,0*1E“
7、m”，c1.(三Hkc41V.tiw*ea*H1.1.Mn)i.Bg1.M?MQMI.Im;4(4tfM1t4a.Q1.，*IIMan，：.w1.*U*1.：biiiU.t1.M.t1.MtrU41M4MX47.MIMMR：!：*1.1.MVmr.*WM11MMNU0*Hi!(41U.tMta*三HiiMnm.B1.VM.IOTM1(4mmitm(f.tM*W.1.w2f,fn.Jmu1,tU*t*M1.i44BW.IWMWiMM1.f411t.r-%M*MM%,x1.IBBM%MR%.*!1N1.1111M4M*1.*tttm.tM*WHM4MJT.ImB*a*w41.t4t.Q3,Qv1.
8、IMBME.w.1.，g.t1.M19U41.544*mM.TMMR4。J1.(U*mMtiat,t1.*MM*1.1.%4Mtm.vUmV/1.MWIMt，UMIQ1.i*M1.K7X4ymtUM1.：1.491JU*M1.t1.*t1.M.tMM4*a*U*M*.Za.M.M*U.*三r-1.1.M7.ww1.(uIMietM1.WC.fMvmAA*U*MiM4rMm.*imm)immhu*tMm.*iMntMaj*4MM-4Atem.tMVa*-ut1.MMM*,“I】mfrMM4tMI*,1.*v!*MMOTW%.w1.M图8HBASE存储数据2通过f1.ume将客户数据采集到kafk
9、a集群,然后使用I1.basc消费kafka集群数据。四、数据分析展示r-MsCOBtAC1.C.dS1W01.!41SMC444I2IMieMkXO2J*f.4|ISCI1.XM1.e25I.10I.(IUMI9tJSSI，D-IMOOMOVJMI.|TwBoooej71I.|9IiiCOOOUTW71I.|，IHMJ511-IioMtWTT741I，(IM1H729WI，IM4M1IVkI，1.M474!11.2I，141.114M1.1.M1B，1.0Hm91.5I1.I.-IM1*NMTI.|ITIMJMKKI1a三)muMMI.W1.1447M01UI120n*4041I，21MBI
10、MIinMU71I.r1177mt.|I1MM22HMI.|24UIVIMM201.I.PIMMMI)JMIBIM7M220K50IBIM77M1IIMI.3IBNr57I.XBMBIMMW7Mt.|图9Mysq1.分析数据使用HapReducc将HBASE中的数据,泾过清洗、分析之后存储到MySQ1.数据库中。五、数据可视化展示1.权限管理资源管理：对系统菜单进行管理可资源进行添加、修改等操作.图10资源管理界而截图角色管埋：是系统用色信息管理地方，在此可对系统的用色进行添加、删除、修改等操作，以及可以修改角色的杏存权附。图11角色管理界面截图用户管理：对系统用户进行管理.*图12用户管理界
11、面楸图2.煤矿大数据铁路发运量分析功能包括：使用饼形图和柱形图展示铁路发运玳侍况进”量分析功旎包括：使川条形和柱形图展小各地域发进口立进出11情况分析功能包括：使用柱形图和折线图展示历年煤炭进出口情况C-.oSCA1.1.JJJJJJJeMVMMUIaMM2煤炭产量分析功能包括：使用地图展示全国各地煤炭产Q库存情况分析功能包括：使用条形图和柱形图展示包月库存情况六、项目安排阶段步事内容时间备注需求分析初步两斫根据商业需求确定网站平台尚求功能第I冏详细需求分析根据初步调研完成具体衢求文档第2-4周Jifj目开发项目研发根据需求文档进行项I1.的设计以及开发工作第4-14周测试项目冽试根测试文档进行项目测试第15-17周安滨部署部署部署项目上线第18周试运行试运行对项目进行试运行第18周项目上线项目上规项F1.完成并上规第19周
