生猪大数据项目使用手册.docx

生猪大数据项目使用手册XX科技股份有限公司编制目录第1章关于本手册1.手册组成内容4第2章在您操作之前41 .产品部署42 .授权码43 .浏览器44 .分辨率45 .软件系统需求4第3章数据生产5第4章数据采集/存储5第5章数据分析6第6章可视化展示76.1 输入登录网址76.2 权限管理76.2.1资源管理76.2.2角色管理86.2.3用户管理86.3生猪大数据错误!未定义书签.6.3.1 出栏均重分析6.3.2 交易户数分析96.3.3交易价格分析106.3.4交易金额分析106.3.5交易数量分析116.3.6 生猪出口分析116.3.7 生猪进口分析12第1章关于本手册本手册，适用于使用“生猪大数据系统”产品的客户。介绍了如何使用本产品各个功能，及各功能的具体操作方法。1 .手册组成内容本手册，由以下内容组成：“第2章在您操作之前”，介绍了在您使用本产品之前，需要的准备工作；第3到6章，按.喷序逐个展开，详细介绍项目操作流程。第2章在您操作之前在您使用本产品之前，请您做好如下准备工作：1 .产品部署1,巳安装“生猪大数据系统”，且系统能正常使用。（建议内存不少于128G,硬盘不少于50G）2、集群部署：多台“生猪大数据系统”部署，形成分析集群，或者spark集群部署。2 .授权码在系统安装完成以后，雷对“生猪大数据系统”注册授权码才能正常使用。发送申请授权码邮件后，会收到对应的授权码，将该授权码填入授权码页面即可。3 .浏览器火狐、谷歌（建议使用火狐浏览器）4 .分辨率显示器的屏幕分辨率，窿议设置为1280*960、1920*1080。5 .软件系统需求支持64位的centos系统，rehat系统，suseIinux系统、ubuntu系统，建议采用CentOS6.5。第3章数据生产.mm.*.M九0.9.f.aaoa.,."九ms.n.3x.、t.ni3,n"1.XX<n.<.x.xaeo.¾E,8n.S.3U*r.in.1.anii】”.翁.E.,.I筝"X1Z2.»“】”M15*117.W.V.NM-O1.-i.tV.47).»M0.CO.1.(n.M.1.X*1.1.09.rar6I.R44*.MM41.U.9.J.N.XX1.M.IM.8.4".DM".1IA7,1I13M4.尸.C".*XT21.X.3J4-3iW.1.).2V2O91M.*.HU.1¾J>.MX41.-1.4.a.1.H.MX1.1.5.11.1.re.VMr.1.2MM.1.mJ1.24M44.AV*.ev.7.1.«««.«.Wa三.2J*4?1.WI-Mks.iiirw.M).w.MF9'*.xa.MM>v.±a.j.tt>.i>me.i9.7n'n.e*.3e7.m4*.Mneir.a.ii.m*.ff.1.>J*<w."M.I.IW"""*.«2%”，.明,1».殳.EE”.立.KKTE.*.>««.ian，！：,“，wrr.teut>e.n.M*>u.*.Mm,)Mk*.«M4.,t.1.&.，1.】”.“MV."JV”M4.tUr.a".X*38.KK1.7,4.W,>H,.g1.-M,M1.V,>ee,<V1.B,M,M177.H.M,1.M-1.-N.f>t,mU.mM,XM-iM.<7,>,MMe1.2.±IVjMM.".1.Mr.1.21.1.17AX1.M4.e.M.1.0MM?，.我%XXY21M14W.II1W.M).M,MMIM.*.MM-OIC.t«.177,HIM.C.PM.M,1.1.MM1.n.(V«.KMi2.mU.MM41.-t7.，.XXQIIO.«V,HM6A.«1.Mf.UM¾.1.1.7)iniM4.0VW.MWt.VWB.*.MJO4.73<«a.MN1.-Ma.444.Mrr.W.imM.M.1.5.2U*1.-)1.*<*.nr61.rM4.MM-41.27.%.>.W.XM01.24.Ha.n9M.91.v*M¾fwr.UMe.imni1.M4.aV.V4R.1.CS.M3047J.rH.XX1.2nt4.mvw.nj.w.w70.n.v.MMoe.wa.4M.zM.ee.WNw.n.»j-w.XM.rM52.rMM.MM*.7CX*.n.MX9.a.155.911.!4Z,IM,H4.色.M<1Q./侵I.食.>V3*rE0食HQ*，Z?I5.F7>e.KJ.MII<.W.1.1.±.M5.r.1.WM.n,M3*I11.MW.MI.rr.n-41.a.e*M4.VM4t4.xa.IWM,B.IKnIIP4.ftV4,r*.>,.VA,.*a*.MM1.-M.<ftM.MM2；1.f4.MM.MM.,Mm-M.M*.v>1.a.M.aarr.W.IMV/.,5.MU-1.-M.*.Aa*.mn.MM>1.-X1.ffM*1.1.,±eM3.y.“us，i八.QhX=X.B.c.-,.xa九.acx八x+ar.m.”九,mmoi4.*ft.xao.金.474Me.Xuasii."m2.r½n."x4.xxyim.,.*U.1.4.AMMr.UM6.ia7>nnM,*S.r4.？.,Vaa,.*a.MM-1.M.W.MM-?-?!M1.5V711.W.I?.WOOI1.M01.-1.1.<.JMO.8.15.NM1.>UM."X41.1.4.1.1.X.MX01.3.“.1.M.W.*to1.11MM.1.i7M1.1.»M.ara,te.VWf1.0.TM.MX-4-2.T>.7K*-4-21M1.4.1.1.w«.»»ei-M.1.a.J/.1.U90.W.PWWW.1.S.2n1.n.ffM.ne2.YMM.MN>41.11.Xa.M.XX01.<1.9.<fa.H,B.wUm,.UW.16111."44.<tf.sxt.%.3&.MZO473A.NE1.RMt4*.mw.Ms.ff9<e*.xa.M29"e>.a.j.ttmw.ix>mw.>.2n>)j.e*.H0i7.1*4.MM<r,a.*w.keei,.h.ni4».W.MAMf.1.294½.1.1.7H1.1.1.M4.ftir«5w.4,4.V<ft.*aa.M>1.4f.aA.fa<1.V1.5.rr*e.e.MM<1.4,a.MM1.IB.±a.U5.I.MI.I>MIVKQ1F1.>>v,W*<A.Nt9.«KKI%里,IWW.I4,MM*(f.>m.,1.1.M1.1.MU.e*4.fM.2.4.V<1.1.,M.A4.MMt.Wft*.>M?!mis«.m>.m.x.e.Mee-P,*.>iM%.ft*.4n.7z?.ta.i<J4a3jj.ueg,Mu.11A>,>t4.A.).xt,.,m.7t.M*r.1.>MM.I.Ut2)iXUM.Wa.rM.7.I.V<1.,M1.0.MM-4-J1.a.MJ*1.MM1.<.T11.t>>M.M.MM1.77.40.MM41.1.三.4n.MMO.0.IV.M,1.5.MM-i->.<*1B,raKi.n444.XN41-1.4.1.*.>.M.MM1.ai.<Va.1.N77.Ce,te1.nMM.I.ia7>i1.B.*CV9.to1.e.V*a.FM.>M-4-?1.TH.24*1M1.59.511T.I.)M.M2O01.77.V.XJ001.1.1V.475.M.<.1.tn7rW.1.%WO*1.-1.0.Kr61.Vt4M.MM4M4.1.tt.7.M.NX*1.M.K«.IMZr.9e.*.11MM.1.187)11144.Htr<,Mi.*.VWf1.O.IM.9M-4n.XW.27*-4-2)w>*.xBr>w.m«.M»»iii.Na.»29oi»r.xa.444.mrr.w.m)Mw.n.m*>.w.nn5i.vMM.MW-4iz2.xa.>M.w.0j4.wa1.tW>S,91.*M*Wf,UM1.ft.1.7M1.)P44.M*4.*.2.WA.dCB.MM4'79.±M.MMmK”Q.Eg99.u/f.iM*Ma.,.QR.±e.ca.e>.At,.a.4M.MM.xa1.1.*MVS.Mt<t,1.1.I.IWt1.1.1.Me.*&*«.*»*».*.I.V<1.1.I.±H.1.Mi.a.MM-I-/、“gw<“.图1数据图通过函数实现生猪大数据数据生产，设置客户数据的存储文件名称、存储路径。第4章数据采集/存储a*r¼.r*rtr*|Mr1.ct.Mi.1.*J)art1.t>VMr,<1.*cM*r.<>chv.k*<h<1.Mt*.prvii*r.tme1.t.DfvUVWatMrm22FeM<Q*ff.*XF*IUwmI.*MM«44C*Mry.¼rrr.IM).M.<nf1.<11vm1.Ufra4.k1.n1.V.<ad4*11Uv*1.*t*4M1.krrot.B1.ft.t1.a.tofar.r1.<k1.ft<4Mm1.kr*ro.wrvtc.三*ji1.M1.Mrrot.t1.<1.v1.rwwJItUrOS*»1.hr<r*.tUtoH.rvv*w.fee1.er.f*m1.f1.CAMTIwr11rQoZAj«n”X4IiRQcM1.<f*f.w11*1.M1.MM1.M.9ftoroU11.nw.,1V>M1.MMt.I4wt1.fka*M1.*fIttea-*1.kf*VMrd，31.M1.UfM*>r.a1.x1.tkB.5CM1.kftr.1.ctie1.1.M1.k*y«tir«.pe»aM»ed1.1.m1.k>nt*fypjo1.RQ(1.f1.5s1.f*>t*1«<«<v>,4e4V<v*«V<>%rM<.41v<11tomMM1.tr*ttr.10r<t1.wE1.««1.tt*t4f.(WMMWdmUM1.trv*t*t4r.tiMStiMMtWMOv1.ri41.1.rr<1mr.9ch.k1k>.(»>«.wria1.UM1.M.ft4ArrenterUr»13:3:"W»0u1.1.U.r1.trwr:KefkAerF:.1.,73ka"./.>1»A“rwOu1.t1.*.fr*fWf:7“<VBittd:*y<*»1»»“ktmf*VM<<OT.*nH9*MKvt*f4f9!I*itrv4<wt(Vf9v*Ip9'91*.»”：><*fUjrMWf9卜1.¼>V3IW»OIm1.tteM1.MkOT.Mm1.fQ*4Mt*f4f(oa«4M«tREI1.*.-三*1tQ7图2散据采集图开启门Ume用于采集生产的生猪大数据数据，并配置数据下沉位置为kafka集群。<41*arfIitra*ctUnT,tU4tMM1.4WaJ1.).U*n*MBfaf70BCaMu11<XMgM<o1.i三wfk)<.tatMC14-“7八.v*1mJ.MM1.*UWI(Q4Cc1.*wwf1.t1.*M1.*>tmM1.4m.*1.wxx1.4IWW<oU三*t1.=M10trvp.Qtr*q-W7M1.”12E2KMf八bK3mnT<41.tfmf1.:<*«»«<.tu*,QarS"mUSFiU八三XE"SF三VMi*jnvn*<41.*rnw1.I:<*«*«*tUN.tiar*<MtHmznirt.*XN1.39力Im1.1.m<4n>f!<ew<tMw.QgM*)”Eu1.g2xKK4ZSetw*I1.yQUBvQii4E3F.v1.wH1013a>faWrimat<ueU*t,ZAI*WQ.*.f.tf1.1.v,QUv*1m<Q1.w1Q"1.Mwt.ima*)44WI*M,1m*”.Mt4MA<QM14<4M<MA<1.>三*f.MH<t(9rt.fUMVM*Mm>MBr.1.mVM.MM1.441.M>1.WA<1.tamf1.*a*<rtr4r.t1.*M1.MaK)IZMtann.M1.4UWfO4<o1.t三wf:fta.tiat三pICI4M1M.ZIiMICO1.twwfI:»««*14.t1.w*tMp1.CinXKUm.1444M1.*nW1.fQ4<oUw*f1!ko*AUCkttf.tkMta*MKUW1.BT*.UMJ03a<41.三*f1.!he*U*T>.QiQXimni6F.1.，f<M3H八aKX*Mt*n7*n*<4>WWI!.QtaM*X817ni6E.MM1.99.ee1610/991«»*<9>W*f1.Me*1.taF*1.QmM*X1"E16E.射.M977.egsm*n*"I一”f11.WE"5Msg,1t41.<ZAIA.otw*fM1Ar*.Ufe'e*RK.1.4KfKM<41r*fI*.ItftM1.M4>»>e<WIxr*%,*atZaAaMAafAMA*Mt4*UW<>>U<1.三rafI;mm.I1.*t4afM<>1.4*>Mt,*1w3j*,Mi4<XAfMtiuiWZKSf1.iVtWA<1.t三f1.rAM.Q-SNItMa1.nnM4WVtU11<1.三wt1.:K1.cC1.W.tIBM，WeNwtmiAB.*mBSI*UWW4*1.wXM>41.1.Mi*mo»c<41.wwkr*K*IP.Qmaw1,)1ZMIE.vwrt4hrfn>KXM<41.1.MRa1.!rvt1.<r.t1.*r*ta*>)tF>1.Sm.*M"<*Uw*1.*M.Quar¼,yWEAf2m».Z»W0M59vW*八*31M八*MGMt4mmMtnmivn*w三fi*rRH.Q1.f2*JMt4>W41.KA1.>三*1,Z>Q.QHMT-IWEMgv1.RtA1.0U<>三-1”.tMm*mM>MNann.im<01.三a1h,cm,tiMtM*HH？MMMS,<1.三f!VrMMCtM110t.ttaMta*MV1.V<K>1.m.ij“uM1.*m*4M1.<UWIC4<1.mf1:trM*ctMtAmI.tMMtve1.41.«UW>1.tm.UmNM1M141UWIWM<o1.iw*«i：trM»Kti4rA»tMM.tWtv1.1.4C1.X*1.MUMm<4Mi4>mttneSUanH1.:”-t4TQ.，力1.*m6E.2八办八"八1M1.<nW1.WM<91.t*1.rw>t.Qr>Q1.WEMSvIm1Wt<n9>vn*sU三B1.1.g>00S.QtwQ三v16mi0E.EmRX1Z2MtOn*7Mm«wi*irimmowks1.br<4)三wf*1.tr1.p.1iw1.M*)fHUfm.*)*>at*MUWvtnKM图3败据存储图使用HBASE消费Kafka集群中的待消费数据。第5章数据分析ttf.COMC1.M6>W)*ttMO1A11M5W1M¾¾WM9IJeomIemIemmrwmwnrrr1e11vzma*，19»WMMW1FKMM11»wm*f>>nH>1.Mtmv*tWOB1*b1MIDn77mtMAMiJ!?!1IVimmwit4IMM1.1.1.I>M774I1133MCMW244tW*K4般笑分析图将存储在HBASE中的生猪大数据数据通过MapReduce进行数据清洗和分析之后存储到MYSQ1.中，方便下一步的可视化展示。第6章可视化展示6.1 输入登录网址httD：/192.168.10.93:9528/默认管理员账户：admin密码：123admin1.ogin图5登录界面图6.2 权限管理6.2.1资源管理进入管理界面，可以对系统菜单进行管理。可以根据资源名称搜索对应的菜单资源;+新增无修改©删除点击新增、修改、册除可以对菜单进行对应的操作。*mm图6资源首理界面图6.2.2角色管理点击角色名称角色管理进入管理界面，可以对系统角色进行管理。可以根据角色名称搜索对应的角色资源；点击H1.可以通过输入角色信息来新增系统角色；+授权,修改白制涂点击授权、修改、删除可以对角色进行对应的操作。-图7角色管理界面图6. 2.3用户管理点击用户名称用户管理进入管理界面，可以对系统用户进行管理。QJftRm可以根据资源名称搜索对应的用户信息;"筱茂。戈除点击新增、修改、删除可以对菜单进行对应的操作。u图8用户管理界而图6.3生猪大数据6.3.1出栏均重分析出栏均重分析功能包括：使用图形化展示各类猪出栏时体重对比6.3.2交易户数分析交易户数分析功能包括：使用图形化展示各类猪交易数对比情况。图10交易户数分析图6.3.3交易价格分析交易价格分析功能包括：使用图形化展示各类猪开盘收盘价格变化情况。图Ii交易价格分析图6.3.4交易金额分析交易金额分析功能包括：使用图形化展示各类猪交易金额变化情况。图12交易金额分析图6.3.5交易数量分析交易数量分析功能包括：使用图形化展示交易情况。图13交易数量分析图6.3.6生猪出口分析生猪出口分析功能包括：使用图形化展示生猪出口情况。图11生转出口分析图6.3.7生猪进口分析生猪进口分析功能包括：使用图形化展示生猪进口情况。图15生猪进口分析图