媒体直播大数据项目使用手册.docx
媒体直播大数据项目使用手册XX科技股份有限公司编制目录第1章关于本手册3第2章在您操作之前3第3章数据生产4第4章数据采集/存储5第5章数据分析6第6章可视化展示66.1 输入登录网址66.2 权限管理76.2.1资源管理76.2.2 角色管理76.2.3 用户管理86.3媒体直播大数据8第1章关于本手册本手册,适用于使用“媒体直播大数据系统”产品的客户。介绍了如何使用本产品各个功能,及各功能的具体操作方法。1.手册组成内容本手册,由以下内容组成:“第2章在您操作之前”,介绍了在您使用本产品之前,需要的准备工作;第3到6章,按顺序逐个展开,详细介绍项目操作流程。第2章在您操作之前在您使用本产品之前,请您做好如下准备工作:1 .产品部署1、已安装“媒体直播大数据系统”,且系统能正常使用。(建议内存不少于128G,硬盘不少于50G)2、集群部署:多台部署,形成分析集群,或者SPark集群部署。2 .授权码在系统安装完成以后,需对系统注册授权码才能正常使用。发送申请授权码邮件后,会收到对应的授权码,将该授权码填入授权码页面即可。3 .浏览器火狐、谷歌(建议使用火狐浏览器)4 .分辨率显示器的屏幕分辨率,建议设置为1280*960、1920*1080o5 .软件系统需求支持64位的centos系统,rehat系统,suse1inux系统、ubuntu系统,建议采用CentoS6.5。6 .名词解释序术谱定义1DF表堞体宜播大数据系统用于处理败据的内存表2交互分析媒体立恬大数据系统采用的原始语亩,可以参考原语手册.3SParkK群部署融合常见的hadoop、SPark大数据平台,以桀野方式分析我相.第3章数据生产通过函数实现媒体直播大数据数据生产,设置客户数据的存储文件名称、存储路径。第4章数据采集/存储*1.<f<EI1.a<fi<«eJKft<*.MBHeS4w*NM<Im<M*89af««W.k*1hA<UMttr4m”"EmUAjMZ”Qfy”pmr<MMt%9*t*WttMr4r5rKryk4tMIW««1tM.<«*«(*w3.,”JStt<tfMfMbk>tMOJXHWM“ZfMQQ”W«S.f".4M7:3,Hs6vV*4w<M<r%m.W”,f3MMtninmwx"”¼t*4>>n««1(1*««.H>.««1.M)H4<(1.1J.UWI.I.IIWI1.t*1.M*kt.M<11if*kM*wina15.“,iwtfWbHM3.2.MX%««1.kry«t*«»1.M<t“t.bF22*W.FQ"*QM%Mf*4M»1%“1*Q.3wgyMVtrQMayr*KIM“ArMQ*.'“QAER«Q.QEQ2X%<MMtIMMewim<¾mwh"k1.k>.<)<*4r0<kf*<1.1.>OIW«<UI1MW3k1.W(<*Uyfi,EYmv-<I1.,3IWCE"I"W3I1.»Oiw«UtfrtNMN“y”>teKM4<MteNFIfQE*1.*.1.,X4,IWeatf«Mt<tM1SR”Y,”“r(MMMtt*tW三.k1.Mt1.f4开启f1.ume用于采集生产的媒体直播大数据数据,并配置数据下沉位置为kafka集群。*wrrM'b4*UMk41*to1.t(MMr.««toe4*t*9wrwvr号WW.-><E9.M<通W4.-jW,,力”f*StoM<.M.(-V.Mt¼*1.X>,MM9,.U.0C.MIWM.4ft.>vW<.N1WV>9.>R.JIO>.0C.IVW>.MIV*.*.1."2.J11.Muvv.t*4.9cw.mrvn,.内.XIWI.A1,.1.MW八IWI,R04八.*Mnt.i3.3九月.KU!2.".OI4I.tutw,.«.,”.八»,.*.Miw>.rr.n.ani.»41.Mtwf.J9.M.««.I.-an.v.441.jM1.A.>5ax.RnM.t.tA.>1.W1.1.1.M*UT,.n.>1A.i*n*M.*94<.a.XA,iW1.i.IR.rt*M*%.MiVII.n9.w.A1MbV1.Zi.-MV1.1.n.2.Nsv.n.9>.X.mv5«.M.441.,MIrI.M-M>.>>.¼.MIW.W.I.J,MVi.1A.M1.t.KW.4I.4MVI.Q.m.2nQ”QQM.<.RIW”*.*A.".C.0.At”"1J.d.JAJ.KW".A1.”1.*.1.J.QH"”.>1.*.C.0.jm"11.J*.)U.cw.n4v.cf1.i*4.cw.jnrvz?*,.t<.Mt¼*va>u.n,A.nn>>V4*.>y*.J*v%.A.>M1.>.t.Mtwv>t.H.*x<*.MM.-atfe.>n.2S.N1.V1.f1.9>4.*XA.mV1.K M.M1.¼>Wi.MFUT.1.aM.MIW.X.M.f1.-M.W.1.*.4.f1.-MaXfWI.XI*.4-W.J>W.-C.-,214V!.*.72.1.w-W.M1.e)a<1.,<,JtWMM*.M.0<.JW.4ft.ia,0<>WVM.aR.>1.<W.JttrV.M1.t.0<.,JW>.-tf1.t.iu.C*.3t1.A*VI.K.1.1.*4,9CV.2M>Z7.r.4IIV41.,W-M>,.1.1.,.Xi.V.1.*>.n.*A.M*4.4R.1.Bn.A.3Wi.M1.<>.IM.XI<VI.Ret1.t.m.*B-Ma¼I.K1.WS .£41.Q1.八,.I.A8W"Vr.D.*.mvi.>A.MW.,4.>iW1.B><<,M.".RI""1.二.».4.MS八. .«.*.”"i.Q0>.,,AUW.rr.q2.,m*V»i.,K.>*e1.".”.w).”>.m.“.二at.rw.d.QW“.<j*.m.KX4i.2»n/7Zi .«.41."I,)I.Q,.J.,KtW"1.rr.1.+,W).,KWQ1%Jt*R*1.QM.M,i4r.JIM/1.,.tv.41.mv/t.1.*.W-W.M<X*VI.M>UF.1.-a.MW.*.M.*-M.*W.MV-4.-M.a*XWI.Mt*.*M.4-1.M*WI.-Mtfv.-0*.一.R如"I.M.M>te1. ,.OT.W-M1MtWVI.MFUFQ.I.一.JI*J.J1.N,f1.-M,MWt.W.4.<-M,MWt.Mt*,>1.f1.-9,.一1."卬tI.,.一峰Q.<.K1."1.”,等.11.,4.JB.<./!WM.tR./,<.Q1.“1./.K1.S.B.,.KI""1.一、.J.9C*.M1.A*V1.1.*a.t1.4.C,2MJM,文,r.*.IW4J.W>.W.n.*.W¼>1.4f1.1.IH.,.MV4I.Mt*.1.%.*,MtW*,K*.K1.“7使用HBASE消费Kafka集群中的待消费数据。CAiMIKIUH1.4WM4)1IEM4V,KUWMMV)1IFMMV,H1.M<JM)Ht4*7M4VHM4QM4W)1M*7M4V,HVMUMV>WtEMMV,KMWMMV)4*>M4)7*U*?*M57HMWM4V)>t4*9>M57*HM>MU)H1.4*7M4e%71HUWMMV)1.*)4*>>M7>H1.MQMMV)I14*3M471KMW*MW)H14WM457(HMHQ*MW>H14W»M>7>HMk>>MW>H1.4a>MM>S*MWMMIJH1.4WM41.?Ht4W>MMi>HMWMMtJ>U*aM42HMWMMI>I*149)4I7(MBwf1.9<rv*trae,Qfaa1.I«01EMaM1.OT7W7Ic1mfb三<rwer.tiatv>K1.MO>MM1.V“八*tMMKt*MMr*IMr*>41.4VM4M1,1.wn1atWaMk.nanWkt*WKVc1.tm*1.1.tMt*Ht4W>MM1.vUm.< 1.<*w11>41.<rwnw.IMM*tIAimMMMI.MOTmV71.c1.t*wfCM<rMer.tUt三BBHMW>MM1.vUS八、一、“(1.*w1«*.1.MvMM*M4*2M4m1.wIc1mbwI1.*j.t1.M*tpKMWM4M1.“Ui,<<1.*Mw1.4CrMriM,Q%S1*VU*M1.*1.w7nf71.c1.*mtJ.IMrM*r.t1.M*tavK1.4W>4M1.vUm*八*、“、1.«*«rItw*<*Mt4*7M4W1.*wtVc1.*wf1.1.MbM.t4,t_e1.S“WM4M«1.mUm.OM(MW*pUrw<rw.«Mvt(wM1MZM*M1.MWmV71.Ce1.MWf1.pUrMMr.tMt三pHMWM4M1.eU八、“W< 1.一".1.*rIMe*1aw»Mt4«7M4M1.74k*kC(C1.<*Wf.p1.te.IM*tMpaHb4>>MMi.v0wn.< 1.Q1"Eiry.QaWMI*si*vm1.*1bRTV7八ce1.iMefi;rXr«NMr.tM0tMpKMtO*Mi.vUm"gaH"M"i*Imm1Itw*1f1.RMIM?>MM).*wMWVX*M<1.<Mt1.r*M.t-GbMO*MM1.,UmXZ.<MM1.'M(rw<VM,<aB*vMmM4MI.1wa2*M7ZIc1.MM1Cc<raCf.,af三2YM*M1.BuMy八*、“、,< !*Mf1.w*rIbwMavMW*2M4M1.wM4CmVM*4CI三M1.m三,t1.M*t*VHMW>MMB1.",Q<w*w1.trw«tw.*wntRM1t2MIM1.1wJMQ1.(1.MMf>vKr«e«r.t1.M*twHM*>>M4Me,vUm"ri»*.ttBe*1oMt4VM4M1.PwyaMK八< I*0M,1.H.t1.MtM*Ht4*>>MMI.*Um.IW(HB*114B<rrM.tw*<4Bv>M1.tZMmi4.M1.waTVnnz15<1.*Mt1.4Mr*Mtr.tMM>1.1.Ma>MMI4r*Um41MY(MW1<v*r.tav>1vMA2M4*>H.twfgtk,f,«UEC1.*Mt.*te.tMeUMpaKMWftMMK.*1."Y.)< *MVw14aCr*tra>.<wrMrMI4f7MMM.RMI八,< iM1.r*<rMCr.tM*tM*Ht4WMMI4.v*UmMM4A三r.QIerMeVX1Q"M4MM.Pwmf>tfAB*八at4FaM4tfB*(t*mfI*Amb.y>.<w.A(*v*MMr*MT*.1w*tMMWVM*14.Mw>2W11.5C1.*wi1.MfM<.v*UmK“KQY第5章数据分析>B0f½HDW16W17f-三*10E20则SOOW0.(X00.0600.070Oxrtocnoooao0.1600.240.ooo40000.00000000.000JWoaoOo90000.0009.000tocooo.oooi2(ooo.ooo160000.0002WOOOOO将存储在HBASE中的媒体直播大数据数据通过MapReduce进行数据清洗和分析之后存储到VYSQ1.中,方便下一步的可视化展示。第6章可视化展示6.1输入登录网址h1.1.D:/192.168.10.93:9528/默认管理员账户:admin密码:123admin6.2权限管理6.2.1资源管理点击源;+新增应的操作。1.ogin进入管理界面,可以对系统菜单进行管理。可以根据资源名称搜索对应的菜单资,修改。删除点击新增、修改、删除可以对菜单进行对5WW三三三Afc三b>frr2,&白*M1.2氐S*6.2.2角色管理角色管理进入管理界面,可以对系统角色进行管理。角色名称可以根据角色名称搜索对应的角色资源;+M1.可以通过输入角色信息来新增系统角色;+授权之修改口税涂点击授权、修改、删除可以对角色进行对应的操作。6.2.3用户管理用户管理进入管理界面,可以对系统用户进行管理。用户名称可以根据资源名称搜索对应的用户信息;点击新增、修改、删除可以对菜单进行对应的操作。6.3媒体直播大数据直播内容占比分析直播内容占比分析功能包括:使刖图形展示各种类型点播内容占比情况.直播受众人群年龄分析直播受众人群年龄分析功能包括:使用图形展示内播受众人群年龄占比和数幅情况。直播用户TG1.分析直播用户TGI分析功能包括:使用图形展示中国各地地区R播用户TGI情况.移动用户规模分析移动用户规模分析功能包括:使用图形展示全年各个时间段移动用户规模趋势情况.直.播市场规模分析直播市场规模分析功能包括:使用图形展示历年宜播市场规模趋势情况。直播观众分布区域分析直播观众分布区域分析功能包括:使用图形展示各城市间也播观众分布占比情况。