港口物流大数据项目详细设计说明书.docx
港口物流项目详细设计说明书XX科技股份有限公司编制目录一、港口物流系统软件模块设计4二、港口物流项目系统接口及函数42.1数据生产42.1.1数据生产函数52.2 数据采集51 .2.1数据采集接口52 .2.2数据存储函数62.3 数据分析72.3.1数据分析函数72.4可视化展示81.1.1 4.1用户接口81.1.2 4.2菜单接口91.1.3 4.3角色接口101.1.4 各地送件数分析接口101.1.5 快递公司港口货量分析接口111.1.6 快件类型分析接口121.1.7 港口仓库分析接口131.1.8 港口安全事故分析接口13三、港口物流系统数据格式141 .数值类型142 .日期和时间类型163 .字符串类型17四、港口物流系统数据库表结构181.表结构设计图18港口物流系统软件模块设计表I港口物流模块设计表序号一级模块二效模块三效模块说明1数据生产港口物流数据生产2数据采集/存储使用F1.wne、Kafkaia件将效据存储到HBASE中3数据分析使用MapReduce将HBASE中的数据经过分析处理之后导入到MySQ1.中4可视化展示系统管理系统状态监控、系统信息查看5权限管理资源管理系统菜单管理、路径管理6角色管理系统使用角色管理、权F艮管理7用户管理系统登录用户管理8港口物流数据分析各地送件数分析使用图形展示各地主要快速公司送件数占比情况。9快递公司港口货量分析使闻图形展示各主要快递公司港口货量占比情况。10快件类型分析使用图形展示港口快件类型数量和占比情况。11港口仓库分析使用图形展示各主要快递港口仓库使用情况。12港口安全事故分析使用图形展示历年各种港口安全事故数量和趋势情况。13港口月吞吐量分析使用图形展示各港口全年各个月份中承吐量情况。14仓储分析使用图形展示仓储数量和趋势情况。二、港口物流项目系统接口及函数1.1数据生产1.1.1数据生产函数函数类cod.product,test.MockRecords生产类TestMockRecords需求优先级高系统输入或系统外激励系统响应系统调用生产函数,设定相应的输出文件及输出路径根据设定路径,生产相应的数据文件功能需求数据生产例外以及相应处理调用的功能数据生产注释和说明1.2数据采集1.2.1数据采集接口揍口地址hhrzkgsystem/dataCo1.Iection用户类系统需求优先级高系统输入或系统外激励系统响应设定f1.ume采集的源文件和数据下沉的位置,将数据采集到kafka集群中Ka1.'ka集群出现相应的数据功能看求数据采集例外以及相应处理调用的功能数据采集注绛和说明1.2.2数据存储函数函数类com.hbase.consumer用户类HbaseConsunier需求优先级高系统输入或系统外激励系统响应设置kafka消费主题,使用HBASE消费数据将kafka集群中的待数据存储到HBASE中功能需求数据存储例外以及相应处理调用的功能数据存储注释和说明1.3数据分析1.3.1数据分析函数函数类com.bigdata,ana1.ysis,runner用户类CountDurationRunner需求高优先级系筑输入或系统外激励系统响应配置源HBASE、目标MYSQ1.数据格式,配置清洗策略将HBASE数据经过分析后存储MySQ1.功能需求数据分析例外以及相应处理调用的功能数据分析注释和说明1.4可视化展示1.4.1 用户接口接口地址/hhrzkg/system/adain用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入用户名、寄码1.比对输入用户是否存在,并返回相应结果。2 .新增用户:3 .删除用户;4 .修改用户.接口地址hhrzkgsystemexpress用户类系统用户需求优先级高用户输入或系统外激励系统响应1.展示各地主要快递公司送件数占比情况。功能需求图形化展示各地主要快递公司送件数占比情况。例外以及相应处理调用的功能险种分析注春和说明1.4.5快递公司港口货量分析接口接口地址hhrzkgsystem/port用户类系统用户需求优先级高用户输入或系统外激励系统响应展示各主要快递公司港口货量占比情况。功能需求图形化展示各主要快递公司港口货量占比情况。例外以及相应处理调用的功能快递公司港口货量分析注释和说明1.4.6快件类型分析接口接口地址hhrzkgsystemtype用户类系统用户需求优先级高用户输入或系统外激励系统响应展示港口快件类型数量和占比情况。功能需求图形化展示展示港口快件类型数量和占比情况。例外以及相应处理调用的功能快件类型分析注释和说明1.4.7港口仓库分析接口接口地址hhrzkgsystemused用户类系统用户需求优先级高用户输入或系统外激励系统响应展示各主要快递港口仓库使用情况。功能需求图形化展示各主要快递港口仓库使用情况。例外以及相应处理调用的功能港口仓库分析汪春和说明1.4.8港口安全事故分析接口接口地址hhrzkgsystemsafe用户类系统用户需求优先级高用户输入或系统外激励系统响应展示历年各种港口安全事故数量和趋势情况。功能需求图形化展示历年各种港口安全事故数量和趋势情况。例外以及相应处理调用的功能港口安全事故分析注释和说明三、港口物流系统数据格式1.数值类型这些类型包括严格数值数据类型(INTEGer、sm1.1.int、decima1.和NUMERIC),以及近似数值数据类型(F1.OAT、REA1.和DOUB1.EPRECISION)0关键字INT是INTEGER的同义词,关键字DEC是DECIMA1.的同义词。BIT数据类型保存位字段值,并且支持MyISAM、MEMORY、InnoDB和BDB表。作为SQ1.标准的扩展,MySQ1.也支持整数类型T1.NYINTjiediumint和B1.GINTI)下面的表显示了需要的每个整数类型的存储和范围。表2数值类型表U1.mtT1.NY1.Nr1S傀(-128.127)<0.255)小整敦位Sma1.iint2b)s(3278.32787)(0.65535)大强敢依Mediumint3b>%(8388608.83886071(O.16777215)INT¾INTEGER4b)S(2147483Gt.2147侬647)<0.424972妁BKSINT8S国3(-9.223.372.036,854.775.808.9223372036»54775807(0.18446744073709551615)F1.OAT4b)5(3.4028234660«1.1753E÷381.175494351E-351ES8,3.402侬汴d故依38).0.(1.17549435138.3402823466351E.38)405E的DOUB1.Eb)三(1.797693134620.(2225073虫M攻3157E3O8-2.2250738585072014E-浮中软侦8585072014EOo8).30.1.W693134O.(2225073585078623157Et308)2014£300.17976931348623157E*M8)DECIMA1.时候修于M亢D侑侦依*于MMD的小取值Oecima1.imiDi.例UiJRM>D.为U*2古则为。*22 .日期和时间类型表示时间值的日期和时间类型为DATETIME.DATE、TIMESTAMP.TIME和YEARo每个时间类型有一个有效值范围和一个"零"值,当指定不合法的MySQ1.不能表示的值时使用"零"值。TIMESTAMP类型有专有的自动更新特性,将在后面描述。表3日期和时间类型表大小(by1.”)«DATE31COOOI01.*999912-31YYYYMM-DDTIME3838:59:59苗38:59:59*HHA1M5SH阿值或羚球W网YEAR1190V2155YYYY年价值DATETirZE100001-01OoqSoO,9999123123:5959YYYYMM-ODHHiMMSSHMIftiKMfftTIMESTAMP41970-01-01CO:OoXM>2038靖山时何足加2147483647步.北京时似J2O3S11911:14:070林圮油H醐2039年IJ1.1911凌80$1407YYYYMMDOHHMWSS双台日期和HfqW.HWtt3 .字符串类型字符串类型指CHAR、VARCHAR、BINARY、VARBINRY.B1.OB.TEXT.ENUM和SET。该节描述了这些类型如何工作以及如何在查询中使用这些类型。去4日期和附间类型枭CHAR0-255BqeS定长孑符申VARCHAR065535bytes受长字符不Tinyb1.ob0-255b)8不嫌过2554字符的二诲M字符理Tinytext0255S融短文本字栉小B1.OB0-65535二避鹿形式的长文本皎板TEXT065535b内6长文本皎剧MEDJUMB1.Oe01677721.5b>ts二进K格式的中等K慢文小数系MEDIUMTEXT1777215b>te中等K度久本软然1.0NGB1.0B042tM967295b)¾5二遐附式的极大文K1.ongtext0-42X967295S"3榄大文本皎炳四、港口物流系统数据库表结构1.表结构设计图图I表结构设计图