陕西电信宽带用户行为分析系统介绍材料.doc

陕西电信宽带用户行为分析系统介绍材料 南京信风网络科技有限公司2008年5月目 录一、软件产品介绍2第一部分 非法接入监控21.1 背景资料21.2 系统概要21.3 非法接入方法21.4 简要工作原理31.5 系统功能41.6 系统特点9第二部分 上网偏好分析102.1背景资料102.2系统概要102.3系统功能112.4系统特点13第三部分 WEB信息推送133.1 背景资料133.2 系统概要143.3 系统功能143.4 系统特点163.5成熟公益广告示例17第四部分 小带宽互联跟踪184.1 背景资料184.2 系统概要184.3 系统功能194.4 系统特点21第五部分 宽带消费资讯提醒225.1 背景资料225.2 系统概述225.3 系统功能225.4 系统特点24二、 成功案例25三、 相关说明材料263.1网站媒体材料26山东网通新技术打击宽带盗连 新增4万收费用户26重庆电信建宽带行为分析系统 打击多家庭共享273.2 运营商使用说明283.3相关资质材料293.4全国部分省份用户联系人30四、联系方式31 一、 软件产品介绍第一部分 非法接入监控1.1 背景资料数据业务中的宽带业务，是拉动电信业务增长的重要组成部分，由于目前宽带业务的计费主要还是采用计时长而不是计流量的方式，所以，一部分人利用宽带计费的这个缺陷，往往以个人的名义申请宽带而让黑网吧、企业使用，或者几户共用宽带而分摊费用，给电信运营商造成了巨大的经济损失，如果不尽快解决这些非法接入，将会有更多的人效仿而给电信运营商造成更大的损失。1.2 系统概要南京信风“非法接入监控”系统部署于电信骨干网旁，采用特有的分析方法，准确定位以个人名义申请宽带，实际却为网吧经营、公司经营或多个家庭共享宽带的情况，分析出宽带帐号与其所携带用户数之间的对应关系，便于电信运营商客户经理说服其到营业厅补办开户手续，并在必要的时候启动个性化拦截技术，阻止宽带非法接入用户对网络的访问。南京信风“非法接入监控”系统准确性极高，已为相关电信运营商，查获了大量的黑网吧、个人申请企业使用、以及多个家庭共用宽带的情况，为电信增收、进一步提高宽带安装率提供了必要的技术保障。1.3 非法接入方法在所有宽带非法接入用户中，以个人名义的身份申请宽带，为黑网吧、企业或其他家庭共用，最普遍采用的方式如下图所示，左图采用ADSL拨号，右图采用LAN连接，包括固定IP或动态分配IP、不认证、Web认证、PPPoE认证等各种情况。特别需要注意的是，部分中小运营商由于带宽不足，往往“借用”主运营商的专线用户的宽带，进行非法桥接，获得廉价带宽，再采用低价策略与主运营商展开竞争。1.4 简要工作原理检测宽带非法接入的常规方法有如下几种：l 标记法部分有害的监控系统，通过修改用户的IP数据报文，给所有的宽带用户“帖上标记”来进行检测。这种方法由于需要修改所有用户的IP数据，将损伤现有宽带网、大幅降低现有宽带网的可用性。l SNMP扫描法部分ADSL Modem有默认管理员口令及密码，并且SNMP的community都采用默认的public或private，可以得到其arp表而确定用户数。这种方法显然是一种“碰运气”、不全面的方法，同时不断地扫描，将损伤现有宽带网。l 判断IP_ID法对于Windows用户，由于其IP包头中的IP_ID将随着用户发送的IP包的数量增加而逐步增加，如果在某个时刻，发现某个源IP地址，如下图所示，有两段IP_ID在连续变化，则说明该帐号此时有两个用户在同时使用宽带。这种方法有一定的功效，但目前市场上已经出现可修改IP包的IP_ID的NAT设备，专门用于对付运营商的相关监控系统，仅使用这种方法的监控系统，很快将失去作用。南京信风“非法接入监控”系统，不对外发送任何扫描数据，不修改用户的任何IP报文，而是从网络第三层到第七层对数据进行仔细分析，特别分析了操作系统生产厂商的非公开特性，通过对用户各种特性的多次分析和校正，准确判断出每个帐号下携带的用户数量。在覆盖400多万宽带用户的实际监控中，无论共用NAT、共用Proxy、或分时段共享帐号上网，南京信风“非法接入监控”系统都能准确报告，并为相关电信运营商“挖掘”出大量的宽带新用户。高度准确是南京信风“非法接入监控”与其他友商系统相比较，显示出的最显著特征。1.5 系统功能南京信风“非法接入监控”系统，具备以下主要功能：（A）无害要求1、 系统不主动往宽带网用户发送任何扫描数据；2、 系统不修改正常使用宽带网的用户所发送和该接收到的数据包，不采用修改用户数据报文的“标记法”（这种方法将降低宽带网的可用性）；（B）检测功能1、 准确检测到多个用户共用一个帐号，利用NAT/Proxy同时上网；2、 准确检测到多个用户共用一个帐号，利用NAT/Proxy分时上网；3、 准确检测到多个用户共用一个帐号，利用可修改IP包IP_ID的设备上网；4、 对用户数的检测，不依赖于操作系统类型，如Windows、Linux及其他UNIX等；5、 当用户启动防火墙，或者使用BT、flashget、NetAnt等工具下载文件而产生大量TCP连接时，不会对系统检测的准确性造成影响；6、 系统检测的准确性要求大于95%，误判+漏判率小于5%；（C）拦截和警告功能1、 系统支持按不同的帐号或IP地址，实施不同的个性化拦截策略；2、 系统可以选择，按时间段进行拦截；3、 系统可以选择，只拦截http或拦截所有TCP；4、 系统可以选择随机拦截TCP或是拦截所有TCP；5、 系统可以选择，按事先定义的各种规则模板进行拦截；6、 系统可以选择，不考虑拖带数量强制性的进行拦截；7、 支持按事先设置警告的内容，在用户浏览网页时推送出警告页面；（D）统计和报表功能1、 对于宽带帐号用户，按上网帐号提交“帐号携带用户数”对应表关系报表；2、 对于专线用户，按专线账户名提交“帐号-携带用户数”对应关系报表；3、 提交非法接入帐号总数及其所携带的用户总数的变化图及比例图；4、 对于上述统计图表，可以按日、周、月等不同的时间段提供；5、 对于上述统计，可以曲线图或饼图显示，并可以生成Excel格式报表（E）其他功能1、 支持合法用户功能，确保它们不被拦截；2、 支持批量增加需要拦截或不能拦截的帐号，减少维护量；3、 支持对所监测到的帐号，进行查询、添加、删减功能；4、 支持非法用户的签约功能，根据签约数量自动封堵与解封；5、 支持拨号用户群组功能，需要批量统一定制封堵策略时，大大简化了人工操作；6、 系统为用户帐号预留了“备注”、“联系人”、“电话”、“地址”、“支付代码”等字段，提高系统自身的业务能力。 1.6 系统特点南京信风“非法接入监控”系统，采用密集计算、多机运行负荷分担工作方式，每个预处理单元设备实时处理3000 Mbps的流量，系统的特点如下：l 设计合理采用被动监听工作方式，不会主动向用户发出任何扫描报文，不会修改用户的任何正常上网数据，不对现有宽带网造成任何影响；l 高度准确从网络3层至7层进行综合分析，经过多级校正，准确识别每个帐号“携带”用户的数量；l 成熟稳定系统在多个省运营商得到长期应用，并广泛吸取了运营商的建议而增加了许多功能；l 抵御欺骗对于使用可修改IP包的IP_ID的NAT设备携带多个用户，南京信风“非法接入监控”系统仍然能准确检测并进行拦截。第二部分 上网偏好分析2.1背景资料上网偏好分析系统通过收集用户上网的具体应用来了解用户，发现潜在的商业价值。统计用户的其它网络应用也会更深层次的发现用户潜在的需求，获得潜在的商业机会，运营商网络将更有效的服务于市场经济下的商家，除了给用户提供最佳的网上冲浪体验，同时也将用户最关心的，最需要的产品广告直接送达用户。运营商除了直接给用户上网提供接入服务外，同时也通过分析用户的数据，更加了解用户，而这些数据又可以为商家营销产品提供了最权威的参照。把用户和商家紧密的联系在了一起，从而充份挖掘出网络的价值，创造出巨大的经济效益。2.2系统概要系统可以提供两种用户偏好数据：网站与应用协议。网站偏好可以自由设置，应用偏好目前系统支持56种不同的应用协议（包括各种主流网络游戏），仍然在不同升级完善中。用户所关心的网页内容会反映出用户的兴趣喜好，用户对某类商品信息的关注能准确发现用户的购买倾向，如汽车，手机，股票。此类信息是商家最为关注的，通过此系统获得的数据和“WEB推送系统配合”，给商家做非常体贴用户的商业广告，增加增值业务收入。用户喜欢什么样的网络游戏，喜欢从哪些网站去购买游戏点卡，都将在上网偏好分析系统里精确展示，运营商通过此系统可以得到热门游戏的客户信息，并配合南京信风web广告推送系统模块给用户推送运营商自办网上点卡广告，并引导用户通过此充值平台充值，以达到和游戏厂家共享利润的目的，通过和“WEB推送模块”的配合可以进一步打击非法点卡销售点，统一销售渠道，增加收入；2.3系统功能l 查询出一段时间内使用某种偏好应用的所有用户：l 查询出一段时间内使用某种偏好网站的所有用户：l 查询出一段时间内某个用户使用过哪些偏好：l 提供某几种偏好的对比统计图表：2.4系统特点该功能从应用和Web站点访问等多角度分析了用户的上网偏好，而不是仅仅从URL的统计来分析用户偏好，方便运营商挖掘特定偏好的用户群，以制定针对性的市场策略。第三部分 WEB信息推送3.1 背景资料WEB信息发布，目前主要依靠被动式发布，例如用户去看某个网页时，能看到在此页面上的信息。然而，作为宽带业务的提供者，电信运营商有时需要将一些重要的信息，例如网络割接通知、业务变更信息告知用户，需要“主动”式WEB信息推送系统来实现这些需求，有时还需要用它来推送商业广告。3.2 系统概要南京信风WEB信息推送系统实时监测用户的每个http请求，依照电信运营商事先确定的策略，对用户的http请求进行处理后，将其转向相关的URL，用户“被迫”看到相应的WEB信息。3.3 系统功能（A）WEB广告信息管理功能1. WEB广告信息提交：预览、提交，WEB广告信息进入“待审核”状态，设置广告推送次数，达到次数后自动不推送；2. WEB广告信息审核：管理人员确认后，系统对其生成数字签名，WEB广告信息的内容发生任何变化，系统将拒绝投放WEB广告信息；3. WEB广告信息审核结果，WEB广告信息将处于“未通过审核”、“通过审核”、“失效”等几种状态，避免WEB广告信息内容，由于某种原因被篡改之后，带来不可预测后果。（B）行为广告信息管理功能1. 行为广告分类：设置行为广告分类，为不同的分类设置相应的关键字、URL等触发条件。2. 行为广告管理：将行为广告分类与WEB广告信息梆定，当用户上网搜索相应关键字或访问某URL时，系统会推送相应的广告，达到精确投放效果。（C）用户及组群管理功能1. 组群管理：增加、删除、编辑用户组群，将用户分类；2. 用户管理：增加、删除用户（及IP地址），支持批量将用户（及IP地址）导入用户组群，支持将用户在不同的组群之间转移；3. 免投放用户管理：（批量）增加用户（及IP地址），这些用户（或IP地址），将不会收到推送的WEB广告信息内容；（D）WEB广告信息投放管理功能1. 对不同组群的用户，在其拨号上线后，系统检测到其发送http请求时，发送不同的WEB广告信息；2. 支持设置用户访问页面自动恢复时间；3. 支持根据用户在搜索引擎中键入的关键字推送不同的信息；4. 支持根据用户访问的URL推送不同的信息；5. 推送信息应强制用户看到，避免用户阻截；（E）统计功能：1. WEB广告信息投放统计：以WEB广告信息内容，统计出系统投放的情况，提供相应的报表；2. WEB广告信息到达设计：以WEB广告信息内容，统计出广告到达用户终端的情况，提供相应的报表；3. 群组投放统计：以用户类别，统计出所有WEB广告信息被投放的情况，提供相应的报表 ；4. 用户投放统计：以每个用户，统计出所有WEB广告信息被投放的情况，提供相应的报表 ；5. 对于每个用户，系统都提供详细的“WEB广告信息详单”，记录这个用户在什么时间被投递了哪些WEB广告信息。（F）分级分权限管理功能1. 分区分级管理：各地市公司管理自己的用户和WEB广告信息；省公司可以统一管理投递到全省用户的WEB广告信息；2. 分权限管理：普通管理员只有查看统计结果的权限，系统管理员除此之外还有设置的权限；3. 代理商功能：系统提供代理商功能界面，使广告代理商可以登录系统查看自己的广告推送情况。3.4 系统特点南京信风WEB信息推送系统，采用密集计算、多机运行负荷分担工作方式，每个预处理单元设备实时处理3000 Mbps的流量，系统的特点如下：1. 推送只针对用户HTTP访问网页时才进行推送，推送不会影响用户其它上网行为。2. 使用在HTTP包头内嵌入frame重定向方式，用户客户端无法屏蔽广告。3. 系统投资低廉，可直接部署在行为分析平台上，不改变现网的结构，不影响原有网络系统。3.5成熟公益广告示例第四部分 小带宽互联跟踪4.1 背景资料宽带收入作为固网运营商业务增收的主要增长点，目前受到他网竞争运营商的冲击，主要是因为他网竞争运营商，利用主运营商的用户线路，暗中“借”用主运营商的带宽，透传他网运营商的宽带数据，我们称这些被非法“借”用的带宽，为非法小带宽互联，也被称为“假接入、真互联”或“非法带宽批发”，目前主要网络运营商与其他竞争运营商大都采用网络流量结算费用，由于中国互联网上的资源，主要集中在国内几个主要网络运营商的IDC内，竞争运营商为节省结算费用，大量采用非法小带宽与主运营商互联。这种情况在国内多个省市普遍存在，但都没有一个很好的追踪监控手段。这种情况导致其他小运营商以很低的成本，利用非法获得的额外网路资源，提高了网络出口带宽，并反过来和主运营商竞争市场。另一方面，主要运营商不仅要面对这种不公平的竞争，而且还要为这些小运营商支付国际出口的流量结算费用。4.2 系统概要南京信风小带宽互联跟踪系统，通过网络应用模拟、协议数据分析等技术手段，准确定位竞争运营商在主运营商的省内的宽带接入点、甚至部分在外省的接入点，为主运营商打击非法小带宽互联提供了可靠的技术侦察手段，同时还可评估竞争运营商的宽带质量。南京信风小带宽互联跟踪系统已经协助部分省份查获大量非法小带宽互联线路，为运营商带来巨大收益，受到了电信总公司一致好评。4.3 系统功能（A） 终端管理功能1、终端管理功能：主动登记用户唯一终端号，机器识别码，它网宽带类型，联系人，及电话号码，终端注册时间等，并可集中管理终端的状态，删除和修改终端信息；2、数据加密：客户端和服务端的通信数据完全加密，以防止第三方窃听测试结果数据，从而破坏系统的正常运行；3、增强型终端唯一标识号：每个信任的测试终端都有第一次运行时生成的唯一标识，首次使用时需要服务段管理员开通，以保证终端及服务端的系统安全；4、终端登录时可选运营商类型：同一客户端可以对多个运营商网络进行测试跟踪，此功能可以灵活准确的区别结果数据，方便查询分析和发现可疑点；5、客户端“傻瓜”运行方式：·为了方便客户端的操作，尽可能不需要客户端做相关设置，管理端集中对客户端要布置任务；·可以定制客户端界面，使之能以“共享软件”的方式下发给各测试人员，隐藏软件本身功能，增加系统保密性。6、自动更新功能：由于各种游戏，证券软件客户端升级频繁，本系统客户端也具备自动升级功能，只要在管理机上放置最新版客户端，客户端启动时会自动检查更新并以新版本运行，保证最佳的跟踪效果，也方便今后的功能升级。（B） 系统管理功能1、IP地址库管理：定义不同IP地址或地址段所属的运营商,可以添加，修改和删除；2、跟踪路由地址管理：指定终端要做路由跟踪的IP列表，可做添加和删除操作；3、信息港URL管理：指定可返回终端IP地址的URL，探测用户实际使用的公网IP；4、测速URL地址管理：指定终端要测试网速的URL列表，测试指标为：数据包时延，打开URL时长，下载速率；5、地区管理功能：终端位置地区信息集中维护功能，可添加，编辑和禁用；6、它网名称管理：维护运营商名称信息，供客户端启动时选择，并作为判断可疑接入点的参照指标。（C）信息管理功能1、可疑接入点功能：从测试结果中分析并列出存在可疑点的条目，供比对排查。在详细信息中可疑点交界处进行标红，方便定位和查看；2、终端报告功能：列出终端测试结果的完整信息，地区，网络环境，测试人，终端IP，所测目标IP，上报时间，详细信息中列出具体条目的完整信息，包含终端完整信息，终端到目标的逐跳路由，以及服务端到终端的逐跳路由；3、信息港报告功能：列出信息港返回的IP，通过核实此IP的归属运营商来发现可疑接入点；4、URL测试报告功能：列出客户终端访问各URL的时延，打开时间，下载速率等测试值，比较各网络运行商的宽带质量，从而优化自身的网络。4.4 系统特点南京信风小宽带路由跟踪系统采取了CS架构，通过部署客户端，将运行结果上报给服务器的方式工作，极高的准确性并且设计了严格的安全保护。系统特点如下：1. 客户端自动上报结果，节省大量人力资源。2. 通知多种方式获取终端IP，路由信息。3. 严格的客户端身份唯一机制，保证系统运行的安全。第五部分 宽带消费资讯提醒5.1 背景资料现今电信运营商的主推业务（如E8套餐）采取了按包时长计费方式，将大部分原来无限时宽带用户转为限时业务套餐（如每月包时长150小时）。由于不同的用户上网习惯以及各种因素，造成有些用户常常超过时长，被收取了额外较为昂贵的宽带费用；或者有些用户使用网络时间明显缩小。这些问题通常都是电信运营商不希望看到的，最和谐的方式就是通过一种有效地方法能够提醒用户上网的当月消费时长、流量等，让用户自己能够进行控制上网时间或者可以去放心大胆地享受在高速互联网上冲浪的乐趣。5.2 系统概述本系统模块可以实现用户拨号上网之后，第一次访问页面后自动向用户终端推送一个宽带提醒页面，在友好的界面上显示了该用户从当月使用带宽的时长与流量。系统本身只具有推送条件判断，施行推送动作，维护提醒页面等功能。被提醒用户的时长与流量等信息数据，需要通过与运营商相关系统做接口来获取。5.3 系统功能1. 系统通过与运营商相关系统做接口，按一定的周期获取需要提醒的用户名单与提醒信息（时长、流量等）。2. 系统通过项目管理功能将用户账号、提醒信息与推送作业进行梆定，来进行推送控制。3. 系统支持为每个推送作业设置详细的时间周期，包括小时、天、周、月等。4. 系统支持设置免推送日，便于节假日等特殊时间的策略调整。5. 系统支持为不同的推送作业设置不同的提醒页面播放服务器，使用户被定向访问提醒页面时实现负载均衡的效果。5.4 系统特点本系统提供了丰富的接口，不受业务与功能上的限制。只要运营商相关接口提供信息数据，就可以实现各自不同的业务。（如：宽带包年到期提醒、宽带欠费提醒、宽带业务推荐、地域网络割接等等）并且本系统推送的信息，比较符合用户的实际需要，不容易受到用户的投诉。因此利用页面上的空间，添加商业广告增加运营收入也不会受到大量的用户投诉。二、 成功案例目前南京信风的“宽带用户行为分析系统”已为十五个省级主流电信运营商提供服务。在国内“宽带用户行为分析系统”产品市场上，信风占据90%以上的市场份额，监控的网络规模超过3000G，覆盖互联网用户数2500多万。三、 相关说明材料3.1网站媒体材料 山东网通新技术打击宽带盗连 新增4万收费用户 2007年08月28日 09:54  中国信息产业网-人民邮电报本报讯 为解决长期以来宽带客户私接盗连严重等问题，山东网通从完善技术手段入手，在全省启动了宽带用户行为分析系统。在该系统的有力支撑下，截至目前，已成功将4.25万户非法用户转为收费用户，为宽带业务的健康发展起到了强有力的支撑。该系统的上线，有效地抑制了非法IP电话猖獗的势头，使全省非法IP长途电话总时长大幅度下降。同时，在不影响宽带用户P2P应用的前提下，对P2P应用流量进行了有效控制，明显改善了IDC用户的网络质量。据了解，由于大多数宽带业务系基于包月形式开展，部分用户利用宽带计费技术的不足非法接入使用宽带业务。他们通过在一户合法宽带用户中私接路由器，为其邻近居民提供宽带接入，逃避宽带连接费和月使用费，从而形成多个用户使用宽带服务而只缴纳一户使用费的局面。更为严重的是，个别用户利用路由器为附近居民提供宽带接入谋取私利、非法经营事件，直接导致了黑网吧、非法运营等问题的发生，在社会上造成恶劣影响，制约了宽带业务的持续健康发展。据不完全统计，全省1拖2以上的宽带拨号账号下连非法用户近30万户，给企业造成了大量的收入损失。针对宽带用户非法接入这一情况，山东网通为了从技术手段上实现对宽带非法接入用户的监测和干扰，去年底进行了全省宽带用户行为分析系统的建设，并于日前顺利通过系统初验。该系统具备非法VOIP监控、P2P流量监控和非法私接监控等功能，同时具有控制用户共享数量、向发现的非法宽带接入用户实时推送警告页面及终止超出规定共享数的接入用户使用等功能。宽带用户行为分析系统的使用，从技术手段上实现了对宽带私接用户的识别、监测和干扰，为市场工作人员采取针对性的营销措施、促进非法宽带用户转变为正常收费用户打下了良好的基础。宽带用户行为分析系统投入使用后，山东网通又启动了宽带非法用户清理转化活动，从对宽带非法用户的监测、核实、屏蔽以及入网，制定了详细的工作步骤，进一步加大用户入网的工作力度。(董利伟 丁吉涛 人民邮电报) 重庆电信建宽带行为分析系统 打击多家庭共享 2007年09月26日 10:36  中国信息产业网-人民邮电报本报讯 日前，中国电信重庆公司建成了宽带用户行为分析系统，并于近日在石坪桥电信培训中心举办了针对各属地分公司的IPUSH使用培训，以便各分公司相关人员更加熟练地操作和应用该系统功能，为宽带业务顺利发展保驾护航。电脑普及率的提高，促进了宽带业务的发展。与此同时，出现的“多家庭共享”、“假家庭真政企”、“私建交换中心”等私接共享行为，在一定程度上影响着宽带业务的正常经营，对重庆电信宽带收入造成一定损失。对此，重庆电信有针对性地建成了宽带用户行为分析系统(即IPUSH系统)。该系统可监控宽带用户的各类上网行为，通过分析并采取一些策略，为宽带业务顺利发展保驾护航。据了解，该系统是支撑前端市场营销的强有力武器，各分公司可充分运用系统的分析结果，开展针对性营销，引导用户上网行为，实现宽带业务的良性发展。数据通信中心作为宽带用户行为分析系统的支撑单位，在应用中不断完善系统功能，并积极推进各属地分公司应用该系统。据了解，该系统虽然应用不久，但作用十分明显，既规范了市场秩序，又维护了企业自身权益。(记者 李中朝 通讯员 黄伟 人民邮电报) 3.2 运营商使用说明3.3相关资质材料3.4全国部分省份用户联系人安徽电信 朱海波0551-5519933云南电信 夏惠民0871-6621888 胡迅0871-6611823山东网通 刘立刚0531-86612636四川电信 蒋伟028-88043470江苏电信 程青松025-86588936四、联系方式公司名称：南京信风网络科技有限公司URL： 地址： 江苏省南京市龙蟠中路168号 江苏软件园 50号楼东206邮政编码：210002电话： 025-84821888-822传真： 025-84818052联系人： 刘长城移动电话：13770594163Email： lcc