目前,互联网上反动、迷信和色情等非法内容泛滥,严重污染了网络环境。针对这种严峻的形势,政府推出了一系列监管和打击手段,对网络非法内容进行控制和打击。这些措施在净化网络环境、创造和谐社会方面,起到了巨大的作用。无论是电信运营商、政府、教育行业还是企业事业单位,由于缺乏有效的网络内容保护手段,因此经常受到各种不良信息的侵害,承受了巨大的损失。为了应对这种现状,配合政府达到建立和谐网络的目的,减少不良信息对于网络环境的侵害,我们提供了网清网络内容监控系统。
网清网络内容监控系统采用了精心选择的搜索算法,能够高速有效的检出网站中的不良信息。对于检出的不良信息,能够根据要求,进行屏蔽、替换,并且向管理人员提供报警信息以及统计信息。
采用网清网络内容监控系统,可以极大的简化网络内容管理工作,能够使用最小的代价造就一个纯净的网络环境。
网清网络内容监控系统,是新一代的网络内容智能监控系统。网清首创的“语义关联深度搜索算法引擎”达到了检索精度和性能的最优化平衡,针对数据中心的WEB服务器集群提供了高效和全面的内容监控手段。
网清采用在机的内容过滤方式,不仅可以屏蔽不良信息,而且可以随时对检出的不良网站进行关停控制,以防为主,防治结合,达到了“监”与“控”的完美结合。
网清采用了先进的集中管理方式,关键词发布、系统升级等任务全部实现了自动化,使内容监控任务变得无比轻松。
2.1 网页过滤
关键词过滤、记录、拦截、替换、自动关停网站
丰富的统计和告警功能
高速搜索流入流出内容,进行替换、拦截、记录和自动关停违规网站。
提供关键词、网站、以及访问IP的统计图表,清晰而且直观。
其他过滤软件对于空格,乱码等符号隔开的关键词束手无策,而网清可以延展搜索深度,决不放过“法**轮**大**法”之类故意混入符号的内容。同时,也能有效防止“黑色魔力”之类的正常词汇因为设置了关键词“色魔”而被误检。
对于被禁止访问的关键词,网站,来源IP等,一旦检出则自动产生一条动态规则,而不是每次都重复检查,系统效率得到了极大优化。
自适应GBK,BIG5,UTF-8编码格式,自动转换关键词编码,无需重复设置。
运行效率高
反复高度优化的算法,比一般的AC算法效率至少高出20%。
2.2 图像视频识别
分析扫描磁盘文件,检出淫秽色情内容,按照可疑程度进行分级
智能判别各网站可能含有不良内容的程度和可能性,进行统计和报警
实时监控磁盘文件中含有的图像和视频文件,通过独有的智能识别引擎,自动准确判别淫秽色情图像和视频文件。
多级组合神经网络和向量机分类器,进行多级输出,符合人类模糊判别的特点
全面超越简单的人体肤色判别,结合轮廓和局部提取体征
多达45个特征点综合判别,给出一级、二级、三级疑似结果
具备自学习机制,在经过大量样本训练之后,系统越来越聪明
平均分析速度:>= 50张/秒/CPU
色情图片识别准确率:>80%
正常图片误判率:<2%
2.3 Web安全防护
防SQL注入
自动禁止HTTP GET/POST变量中的主要SQL关键词,防止SQL注入威胁web应用
防溢出
限制HTTP访问的变量长度,防止缓冲区溢出的安全威胁。
防IIS目录解析漏洞
防止诸如test.asp/这样的目录被解析为ASP程序。
文件类型控制
设置特定后缀直接从web上访问以保护.mdb这样的数据库文件被非法下载
防盗链
禁止图片这样的文件被非法盗链接。
自动检查备案
自动定期检查服务器上的网站是否备案,是否准确有效
2.4 性能监控
服务器资源监控:CPU、内存、流量、安装软件等
3.1 集内容监控、性能监控、Web安全防护功能于一身
3.2 智能模糊分析
编码格式范围广:
自适应GBK,GB2312,BIG5,UTF-8等多种编码格式,自动转换关键词编码,无需重复设置。
防止恶意跳过和误检:
其他过滤软件对于空格,乱码等符号隔开的关键词束手无策,而网清可以延展搜索深度,决不放过“法**轮**大**法”之
类故意混入符号的内容。同时,也能有效防止“黑色魔力”之类的正常词汇因为设置了关键词“色魔”而被误检。
设置免检范围:
对特定网站可以放入免检范围,对于此类网站的内容可以直接放行。
自动产生动态规则:
对于被禁止访问的关键词,网站,来源IP等,一旦检出则自动产生一条动态规则,而不是每次都重复检查,系统效率得到
了极大优化。
3.3 运行效率高
在推荐配置的测试环境下, 1万个请求耗时6.191406秒,20万个访问结束耗时127.597656秒,平均0.64ms左右处理完一
个请求,用时和空载时差不多,用户访问根本体验不到差别;20万个并发请求CPU负载也不会超过40%;在相同关键词数
量情况下,网清算法比通用AC算法至少快20%。
3.4 优越的管理方式,适用大型网络
集中管理:
集中控制管理,不仅能方便地进行关键词设定和监控服务器性能,而且,因为集中统计、集中对比,所以能更全面统计各
关键词的命中率,对于不良网站也能更快地检出。
兼顾特殊需求:
主控服务器在管理上也兼顾了管理员对于特殊服务器,特殊网站的设置需求,对于集中管理下的各个服务器可以单独设置
,统计时也可以选择需要查看的服务器进行单独统计。