河南省广电局信息网络视听节目传播监管中心河南省信息网络视听节目监控系统项目（A包）（一期）项目技术要求公示

各潜在供应商：

受河南省广电局信息网络视听节目传播监管中心的委托，河南广电招标有

限公司就河南省信息网络视听节目监控系统项目（A包）（一期）进行国内公开招标，现将招标项目技术要求网上公示，(华中招标网www.hzzhaobiao.com整理)请各潜在供应商对公示的内容是否有倾向性、歧视性等内容提出有关意见和建议。

所有意见应于 2009年12月31日下午5：30时前以书面形式(加盖单位公章)派专人递交至河南广电招标有限公司（郑州市经五路2号），逾期不予受理。

联 系 人：尼保胜、秦凯

电    话：0371-65887849

传    真：0371-65993815

招标代理：河南广电招标有限公司

日    期：二〇〇九年十二月二十八日

附件：技术参数

河南省信息网络视听节目监控系统项目（A包）（一期）

一  项目概况
河南省广电局信息网络视听节目传播监管中心拟建的信息网络视听节目监控系统（一期）项目，主要用于对互联网视听节目传播情况的监控，(华中招标网www.hzzhaobiao.com整理)需要承担的工作任务包括：互联网视听节目的实时搜索、分析和研判；互联网视听节目网站的动态监控；专项任务的紧急处理和应对；违规视听节目的下载取证和自动分类；热点视听节目传播趋势的分析和预警；日常监控情况的编报统计；系统的综合管理和互联网视听节目网站的地图定位等。系统软件在设计上应采用模块化结构，支持分布式处理，具有良好的可扩展性，技术成熟，稳定可靠，实用高效，操作便捷，具备24小时不间断的扫描河南省辖区内网站，并能够从中及时发现视听节目网站、视听节目和传播源的能力，从而实现对互联网视听节目传播主体、传播内容和传播活动的全面监管

互联网视听节目监控系统项目建设完成后，可以全面监控河南省辖区内互联网站视听节目的传播情况，及时发现网上传播的违规视听节目并进行定位、下载和取证，动态掌握热点节目、热点网站的排名情况，同时全面、完整、翔实地为监管部门提供日常监控数据和信息。

二  设计原则
1、可扩展性

保证系统功能齐全、结构清晰、扩展灵活，支持系统软、硬件的升级和扩充。所提供的互联网视听节目监控系统软件必须具有开放性，当招标方需进行系统升级和二次开发时，投标方必须提供相应技术支持，开放相应的接口协议，数据格式等，便于新功能模块的编译后续嵌入与测试。

2、实用性

能够为不同权限的用户提供良好的人机对话界面，做到简便、实用、易配置、易操作、易维护。

3、先进性

投标人应独立拥有互联网视听节目监控软件的知识产权，系统设计应采用领先、成熟的技术，满足互联网视听节目搜索、识别、分析、研判等基本功能需求。

4、安全性

系统应严格遵照国家有关法规和标准进行设计，符合国家和行业技术标准，符合国家有关安全和保密工作要求。系统具有较强的抗攻击、防破坏能力，具备完善、可靠的系统访问权限控制机制，能够保证数据传输的安全和效率。

5、可靠性

系统必须具有完善的自动备份和恢复功能，安全日志远行记录功能，具有较强的容错、检错、纠错能力，能够有效防范系统崩溃，保证每天24小时的连续正常工作。

6、高效性

系统应采取必要方法，提高系统各个环节的响应速度，减少用户的等待时间，从而尽早发现有害信息，以便监管部门及时采取有效处理措施，恢复重启周期短。

7、可管理性

系统必须对业务系统、网络设备和注册用户进行统一管理，易于操作，便于管理，维护方便。

8、关于系统的监控范围

为确保监控任务的全面性和完整性，监控系统软件应按照如下原则确定监管对象：一是网站服务器IP地址在河南省辖区内的互联网站；二是网站ICP备案地址在河南省辖区内的互联网站；三是网站内容具有典型河南地域特征的互联网站。

9、关于投标方实力

投标方必须具有强大的软件研发能力和丰富的系统集成经验，并且在近年内有完成省级以上互联网节目监控系统建设项目的成功案例。

三  功能需求
根据目前对互联网视听节目日常监管工作的要求，为实现监管工作意图，系统应具备以下基本功能：

（一）视听节目网站搜索及信息采集功能

利用专门针对互联网视听节目搜索开发的网络爬虫程序，自动沿着互联网上任意网页中的URL链接爬到其它网页，重复这过程，并把爬过的所有网页收集到服务器中，同时提取网页所在URL、文本关键词、音视频特征信息等，实现对互联网视听节目网站及节目信息的自动搜索和发现。

该部分功能重点包括三个方面：一是能够实现对监管区域内网站的全网搜索；二是能够及时发现其中的视听节目网站（准确提取网站的URL）；三是能够准确高效抓取含有视听节目信息的网页。该部分功能主要完成对以下5个目标的监控：

1、对未经审批视听节目网站的监控：系统可以对河南省辖区内未经审批的网站实施相应的监控，及时发现未经审批视听节目网站的数量、名称、域名、IP地址以及节目列表、url、疑似有害节目情况等信息。可以按照不同的分类标准对相关网站进行分类，对获得的网站信息进行自动排重，并为实现各种查询功能建立相应的索引。

2、对已经审批视听节目网站的监控：系统可以对已经审批的视听节目网站传播视听节目情况进行的自动监控跟踪，并对有关视听节目网页进行实时增量抓取，及时发现其中传播的违法违规视听节目的具体情况，并为实现各种查询功能建立相应的索引。

3、重点网站监控功能：重点网站是指系统预先设定的，在河南省辖区内具有较大影响力和传播力的网站。系统能够对重点监控的网站进行内容比对、网站分类、站点信息同步、人工核实、网站内容的自动跟踪，及时发现其中传播的违法违规视听节目的具体情况，同时通过针对音视频节目的抓取引擎，对含有音视频节目的网页进行主动发现、采集和保存。并为实现各种查询功能建立相应的索引。

4、专项任务：专项任务是指受广电总局等有关部门指派，对个别社会危害大、影响恶劣的视听节目采取的专项清理任务和行动，具有较强的针对性、时效性、战役性的特点。完成专项任务，需要系统能够按照用户的监管要求制定专门的监控策略，按照即时搜索、专项任务优先的原则，灵活配置和调度专项搜索任务，集中调拨系统资源对专项任务涉及的领域或节目进行搜索和识别，从而达到对专项任务监控对象有效监管的目的。

5、P2P网站的监控：能够快速准确发现河南省辖区内重点BT、eDonkey等P2P下载种子发布网站，抓取网站域名、IP地址、ICP备案信息、联系人、联系方式及服务器所在地理位置等信息；能够对主要P2P文件共享网站上的种子及所在网页进行全面、周期性搜索和下载，发现共享的视听节目文件,并进行定位和传播跟踪，统计网站相关信息和视听节目文件资源信息；能够及时获取每个种子发布网站的种子列表、种子总数、每日新增视听节目种子数及每个种子下载人数，并对视听节目种子热度排名每天进行更新，对疑似违规、有害节目进行报警、完整下载取证。

6、播客网站的监控：能够及时自动发现新的播客网站，并对播客网站的域名、IP地址、备案信息、联系地址等基本信息进行管理；能够及时自动发现播客网站新增的视听节目，按照设定的周期自动提供每个网站的热点节目及其传播动态，对播客网站上的节目按频道（栏目）类别进行分类，对频道中用户关心的重点节目及其传播演变趋势进行重点跟踪；能够根据预先设定的任务，完整下载反动、淫秽、色情、暴力、恶搞等有害视听节目，并详细记录播客网站的违规情况。

（二）内容分析、研判、统计功能

1、内容分析：能够综合利用文本信息抽取、视频关键帧提取、伴音识别等手段，对采集的数据进行数据分析、规范与整理，得到相应的文本摘要和媒体特征信息并建立相应索引。

2、节目归类：在内容分析的基础上，根据预定义的关键字、视音频样例、图片等节目特征信息，实现节目的自动识别、排重、分类和聚类，自动建立有序分类的视音频节目数据库，为监管信息的查询、统计提供基础数据。

3、违规节目的下载取证：一是能够按照预先配置的关键字、视音频样例、图片等节目特征信息，自动完成违规音视频节目的研判、下载和录制，并在设定的时间范围内在本地保存音视频节目数据，确保即使在网站删除视频内容或网站无法访问的情况下也能完成证据的保全。二是能够对系统发现的疑似违规节目进行识别管理、人工审核和手动下载。三是能够对所有下载节目进行镜头分割，抽取关键帧生成概要图，方便节目信息查询，提高人工审核的工作效能。四是能够提供基于本地保存的视频播放服务，方便用户的日常监管和节目审核。

4、热点及敏感话题的分析与跟踪：能够对已分类节目进行数据挖掘，实现热点话题和敏感话题的自动识别，提供重大事件的自动预警。系统可根据抓取节目的点击数和回复数进行“三天内抓取节目”、“一周内抓取节目”、“一月内抓取”、“全部抓取节目”进行排名。能够自动锁定互联网热点话题，并对话题进行持续跟踪，显示其传播规律和范围。

对于播客网站的定制开发：能够通过对播客发布者发布的视听节目内容是否违规、违规严重程度、违规数量、节目发布活跃程度进行统计，建立播客发布者黑名单和播客网站黑名单，并每日更新排名情况。同时能够通过传真、邮件、短信等多种方式，对违规播客发布者进行提示预警，对发布节目情况进行重点跟踪。

（三）数据库管理功能

主要功能是对采集到的数据进行合理的组织与存储。在数据存储层，系统将综合利用文件系统和数据库系统对数据进行有效的存储管理，采用分布式计算的办法，实现各个子系统内部和子系统之间的不同节点上的对象调用。能够对网站、网页、视音频节目等对象的基本信息和进一步分析出的信息进行管理，灵活实现数据的迁移、备份和清洗等。同时数据存储层还包含有储存河南省内网站IP地址资源的视听节目源定位库，便于系统能够按照指定的监控范围实施有效监管。

根据工作需求，数据存储层拟选用目前较为成熟的数据库管理系统Oracle 10G，磁盘阵列存储空间约为50T。

（四）日常管理功能

1、信息检索与统计：能够以音视频节目数据库为基础，提供友好的人机界面，建立包含关键字、视频样例、音频片断等在内的多模态检索方式，实现对各类信息综合检索功能。通过对音视频节目点击率、评论数、发布时间等信息的采集与排序，对视听节目进行节目类别统计、热门信息统计、最新节目统计、用户关注度统计等基于不同主题的统计，并且以报表、饼图等多种灵活的表现形式进行显示，以便于监管部门及时掌握视听节目的传播趋势与动态。

2、报表编制：能够对系统的整体数据进行统计形成日报、周报、月报，对网站和节目的地理分布进行统计，对有害和热点节目的变化趋势进行图形展示。

3、系统管理：一是能够开放式、灵活性地对系统参数进行配置管理。可以对网络爬虫的后台程序所需的关键词进行设置，以便能更准确的搜索播客节目；可以对网站、节目类别以及P2P种子发布者、播主黑名单等进行增添、修改、删除，使系统能够按照监管部门设定的类别进行分类检索。二是能够实时对系统设备运行状况进行监控。通过网络拓扑图将系统各个服务器展现给用户，用户可直观看到服务器信息，如：连接状态、IP等。对于断网或者运行异常的服务器，通过网络拓扑结构可直接进行报警。 能够对各服务器的系统运行情况进行监控，同时对服务器物理参数的使用情况如CPU型号、IP地址、CPU使用率、内存大小及使用率、磁盘空间及使用率等信息进行监控。三是能够实施有效的权限管理。能够按照人员的级别，赋予相应的资源使用和功能模块操作权限。

4、地图定位：系统可根据网站IP地址对网站地理地址进行定位，并在GIS地图上进行标注，地图可以自由拖动和缩放，并提供根据所属城市、网站名称、网站URL进行查询。

四  系统主要性能指标
（一）网页抓取性能指标

1、支持分布式多机并行/协作；

2、支持URL的排重和格式归一化处理；

3、支持URL的优先级处理；

4、支持对动态网页的分析抓取；

5、支持对监管对象的动态刷新；

6、支持cookie存储与管理。

7、并发连接数：单机不少于1000。

8、速度：单机不低于3GB每小时，多机接近线性增长，增长率不低于0.8N，N为机器数量。

9、覆盖度：对于指定需要抓取范围内的网站遗漏率不超过3%，网页遗漏率不超过6%。

10、去重度：保存下来的网页重复度小于3%(特指同一个网页，从不同连接指向。不是指多个拷贝的情况)。

11、存储容量：系统可以管理的数据量不小于50T，网页数不低于15亿，网站数不低于15万。

（二）基于网页文本信息的内容检索性能指标

1、具备对网页文本信息内容的全文检索能力；

2、支持索引压缩技术；

3、支持实时大规模的数据检索需求，具有良好的安全性、可靠性、稳定性；

4、检索体系结构具有良好的可扩展性；

5、支持用户多方面、多层次的检索需求。

  6、支持Windows和Linux平台。

7、支持互联网上主流的文档格式和编码方式。

8、索引建立速度: 每小时至少可以对3GB的数据建立索引。

9、索引数据容量：系统可以管理的数据量不小于50T，网页数不低于15亿。

10、索引膨胀率：不超过0.5。

11、检索速度（响应时间）：正常负载下不超过0.7秒，高负载情况下不超过2秒。

12、检索并发用户数：不少于100.

（三）视频静态图象摘要自动生成性能指标

1、支持互联网上主流的视频文件格式和编码方式；

2、能够较为快速准确地把视频切分为镜头，同时生成视频的静态摘要，并且建立镜头与摘要的联系；

3、静态摘要便于用户浏览、快速把握视频的总体内容；

4、通过摘要可以快速访问特定镜头，便于用户进一步仔细查看内容细节。

5、支持Windows和Linux平台；

6、实时生成摘要，即1小时的视频在一小时内处理完毕（可后台自动处理，无须人工监控）；

7、镜头的划分和关键帧尽量准确。

（四）P2P协议分析性能指标

1、能够对主要P2P文件共享网站上的种子及所在网页进行全面、周期性搜索和下载，发现共享的视听节目文件,并进行定位和跟踪，统计网站相关信息和视听节目文件资源信息。

2、能够对每个种子发布网站进行实时监控，及时获得其视听节目分类及种子列表、种子总数、每日新增视听节目种子数及每个种子下载人数。

3、能够对视听节目种子热度排名每天进行更新。

4、能够对疑似违规、有害节目进行报警、完整下载取证。对下载完成的视听节目文件可根据镜头分割进行抽取关键帧，并且可根据关键帧融合成视频概要全景图。

5、按照给定名称模糊检索对应种子。

6、对给定种子，能够及时获取发布者（视听节目源）信息，包括IP地址、地理位置等。

7、支持BT、EMULE、迅雷等主流的P2P协议。

（五）播客网站分析跟踪技术指标

1、能够及时发现播客网站新增的视听节目，并对疑似违规视听节目进行下载取证，单个网站搜索周期≤1小时。

2、能够对播客网站传播的热点话题、热点新闻进行动态跟踪和预警，对目标视听节目的统计、分析周期≤1小时。

3、能够按照监管部门设定的监控周期，分别对河南省辖区内所有播客网站和各个播客网站的视听节目传播情况进行统计、分析和排名。

4、能够分别对河南省辖区内所有播客网站和各个播客网站传播的视听节目内容进行自动聚类，并对指定内容的视听节目进行动态跟踪和预警，对相同内容的视听节目聚类率≥90%。

（六）基本信息管理技术性能指标

1、具备友好的人机交互界面，界面实现上不仅具有文本形式的信息，还应当有图片、视频等形式的查询结果信息；

2、Web服务器端应用程序可以为任何标准化的客户端Web浏览软件提供访问接口；

3、数据库应用系统可以为任何具有数据库访问接口的服务器端应用开发软件提供访问接口。

4、采用标准的数据库语言设计数据库应用系统

5、Web服务器端应用程序须具备良好的可移植性、可扩展性。

6、Web服务器在10个并发连接数的情况下，简单查询的响应时间在2秒以内，复杂查询的响应时间在10秒以内。

（七）数据库管理性能指标

 1、  数据库管理软件采用Orcale 10g，支持25用户以上。

 2、  基于标准数据库语言的数据库系统的查询、维护等操作。

 3、具有定期对数据进行自动备份和导出功能。

 4、系统定期维护的基本周期为1年；

 5、基本信息的查询响应时间小于1秒。

五  系统集成方案要求
     根据互联网视听节目监管工作的特点，投标人须提供有效技术集成方案和措施，搭建安全适用、性能优良、运行高效、可扩展性强的硬件支撑环境，防范外部入侵和攻击，保证监管系统的运行效率和安全性。所需的硬件设备（包括服务器、交换机、路由器、防火墙、磁盘存储阵列、监看终端等）均应为市场通用产品。投标人应根据系统需求和软件功能，合理配置网络搜索服务器、分析服务器、数据库服务器、流媒体服务器、WEB服务器、交换机、路由器、防火墙、磁盘存储阵列、监看终端等硬件的数量及有关性能参数。

六 其它
    1、投标人必须提供投标软件所需的硬件支撑环境和硬件配置明细，否则将被视为无效投标。

    2、中标人负责系统软、硬件的整体集成。

    3、中标人应对招标人进行二次开发和系统扩容升级时所需开放的源程序、编译环境等作出必要的书面说明和承诺。

    4、投标人可以在评标现场演示其投标产品的功能和特点，时间限制在20分钟以内。

七  产品清单