位置:成果数据库 > 期刊 > 期刊详情页
一种爬虫监控系统的设计与实现
  • ISSN号:1008-5599
  • 期刊名称:《电信工程技术与标准化》
  • 时间:0
  • 分类:TN915[电子电信—通信与信息系统;电子电信—信息与通信工程]
  • 作者机构:[1]北京邮电大学网络与交换技术国家重点实验室,北京100876, [2]东信北邮信息技术有限公司,北京100191
  • 相关基金:国家973计划项目(编号:2013CB329102);国家自然科学基金资助项目(No.61372120,61271019,61101119,61121001);长江学者和创新团队发展计划资助(编号:IRT1049);教育部科学技术研究重点(重大)项目资助(编号:MCM20130310);北京高等学校青年英才计划项目(编号:YETP0473)
中文摘要:

随着互联网爆炸式的发展,网络爬虫的重要性越来越重要.一个搜索引擎搜索结果的数量以及质量在一定程度上取决于网络爬虫爬取结果的质量,而如何能更好的组织这些爬虫也成了一件能影响爬虫效率的事情.随着在服务器上部署爬虫的增加,对一个能够有效管理爬虫监控系统的需求也就越来越紧迫.本文对爬虫监控系统的设计和实现将会给爬虫的管理带来很大的方便.

英文摘要:

With the explosive growth of Internet, the importance of web crawler is becoming increasingly important.The quantity and quality of search results of a search engine is depends to some extent on the quality ofweb crawler's crawling results, and how to organize these crawlers better have become a things can affectthe effi ciency of crawler. With the increase of crawlers deployed on the server, the need for an effectivemanagement of monitoring system is more and more urgent. In this paper, the design and implementationof reptile monitoring system will bring great convenience to the crawler's management.

同期刊论文项目
期刊论文 183 会议论文 167 获奖 6 著作 1
同项目期刊论文
期刊信息
  • 《电信工程技术与标准化》
  • 主管单位:中国移动通信集团公司
  • 主办单位:中国移动通信集团设计院有限公司
  • 主编:梅海涛
  • 地址:北京市海淀区丹棱街甲16号302室
  • 邮编:100080
  • 邮箱:tetas@cmdi.chinamobile.com
  • 电话:010-52696688-7308/7310
  • 国际标准刊号:ISSN:1008-5599
  • 国内统一刊号:ISSN:11-4017/TN
  • 邮发代号:82-942
  • 获奖情况:
  • 国内外数据库收录:
  • 被引量:4245