使用ASP.NET方法减少网络爬虫故障

中文译文
使用ASP.NET方法减少网络爬虫故障(中文3800字,英文2000字)
当前的搜索引擎将网页数据从一个网页传输到另一个网页。它们在以中央服务器管理员全部信息为核心的客户服务器框架。一个网络爬虫就是一个截取网络上的信息并且将信息传送给处理器在更远出的搜索引擎的程序。人们发现最大的故障大约百分之四十点一是由于网络爬虫。已近提交的方案表明使用域名网页和http获取要求机制和使用asp.net时，网络爬虫是如何减少网络故障。

英文原文
An Approach to Reduce Web Crawler Traffic Using Asp.Net
Now days search engine transfers the web data from one place to another. They work on client server architecture where the central server manages all the information. A web crawler is a program that extracts the information over the web and sends it to the search engine for further processing. It is found that maximum traffic (approximately 40.1%) is due to the web crawler.  The proposed scheme shows how web crawler can reduce the traffic using Dynamic web page and HTTP GET request using asp.net.