=代 码 下 载 > Asp.net > Ajax WebSpider网络爬虫=
Ajax WebSpider网络爬虫
演示示例无演示示例
所属TagAsp.net
文件类型那个
运行环境C#
推荐指数
软件大小7.58KB
整理时间2010-7-27 14:27:50
下载文件保存
软件介绍  传统意义上的网络爬虫是不解析JavaScript生成的内容的,所以JavaScript+ajax生成的内容对于传统的搜索引擎很不友好,不利于SEO。

  本例子使用WebBrowser控件来加载页面,并解析页面内容导入的JavaScript文件生成的页面内容,获取body的innerHTML,这样就不用害怕网络爬虫抓取不到ajax或者JavaScript动态生成的内容。

  最近看到的一片文章说Google爬虫即将同时解析JavaScript或者ajax生成的内容,不知道是否真实。详细参考下面的文章。
Google蜘蛛运行网页中JS和CSS样式

声明:本网站尊重并保护知识产权,根据《信息网络传播权保护条例》,如果我们转载或引用的作品侵犯了您的权利,请通知我们,我们会及时删除!
Powered by showbo,©2012WEB编程网桂ICP备05005887号 京公网安备1101055090