当前位置: 软件>java软件
网页版爬虫 spider-web
本文导语: spider-web 是爬虫的网页版，使用xml配置，支持大部分页面的爬取，支持爬取内容的保存、下载等。 其中配置文件格式为： http://www.oschina.net/tweets link http://my.oschina.net/(.)*/[0-9]* tweet a ...
spider-web 是爬虫的网页版，使用xml配置，支持大部分页面的爬取，支持爬取内容的保存、下载等。
其中配置文件格式为：
http://www.oschina.net/tweets link http://my.oschina.net/(.)*/[0-9]* tweet a txt a a a link http://my.oschina.net/(.)*/[0-9]* tweet a txt a根据不同的页面进行设置，可以支持比较流行的页面爬取。
本站(WWW.)旨在分享和传播互联网科技相关的资讯和技术，将尽最大努力为读者提供更好的信息聚合和浏览方式。
本站(WWW.)站内文章除注明原创外，均为转载、整理或搜集自网络。欢迎任何形式的转载，转载请注明出处。
本站(WWW.)站内文章除注明原创外，均为转载、整理或搜集自网络。欢迎任何形式的转载，转载请注明出处。