搜索资源列表
spiders
- 网络爬虫, 网络爬虫是一个自动提取网页的程序，它为搜索引擎从万维网上下载网页，是搜索引擎的重要组成。-spiders
parser
- 一个简单的网络爬虫软件，爬取电影网站的电影信息和影评的程序，供初学者学习使用。-parser for web
Baidu-Post-Bar-reptilesv0.5
- 百度贴吧爬虫 把互联网比喻成一个蜘蛛网，那么Spider就是在网上爬来爬去的蜘蛛。 网络蜘蛛是通过网页的链接地址来寻找网页的。 从网站某一个页面（通常是首页）开始，读取网页的内容，找到在网页中的其它链接地址， 然后通过这些链接地址寻找下一个网页，这样一直循环下去，直到把这个网站所有的网页都抓取完为止。 如果把整个互联网当成一个网站，那么网络蜘蛛就可以用这个原理把互联网上所有的网页都抓取下来。 这样看来，网络爬虫就是一个爬行程序，一个抓取网页的程序。
my-python-files
- python网络爬虫的程序，可以用在对网页信息的爬取和下载-this is a code for scrapy of the website
网虫
- 网络爬虫功能实现，源代码。vs c++程序文件。(Web crawler function implementation, the source code. Vs c++ program file.)
spider_baike-master
- 一个简单的初级爬虫程序通用网络爬虫又称全网爬虫（Scalable Web Crawler），爬行对象从一些种子 URL 扩充到整个 Web，主要为门户站点搜索引擎和大型 Web 服务提供商采集数据。 由于商业原因，它们的技术细节很少公布出来。 这类网络爬虫的爬行范围和数量巨大，对于爬行速度和存储空间要求较高，对于爬行页面的顺序要求相对较低，同时由于待刷新的页面太多，通常采用并行工作方式，但需要较长时间才能刷新一次页面。 虽然存在一定缺陷，通用网络爬虫适用于为搜索引擎搜索广泛的主题，有较强的应用价
Daima
- 一些网络爬虫的程序案例，包括股票信息的获取，淘宝价格比对，网络爬虫下载图片，中国大学排名等案例(Some web crawler cases, including stock information acquisition, Taobao price comparison, web crawler download pictures, China University Ranking and other cases)
creeper
- 基于python语言的网络爬虫程序，用于数据爬取(Python - based web crawler for data crawl)