搜索资源列表
spider(java)
- 网页抓取器又叫网络机器人(Robot)、网络爬行者、网络蜘蛛。网络机器人(Web Robot),也称网络蜘蛛(Spider),漫游者(Wanderer)和爬虫(Crawler),是指某个能以人类无法达到的速度不断重复执行某项任务的自动程序。他们能自动漫游与Web站点,在Web上按某种策略自动进行远程数据的检索和获取,并产生本地索引,产生本地数据库,提供查询接口,共搜索引擎调用。-web crawling robots - known network (Robot), Web crawling,
webspider
- 用java写的一个网络蜘蛛,他可以从指定的URL开始解析抓取网页上的URL,对于抓取到的URL自动分成站内外URL,并可以设置抓取的深度。
fetchmatrix
- 自动抓取programmabelweb上的Mashup矩阵数据,分析Web2.0混搭应用之间的关系网络与发展趋势,找到最有价值的Web APP平台。-Automatically crawl Mashup Matrix programmabelweb on data analysis of the application of Web2.0 mash the relationship between the network and development trends, to find the m
ss
- 网页抓取器又叫网络机器人(Robot)、网络爬行者、网络蜘蛛。网络机器人(Web Robot),也称网络蜘蛛(Spider),漫游者(Wanderer)和爬虫(Crawler),是指某个能以人类无法达到的速度不断重复执行某项任务的自动程序。他们能自动漫游与Web站点,在Web上按某种策略自动进行远程数据的检索和获取,并产生本地索引,产生本地数据库,提供查询接口,共搜索引擎调用。-asp
Crawler_src_code
- 网页爬虫(也被称做蚂蚁或者蜘蛛)是一个自动抓取万维网中网页数据的程序.网页爬虫一般都是用于抓取大量的网页,为日后搜索引擎处理服务的.抓取的网页由一些专门的程序来建立索引(如:Lucene,DotLucene),加快搜索的速度.爬虫也可以作为链接检查器或者HTML代码校验器来提供一些服务.比较新的一种用法是用来检查E-mail地址,用来防止Trackback spam.-A web crawler (also known as a web spider or ant) is a program,
Web-Crawlers
- 网络爬虫(又被称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动的抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁,自动索引,模拟程序或者蠕虫。 -Web crawler (also known as web spider, robot, in the middle of the FOAF community, more often referred to as Web Chaser), is one kind of in acco
newcrawler
- 用Python写的爬虫程序,可以自动地抓取万维网上的图片-Written in Python crawlers can automatically grab pictures on the Web
yuaisousuo
- 全自动抓取百度热搜榜,和百度或者好搜的搜索结果,支持只搜索某个站点 强大的扩展功能,可以让搜索指定关键词指定网站排名第几,还可以根据关键词显示不同的广告和指定HTML内容。可以轻松做出很多的web小应用,例如搜索:万年历 、计算器 、 天气 或搜索IP:183.240.197.171 完全自定义伪静态规则,让URL更漂亮 强大开放的Sitemap功能,轻轻松松做出数百万页面的网站地图 搜索结果统一排序功能让你的搜索引擎与众不同 PC+WAP自动识别,让移动搜索引擎收录更好(Fully