搜索资源列表
spider_demo
- C#编写的spider demo 主要实现多线程的网页抓取及网页内容中URL的提取-prepared by the spider demo main multithreaded website crawls and website content URL Extraction
RefreshCase
- 多线程搜索网页程序,主要实现了对网页内容的抓取!
miniSearch
- 搜索，2006年4月开发出来。开发之初，搜索就将自己的目标定位于打造专业化的搜索引擎。力争用“最”短的时间为广大搜索用户提供“最”有用的信息。 搜索目前主要提供“美容经验” “大杂烩” “旅行资讯”三个领域的网页信息。 注：我们提供各行业专业搜索引擎索引库定制服务，您只需提供需要索引的网址，我们便会为您提供强大的网页信息抓取服务，丰富您的搜索引擎数据库，抓取内容可嵌入本搜索系统中。我们按所提供的网址数量收费。欢迎广大公司、站长和个人联系！
Web-Crawler-Cpp
- 网页抓取，可以实现网页的下载，并过滤出想要的内容。很实用-Web crawling, Web page downloads can be achieved, and to filter out unwanted content. Very practical
wlpc
- 一个网络爬虫程序,抓取网页上的内容 一个网络爬虫程序,抓取网页上的内容-A Web crawler program, crawl content on a web page web crawler program, crawl content on web pages
MetaSeeker-4.11.2
- 主要应用领域： • 垂直搜索（Vertical Search）：也称为专业搜索，高速、海量和精确抓取是定题网络爬虫DataScraper的强项，每天24小时每周7天无人值守自主调度的周期性批量采集，加上断点续传和软件看门狗(Watch Dog)，确保您高枕无忧 • 移动互联网：手机搜索、手机混搭(mashup)、移动社交网络、移动电子商务都离不开结构化的数据内容，DataScraper实时高效地 采集内容，输出富含语义元数据的XML格式的抓取结果文件，确保自动化
crawler-1.0-sources
- 网络蜘蛛是通过网页的链接地址来寻找网页 网络蜘蛛 ，从网站某一个页面（通常是首页）开始，读取网页的内容，找到在网页中的其它链接地址，然后通过这些链接地址寻找下一个网页，这样一直循环下去，直到把这个网站所有的网页都抓取完为止。如果把整个互联网当成一个网站，那么网络蜘蛛就可以用这个原理把互联网上所有的网页都抓取下来。 ----这样看来，网络蜘蛛就是一个爬行程序，一个抓取网页的程序-internet crawler