Larbin is an HTTP Web crawler with an easy interface that runs under Linux. It can fetch more than 5 million pages a day on a standard PC (with a good network). -Larbin is an HTTP Web crawler with an easy in terface that runs under Linux. It can fetc

1.BT下载页和种子列表以及搜索列表页均采用伪静态化URL，更易于被搜索引擎收录。 2.内置百度的热门电影、电视剧、动漫卡通、软件等TOP50关键字排行小偷. 3.强大的BT搜索功能. 4.可以在Linux和windows等系统服务器上正常运行。 5.除去了一些不必要的代码，提高了程序运行效率。 6.BT数据同步更新程序，每天更新几百条BT种子 7.任意自定义添加广告(请自行修改www文件夹下的文件) 8.高速获取数据，无需维护管理，一分钟即可建立个性化的BT站点!

一个高效的网络爬虫，可以自行修改配置文件，为linux下工作环境，很具有参考意义-An efficient Web crawler that can modify configuration files for linux work environment, it is a reference value