搜索资源列表
PACHONG
- 网络爬虫程序源码 这是一款用 C# 编写的网络爬虫 主要特性有: 可配置:线程数、线程等待时间,连接超时时间,可爬取文件类型和优先级、下载目录等。 状态栏显示统计信息:排入队列URL数,已下载文件数,已下载总字节数,CPU使用率和可用内存等。 有偏好的爬虫:可针对爬取的资源类型设置不同的优先级。 健壮性:十几项URL正规化策略以排除冗余下载、爬虫陷阱避免策略的使用等、多种策略以解析相对路径等。 较好的性能:基于正则表达式的页面解析、适度加锁、维持HTTP连接等
distributedsystemdesign
- 书较为全面地介绍了分布式系统领域的一些基本概念,提出了分布式系统的各种问题,如互斥问题、死锁的预防和检测、处理机间的通信机制、可靠性问题、负载分配问题、数据管理问题及其可能的解决方案,并讨论了分布式系统设计在操作系统、文件系统、共享存储器系统、数据库系统和异型处理中的应用。本书适用于学习分布式系统设计的高年级本科生、研究生和从事分析、设计分布式系统的计算机专业人员-A distributed system design
Chubby
- 基于分布式系统的粗粒度锁服务(Chubby)-Distributed systems based on coarse-grained Chubby lock service
Operating-Systems-Internals-and-
- 操作系统——内核与设计原理(中文版第四版) 原书名:Operating Systems:Internals and Design Principles(Fourth Edition) 作者: (美)William Stallings 全面系统地讲述了操作系统的基本概念、原理和方法,而且以当代最流行的两个操作系统——Windows 2000和UNIX为例,全面清楚地展现了当代操作系统的本质和特点,并且与当代流行的设计问题以及当前操作系统的发展方向联系起来,使本书的内容具有先进性和适
lock
- 基于redis的分布式锁,添加了spring的AOP,可以对spring管理的类使用分布式锁-Redis-based distributed lock, add the spring of AOP, you can use the distributed lock management class for spring
smartlock
- 基于zookeeper ,redis 和数据库 的 分布式锁 demo(Distributed lock demo based on zookeeper, redis and database)
zookeeper-3.5.0-alpha.tar
- ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。 ZooKeeper的目标就是封装好复杂易出错的关键服务,将简单易用的接口和性能高效、功能稳定的系统提供给用户。 ZooKeeper包含一个简单的原语集,提供Java和C的接口。 ZooKeeper代码版本中,提供了分布式独享锁、选举、队列的接
搜猫源码PHP自带蜘蛛的搜索引擎
- ¤ 优化蜘蛛程序,整合Crawler爬虫代码、自动下载采集数据到本地 调用,实现本地索引功能。 ¤ 优化蜘蛛功能,实现蜘蛛智能去除死链接,实现多线程采集,默认蜘蛛开启数为20个,也就是说可以同时开启20个蜘蛛同时工作,这个根据你的服务器的配置来定,服务器越好开启的越多,采集的数据越多。理论值:日采集数据不低于1000000条信息。 【PHP+Mysql+Sphinx 说明】 出自俄罗斯的开源全文搜索引擎软件 Sphinx ,单一索引最大可包含1亿条记录,在1千万条记录