jcrawl是一款小巧性能优良的的web爬虫,它可以从网页抓取各种类型的文件,基于用户定义的符号,比如email,qq.

HiSpider is a fast and high performance spider with high speed 严格说只能是一个spider系统的框架, 没有细化需求, 目前只是能...

BlueLeech是一个开源程序，它从指定的URL开始，搜索所有可用的链接，以及链接之上的链接。它在搜索的同时可以下载遇到的链接所指向的所有的或预定义的范围的内容。

JobHunter旨在自动地从一些大型站点来获取招聘信息，如chinahr,51job,zhaopin等等。JobHunter 搜索每个工作项目的邮件地址，自动地向这一邮件地址发送申请文本。

Methanol 是一个模块化的可定制的网页爬虫软件，主要的优点是速度快。

JSpider 是一个用 Java 实现的 WebSpider，JSpider 的执行格式如下： jspider [URL] [ConfigName] URL 一定要加上协议名称，如：http:...

urlwatch 是一个用来监控指定的URL地址的 Python 脚本，一旦指定的 URL 内容有变化时候将通过邮件方式通知到。 基本功能 配置简单，通过文本文件来指定URL，一行一个URL地址...

Snoopy 是一个强大的网站内容采集器（爬虫）。提供获取网页内容，提交表单等功能。

Spidr 是一个Ruby 的网页爬虫库，可以将整个网站、多个网站、某个链接完全抓取到本地。 安装方法：sudo gem install spidr 代码示例： Spidr.start_at('...

Web-Harvest 是用 Java 编写的开源 Web 数据提取工具。它提供了一种收集所需网页并从中提取有用数据的方法。为了做到这一点，它利用了成熟的文本/xml操作技术，如XSLT、XQu...

Spindle 是一个构建在 Lucene 工具包之上的 Web 索引/搜索工具。它包括一个用于创建索引的 HTTP spider 和一个用于搜索这些索引的搜索类。Spindle 项目提供了一组...

WebLech是一个功能强大的 Web 站点下载与镜像工具。它支持下载网站所需的许多功能，并尽可能地模拟标准的网络浏览器行为。WebLech是多线程的，并将具有一个GUI控制台。

YaCy基于p2p的分布式Web搜索引擎.同时也是一个Http缓存代理服务器.这个项目是构建基于p2p Web索引网络的一个新方法.它可以搜索你自己的或全局的索引,也可以Crawl自己的网页或启...

Terjira 是一个交互式且易于使用的 Jira 命令行应用程序。用户不需要记住资源密钥或 ID。Terjira 通过交互式提示来提供建议。 Jira 必须支持 Rest API 2.0 和 ...

tmate 是一个基于 tmux 的即时终端共享工具，所有用户始终看到同一个终端的内容。它适用于两个人共享屏幕但使用不同键盘的组队编程，或者其他终端程序共享。 注意：在客户端通过 tmate.i...

CommandFlow 是一个灵活的命令框架，它删除了命令中使用的大量样板代码。 用法 CommandFlow 命令框架分为两部分。一个是实际的命令框架，另一个是允许基于注释创建完整命令树的 A...

Cowrie是一种中等交互式SSH和Telnet蜜罐，用于记录暴力攻击和攻击者执行的shell交互。 Cowrie还充当SSH和telnet代理，以观察攻击者对另一个系统的行为。 使用方法： d...

Hyper 是一个基于 Web 技术开发的远程终端工具。

DomTerm 是一款现代化的终端模拟器，它使用浏览器引擎作为 “GUI 工具包”。这就支持了一些相关的特性，例如可嵌入图像和链接、HTML 富文本以及可折叠（显示/隐藏）命令。除此以外，它看起...

DRAKMA 是使用 Common Lisp 编写的全功能 HTTP 客户端。 它知道如何处理 HTTP/1.1 chunking, persistent connections, re-usa...