larbin简介: larbin是一种开源的网络爬虫/网络蜘蛛,由法国的年轻人 Sébastien Ailleret独立开发。larbin目的是能够跟踪页面的url进行扩展的抓取,最后为搜索引擎提供广泛的数据来源。安装环境:Ubuntu8.04 larbin2.3.6 (需要先装asdn) larbin安装步骤:
tar zxvf larbin-2.6.3.tar.gz ./configure make // 修改./adns/internal.h文件,把568-571行直接注释掉 注释掉options.h中的这行:#define DEFAULT_OUTPUT // do nothing...,然后使其余的行生效(每行含义,看下面的说明)让SIMPLE_SAVE :生效 取消#define RELOAD的注释,下次启动从上次停止的位置开始 取消#define CRASH的注释,采用 make debug进行编译 #./configure #make #./larbin ./configure ./make
larbin使用方法
·2024年12月目录 ·2024年11月目录 ·2024年10月目录 ·2024年9月目录 ·2024年8月目录 ·2024年7月目录 ·2024年6月目录 ·2024年5月目录 ·2024年4月目录 ·2024年3月目录 ·2024年2月目录 ·2024年1月目录 ·2023年12月目录 ·2023年11月目录