你好,欢迎来到电脑编程技巧与维护杂志社! 杂志社简介广告服务读者反馈编程社区  
合订本订阅
 
 
您的位置:技术专栏 / Linux开发
Larbin的安装教程
 

larbin简介:
     larbin是一种开源的网络爬虫/网络蜘蛛,由法国的年轻人 Sébastien Ailleret独立开发。larbin目的是能够跟踪页面的url进行扩展的抓取,最后为搜索引擎提供广泛的数据来源。

安装环境:Ubuntu8.04          larbin2.3.6 (需要先装asdn)

     larbin安装步骤:

 

  1. tar zxvf larbin-2.6.3.tar.gz  
  2. ./configure make // 修改./adns/internal.h文件,把568-571行直接注释掉  
  3. 注释掉options.h中的这行:#define DEFAULT_OUTPUT // do nothing...,然后使其余的行生效(每行含义,看下面的说明)让SIMPLE_SAVE :生效  
  4. 取消#define RELOAD的注释,下次启动从上次停止的位置开始  
  5. 取消#define CRASH的注释,采用 make debug进行编译  
  6.  #./configure  
  7.  #make  
  8.  #./larbin  
  9.  ./configure  
  10.  ./make 


     larbin使用方法
  

修改配置文件: larbin.conf
a) 修改第36行,startUrl输入起始网页
b) 修改第20行,Proxy
c) 修改连接数,第20行…
1、运行:./larbin
2、中止:Ctrl+C
3、重起:./larbin -scratch
 
 
Larbin安装教程1

Larbin安装教程2

Larbin安装教程3

Larbin安装教程4

Larbin安装教程5
 
 
 
  推荐精品文章

·2024年12月目录 
·2024年11月目录 
·2024年10月目录 
·2024年9月目录 
·2024年8月目录 
·2024年7月目录 
·2024年6月目录 
·2024年5月目录 
·2024年4月目录 
·2024年3月目录 
·2024年2月目录 
·2024年1月目录
·2023年12月目录
·2023年11月目录

  联系方式
TEL:010-82561037
Fax: 010-82561614
QQ: 100164630
Mail:gaojian@comprg.com.cn

  友情链接
 
Copyright 2001-2010, www.comprg.com.cn, All Rights Reserved
京ICP备14022230号-1,电话/传真:010-82561037 82561614 ,Mail:gaojian@comprg.com.cn
地址:北京市海淀区远大路20号宝蓝大厦E座704,邮编:100089