LoalaSam网络爬虫

system

软件标签:  网络爬虫
loalasam网络爬虫是由vc6.0开发推出的一款网络爬虫软件。通过loalasam，用户可以搜索到网上的各种资源，如：音视频、图片等，还可以下载搜索到资源。赶快下载体验吧！
官方介绍
loalasam是一个由c/c++开发，运行在windows平台上的网络爬虫（蜘蛛）程序，它可以高效地从互联网上获取海量资源，这些资源包括网页文本信息，图片，音频，视频以及其他类型的二进制文件资源。

loalasam采用了较为先进的技术来提高下载速度，它采用了异步dns解析，异步tcp/ip通信传输和多线程并发下载机制。这样使loalasam达到了很高的下载速度，它通常接近您的网络环境提供的极限速度。

作者希望今后loalasam能够作为一个完整的搜索引擎系统的一个功能模块。目前loalasam的兄弟程序mariosam正在开发的过程中并且接近完成。mariosam将包含一个高效的索引建立引擎，和一个检索服务器，并且保存可扩展的接口。这样，通过loalasam和mariosam, 用户可以找到一种搭建属于自己的搜索引擎的最简单方式，非常适合初学者使用。
功能特色
loalasam可以根据您电脑的物理内存量和您网络的极限速度调整性能参数，您可以使用这个功能自动配置启动线程数量、连接池大小和网页下载时限这些参数。

loalasam是一个多线程的下载程序，每一个工作线程负责遍历一个域名。这意味这如果有n个线程工作，那么就有n个域名正在被遍历。用户可以指定启动的最多线程个数，最大值是10。

loalasam使用异步tcp/ip通信机制下载网络资源，所以可以同时下载多个网页链接。这个选项定义了单个线程可以最多同时下载的链接个数，最大值是40个。

从loalasam v0.3开始，您可以通过代理服务器来下载网络资源。通常使用代理服务器可以更稳定地下载资源，但也可能比直接下载慢许多，这很大程度上依赖您使用的代理服务器性能。
更新日志
v0.3.1更新内容：

- fixed one memory leak.

- implemented import/export sites feature.

- implemented url retry times feature.

- implemented save file extension feature.

- show detailed saving path in the main panel.

v0.3.0更新内容：

- fixed url extension issue.

- changed configuration panel to use tabs.

- implemented using proxy feature.

- implemented auto cofigure feature.

- implemented rules for extend to internet.

- fixed auto save on exit issue.

https://blog.51cto.com/u_16099270/9147646