在Linux系統(tǒng)下建立強大的FTP搜索引擎
parker是一個FTP服務(wù)器搜索引擎，是基于Linux的開放源碼軟件。主要檢索各個FTP服務(wù)器上面的文件，然后把目錄信息保存在本地的文件中，如果有查詢請求，把檢索本地的數(shù)據(jù)，把相關(guān)的信息（文件所在的地址）返回給請求者。教育網(wǎng)內(nèi)很多FTP站點都采用這個作為搜索引擎，比如清華九井等。
使用方法很簡單，如果你是linux系統(tǒng)，應(yīng)當(dāng)不會有什么問題。如果是別的unix-like系統(tǒng)，也可仿照作相應(yīng)處理。
本文以紅旗2.0桌面版為例說明整個的架構(gòu)過程。因為相對來講筆者個人覺得紅旗Linux比較好操作，中文漢化也做得很好。他的Web Server(Apache)設(shè)置可以通過Xwindow界面來實現(xiàn)，比較方便初級用戶。
首先你得獲取一份parker的源代碼，推薦到這個站點搜索一下，你可以找到一打以上的提供源代碼的站點：http://e.pku.edu.cn，拿到源代碼之后，我們就可以開始安裝了。
基本安裝方法如下（可以參考parker目錄下面的readme操作）：
1、當(dāng)然，第一件事是開機進入你的linux，然后把你獲取到的parker源代碼文件（一般為parker.2000-09-06.xxxx.tgz，其中包含了這個parker的修改日期和修改者）展開到一個目錄中， 這里我們假設(shè)是/root/parker/。
2、是用文本編輯器編輯/root/parker/src/Makefile這個文件，主要是設(shè)置parker_home為你的parker所在的目錄（/root/parker/）。
3、在終端窗口輸入命令make config進行編譯
在你的/root/parker/src/目錄下面，執(zhí)行make config就可以了。make有些類似VC里面的工程一樣，可以批量處理一些程序。所有的unix-like系統(tǒng)都有make這個程序，否則的話，就是你在安裝linux的時候沒有安裝開發(fā)環(huán)境的支持。（選擇定制安裝的朋友們就要注意了，我第一次裝紅旗的時候，選擇定制，不小心這個make就沒裝上去）。
4、編輯/root/parker/src/parker.h，設(shè)置其中的SERVER、PARKERSERVER，具體方法就是把"10.129.6.172"替換成你的parker所在的服務(wù)器地址。
5、在終端窗口輸入命令make進行編譯。
6、編譯完后繼續(xù)鍵入make install進行編譯處理。
7、修改你的Parker_Hosts（/root/parker/etc/Parker_Hosts）文件，加入需要檢索的FTP服務(wù)器地址，一行一個FTP服務(wù)器地址。
8、把src/下面的cgi程序（cgi, cgistatus，cgiswitch，這些文件只有當(dāng)你上面的編譯完成后才能產(chǎn)生）拷貝到你的www服務(wù)器的cgi-bin目錄下面。把 /root/parker/html/下面的文件 放到你的www服務(wù)器的doc root下面，使得可以被用戶訪問。具體有關(guān)Web Server的設(shè)置請參考其他文獻，但相對來講，紅旗linux的Apache設(shè)置是比較簡單的。
9、編輯你的/etc/services和/etc/inetd.conf文件，加入parker服務(wù)。具體修改可以參考/root/parker/conf/目錄下面的例子。在例子中/usr/networking/parker/bin/parkerd這個目錄指的是parker所在的目錄，把其修改為 /root/parker/bin/parkerd，當(dāng)然，你必須首先完成make install，這樣在你的parker/bin/目錄下面才會有parkerd這個文件。
10、重新啟動inetd以及www服務(wù)器程序。
11、定時執(zhí)行/root/parker/bin/NewData這個腳本文件，可以把它放置到你的crontab中，讓系統(tǒng)定時執(zhí)行（一般是1天到1個星期）。
NewData腳本把訪問在/root/parker/Parker_Hosts中定義的FTP服務(wù)器，并把檢索到的數(shù)據(jù)存放到本地，然后對數(shù)據(jù)進行相應(yīng)的處理。www用戶可以通過訪問parker頁面來執(zhí)行文件查詢請求。當(dāng)你能夠成功的執(zhí)行完make install之后，就會在你的/root/parker/bin/目錄下面看到這個NewData文件,注意，不能直接在這個腳本所在的目錄里運行他，否則會出錯，不能收集數(shù)據(jù)，可以在根目錄下（root）執(zhí)行parker/bin/NewData （注意大小寫）即可。
至此，一個強大的搜索引擎就已經(jīng)建立起來了。具體頁面顯示效果可以修改/root/parker/html/下面的文件，但是搜索結(jié)果的頁面則需修改/root/parker/src/cgi.c文件，然后重新編譯方可，要求有一定的html語言功底。
（T004） [#page_#][#page_#]
你應(yīng)當(dāng)使你的配置盡量的簡單——不要安裝那些用不到或根本不必要的模塊。一般說來，一個標(biāo)準(zhǔn)的non-DSO（非動態(tài)共享對象）Apache，在安裝一個perl，對大多數(shù)人都是足夠的。
關(guān)于DSO和mod-ssl需要注意的地方:
如果你打算把任何東西都按照DSO模版進行編譯，那你首先要建立mod-ssl，然后你確實要按照下面的順序建立自己的Apache目錄樹。Mod-ssl會明顯的修改Apache 建立的目錄樹，據(jù)我的經(jīng)驗，在使用我們剛才提到的軟件版本的前提下，下面的順序是做起來最簡單的順序：
1、建立Apache.
2、在Apache中建立和增加mod-ssl.
3、在Apache中建立和增加php 和mod-perl.
4、你應(yīng)該在適當(dāng)?shù)牡胤接涗浵聛砟闶窃趺礃泳幾g你的目錄樹的，以便再做時參考。（你可以把其打印出來，并加上注釋）
安裝了各種軟件之后，最終的虛擬根環(huán)境化的目錄樹有23MB，其中包含了8MB的共享庫和perl。下面是基于DSO安裝的文件的總結(jié)（以KB表示）：
【編輯推薦】
