成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

使用開源搜索引擎YaCy的技巧

開源
YaCy 最令人興奮的一點就是它事實上是一個本地客戶端,全球范圍內的每一個 YaCy 用戶都是構成整個這個分布式搜索引擎架構的一個節點,這意味著每個用戶都可以掌控自己的互聯網搜索體驗。

[[315864]]

無需適應其他人的眼光,而是使用 YaCY 搜索引擎定義你想要的互聯網。

在我以前介紹 YaCy 入門的文章中講述過 YaCy 這個對等peer-to-peer式的搜索引擎是如何安裝和使用的。YaCy 最令人興奮的一點就是它事實上是一個本地客戶端,全球范圍內的每一個 YaCy 用戶都是構成整個這個分布式搜索引擎架構的一個節點,這意味著每個用戶都可以掌控自己的互聯網搜索體驗。

Google 曾經提供過 google.com/linux 這樣的主題簡便方式以便快速篩選出和 Linux 相關的搜索內容,這個小功能受到了很多人的青睞,但 Google 最終還是在 2011 年的時候把它下線了。

而 YaCy 則讓自定義搜索引擎變得可能。

自定義 YaCy

YaCy 安裝好之后,只需要訪問 localhost:8090 就可以使用了。要自定義搜索引擎,只需要點擊右上角的“管理Administration”按鈕(它可能隱藏在小屏幕的菜單圖標中)。

你可以在管理面板中配置 YaCy 對系統資源的使用策略,以及如何跟其它的 YaCy 客戶端進行交互。

YaCy profile selector

例如,點擊側欄中的“第一步First steps”按鈕可以配置備用端口,以及設置 YaCy 對內存和硬盤的使用量;而“監控Monitoring”面板則可以監控 YaCy 的運行狀況。大多數功能都只需要在面板上點擊幾下就可以完成了,例如以下幾個常用的功能。

內網搜索應用

目前市面上也有不少公司推出了內網搜索應用,而 YaCy 可以免費為你提供一個。對于能夠通過 HTTP、FTP、Samba 等協議訪問的文件,YaCy 都可以進行索引,因此無論是作為私人的文件搜索還是企業內部的本地共享文件搜索,YaCy 都可以實現。它可以讓內部網絡中的用戶使用你個人的 YaCy 實例來查找共享文件,于此同時保持對內部網絡以外的用戶不可見。

網絡配置

YaCy 在默認情況下就支持隱私和隔離。點擊“用例與賬號Use Case & Account”頁面頂部的“網絡配置Network Configuration”鏈接,即可進入網絡配置面板設置對等網絡。

YaCy network configuration

爬取站點

YaCy 的分布式運作方式決定了它對頁面的爬取是由用戶驅動的。并沒有一個大型公司對整個互聯網上的所有可訪問頁面都進行搜索,對于 YaCy 來說也是這樣,一個站點只有在被用戶指定爬取的前提下,才會被 YaCy 爬取并進入索引。

YaCy 客戶端提供了兩種爬取頁面的方式:你可以手動爬取,并讓 YaCy 根據建議去爬取。

YaCy advanced crawler

手動爬取

手動爬取是指由用戶輸入指定的網站 URL 并啟動 YaCy 的爬蟲任務。只需要點擊“高級爬蟲Advanced Crawler”并輸入計劃爬取的若干 URL,然后選擇頁面底部的“進行遠程索引Do Remote indexing”選項,這個選項會讓客戶端向互聯網廣播它要索引的 URL,可選地接受這些請求的客戶端可以幫助你爬取這些 URL。

點擊頁面底部的“開始新爬蟲任務Start New Crawl Job”按鈕就可以開始進行爬取了,我就是這樣對一些常用和有用站點進行爬取和索引的。

爬蟲任務啟動之后,YaCy 會將這些 URL 對應的頁面在本地生成和存儲索引。在高級模式下,也就是本地計算機允許 8090 端口流量進出時,全網的 YaCy 用戶都可以使用到這一份索引。

加入爬蟲網絡

盡管一些非常敬業的 YaCy 高級用戶已經強迫癥般地在互聯網上爬取了很多頁面,但對于全網浩如煙海的頁面而言也只是滄海一粟。單個用戶所擁有的資源遠不及很多大公司的網絡爬蟲,但大量 YaCy 用戶如果聯合起來成為一個社區,能產生的力量就大得多了。只要開啟了 YaCy 的爬蟲請求廣播功能,就可以讓其它客戶端參與進來爬取更多頁面。

只需要在“高級爬蟲Advanced Crawler”面板中點擊頁面頂部的“遠程爬取Remote Crawling”,勾選“加載Load”旁邊的復選框,就可以讓你的客戶端接受其它人發來的爬蟲任務請求了。

YaCy remote crawling

YaCy 監控相關

YaCy 除了作為一個非常強大的搜索引擎,還提供了很豐富的主題和用戶體驗。你可以在“監控Monitor”面板中監控 YaCy 客戶端的網絡運行狀況,甚至還可以了解到有多少人從 YaCy 社區中獲取到了自己所需要的東西。

YaCy monitoring screen

搜索引擎發揮了作用

你使用 YaCy 的時間越長,就越會思考搜索引擎如何改變自己的視野,因為你對互聯網的體驗很大一部分來自于你在搜索引擎中一次次簡單查詢的結果。實際上,當你和不同行業的人交流時,可能會注意到每個人對“互聯網”的理解都有所不同。有些人會認為,互聯網的搜索引擎中充斥著各種廣告和推廣,同時也僅僅能從搜索結果中獲取到有限的信息。例如,假設有人不斷搜索關于關鍵詞 X 的內容,那么大部分商業搜索引擎都會在搜索結果中提高關鍵詞 X 的權重,但與此同時,另一個關鍵詞 Y 的權重則會相對降低,從而讓關鍵詞 Y 被淹沒在搜索結果當中,即使這樣對完成特定任務更好。

就像在現實生活中一樣,走出虛擬的世界視野會讓你看到一個更廣闊的世界。嘗試使用 YaCy,看看你發現了什么。

 

責任編輯:龐桂玉 來源: Linux中國
相關推薦

2011-06-20 18:23:06

SEO

2023-01-03 15:42:29

機器學習視頻搜索

2011-06-22 19:01:54

關鍵詞

2009-02-19 09:41:36

搜索引擎搜狐百度

2009-09-22 16:23:52

搜索引擎

2022-10-11 09:27:45

搜索引擎es索引

2020-03-20 10:14:49

搜索引擎倒排索引

2017-08-07 08:15:31

搜索引擎倒排

2020-02-19 13:38:42

開源索引互聯網

2016-12-26 13:41:19

大數據搜索引擎工作原理

2010-06-13 16:27:28

搜索引擎

2010-04-20 11:43:46

2022-10-08 09:13:18

搜索引擎?站

2012-09-07 13:22:21

搜索搜狗

2017-08-21 11:14:36

2011-06-22 17:28:51

SEO

2012-05-14 11:01:50

搜索引擎微軟

2020-08-10 14:39:30

搜索引擎

2011-06-15 19:09:24

搜索引擎

2015-08-31 10:41:58

搜索引擎Google云應用
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 极品在线| 亚洲一区二区三区高清 | 亚洲精品中文在线 | 国产精品视屏 | 亚洲成人日韩 | 精品久久久久久久久久久久久久 | 婷婷久久网 | 伊人久麻豆社区 | 成人精品一区二区 | 欧美日韩精品亚洲 | 国产91一区二区三区 | 一区二区三区四区在线 | 色婷婷精品久久二区二区蜜臂av | 久久亚洲一区 | 成人午夜免费网站 | 国产中文字幕在线观看 | 免费高潮视频95在线观看网站 | av免费网站在线观看 | 成人av观看 | 97av视频| 欧美在线a| 91免费看片| 国产成人精品一区二区三区在线 | 国产精品久久亚洲7777 | 国产视频福利一区 | 91社影院在线观看 | 一区精品视频 | 亚洲一区二区在线视频 | 91九色porny首页最多播放 | 欧美日韩一区精品 | 91精品久久久久久久久中文字幕 | 亚洲男人天堂2024 | 亚洲欧洲一区二区 | 欧美h视频| 久操伊人| 人操人人 | 性欧美精品一区二区三区在线播放 | 欧美成人一级 | 国产日韩久久 | 毛色毛片免费看 | 国产91观看|