智能Web Crawler的語意網應用的研究和開發

Abstract

語義網（Semantic Web）是WWW 協會（W3C）最近提出的一個Web 結構概念。它的目的是將目前的Web 轉換成電腦可處理的格式。本篇論文旨在研究語義網的意義和新功能。在這篇文章裏，我們分析了傳統Web 技術的缺點和語義網技術的發展現狀，設計了一個語義網的原型，並在此基礎上進行了一些實驗。 我們的語義網原型能自動化Web 資訊的處理過程。以香港中學畢業生選擇申請合適的大學和學科這個問題為例，如果沒有語義網技術，學生們需要人工地尋找符合條件的大學、學系和課程的相關網站，並且流覽這些網站中的各頁資訊。而在我們的原型中，語義網技術能夠將這整個過程自動化、流程化，為學生提供智慧化的建議。學生只需要輸入他們的條件，相應的資訊表單就能自動生成。我們的原型使用了一個基於RDF 和DAML+OIL 的共用ontology 去描述香港各個大學的錄取條件。我們還提出了一個新穎的分類（Explore By Class）的搜索演算法。與傳統的Web Crawling 技術相比，這個演算法優化了這個問題的搜索性能。 基於這個原型，我們做了幾個實驗來測試語義網在動態的、開放的和弱控制的Web 環境中的提供更適應的資訊處理的能力。