300 likes | 407 Views
「數位典藏概論」單元 11. 數位典藏系統評估與使用者研究. 數位典藏系統評估. 為什麼要評估 ? 評估什麼 ? 如何 評估 ?. 數位典藏系統評估的目的. 為了瞭解工作績效 為了發現及解決問題 為了改善工作缺失 為了 確定 計畫成果 是否受到使用者的喜愛 ?是否滿足 使用者的 需求? 做為 日後推行同類工作計畫的參考. 數位典藏系統評估的內容. 數位內容 (Digital collections) 保存維護 (Preservation) 檢索利用 (Access) 服務 (Services) 使用及使用者 (Use, users)
E N D
「數位典藏概論」單元11 數位典藏系統評估與使用者研究
數位典藏系統評估 • 為什麼要評估? • 評估什麼? • 如何評估?
數位典藏系統評估的目的 • 為了瞭解工作績效 • 為了發現及解決問題 • 為了改善工作缺失 • 為了確定計畫成果是否受到使用者的喜愛?是否滿足使用者的需求? • 做為日後推行同類工作計畫的參考
數位典藏系統評估的內容 • 數位內容 (Digital collections) • 保存維護 (Preservation) • 檢索利用 (Access) • 服務 (Services) • 使用及使用者 (Use, users) • 安全措施 (Security) • 管理及人員 (Management, staff) • 成本 (Costs) • 整合(Integration)
數位典藏系統評估的方法 • 專家評估 • 機器評估 • 使用者調查
數位典藏系統評估的標準 • 以使用者為中心 • 是否滿足社會的需要? • 是否滿足機構的需要? • 是否滿足個人的需要? • 以系統為中心 • 軟硬體設施是否足夠? • 處理過程是否得當? • 內容是否理想? • 介面是否理想?
傳統的圖書館評鑑指標 • 館藏 (collection) 目的、範圍、權威性、新穎性、形式、成本、處理、保存… • 資訊 (Information) 正確性、適當性、連結性、獨特性、相容性、呈現… • 利用 (Use) 可及性、可得性、可查尋性、可用性… • 標準 (Standards) 包括各種作業項目及處理方式
傳統的資訊檢索評鑑指標 • 相關性 (Relevance) 精確率、回收率… • 滿意度 (Satisfaction) 成功率、失敗率…
傳統的人機互動評鑑指標 • 好用度 (Usability) • 操作適當 (Task appropriateness)
數位典藏系統評鑑指標 • 好用度 (Usability) • 系統特性 (Systems features) • 使用 (Usage) • 人種誌/使用者研究 (Ethnographic study)
好用度評鑑 • 內容 (Content) • 處理(Process) • 格式(Format) • 整體評鑑 (Overall assessment)
系統特性評鑑 • 技術成效 (Technology performance) • 處理/計算成效 (Process/algorithm performance) • 系統整體成效 (Overall system)
使用評鑑 • 使用方式 (Usage patterns) • 資料的使用 (Use of materials) • 使用統計 (Usage statistics) • 誰在使用、什麼被使用、什麼時候 使用? (Who uses what, when?) • 為什麼使用? (For what reasons/ decisions)
使用者研究 • 不同使用族群的觀念差異 • 使用者的實際操作和環境 • 使用者的文化 • 使用者的語言 • 使用者的喜好 • 使用者的學習型態
使用評鑑與使用者研究 • 評鑑與研究不外下列二種方法︰ • 使用數據分析 • 使用者調查
取得使用數據的方式 • 利用快取 (Caching) • 利用網站紀錄 (Log files) • 使用特殊軟體 (Software)
快取 (Caching) • 電腦快速緩衝貯存區。 • 「快取」的意思就是將經常會使用的物品,放置在方便又快速取得的地方,用以節省時間,增加效率。 • 是一種將先前讀進來的資料留著,預備下一次讀取的技術。 • 使用快取伺服器有三大優點: 一、減少頻寬浪費;二、降低網頁伺服器的負擔 ;三、使用者可較順暢快速瀏覽網頁。但是快取伺服器也會發生幾項問題,如不能保證所看到的網頁是最新的,設定不當也可能耗費更長等待時間。
網站紀錄 (Log files) • 網站伺服器會將使用者進入網站後到離開該網站前的所有行為記錄下來,稱為Log檔案。 • Log檔案分析可使網站管理者瞭解網站的使用狀況,發現網站使用上的問題,使網站管理更有效率,並做為後續改進的參考。
網站紀錄所提供的資訊 • 使用者的IP address • 使用日期及時間 • 使用者使用了本網站哪些資料 • 使用者所下載的資料是否傳送成功 • 使用者下載檔案的大小 • 使用者從何處 (其他網頁) 連至本網站 • 使用者使用何種檢索用語找到本網站
網站紀錄解讀 - 樣本一 • 2003-10-02 15:25:44 192.168.163.68 - GET/logon.html • 2003-10-02 15:25:44 192.168.163.68 - GET/images/logon.gif • 2003-10-02 15:25:44 192.168.163.68 - GET/images/logo.gif • 2003-10-02 15:25:44 192.168.163.68 - GET/images/user.gif
網站紀錄解讀 - 樣本二 • [Tue Jan 13 11:37:16 2004] [error] [client 172.16.112.55] File does not exist: /home/httpd/html/favprod.gif • [Tue Jan 13 11:42:05 2004] [error] [client 10.196.90.245] File does not exist: /home/httpd/html/favprod.gif • [Tue Jan 13 11:45:18 2004] [error] [client 172.31.183.52] File does not exist: /home/httpd/html/favprod.gif • [Tue Jan 13 11:50:17 2004] [error] [client 192.168.14.13] File does not exist: /home/httpd/html/favprod.gif
網站紀錄解讀 -- 樣本三 • 2003-10-02 12:49:27 10.191.33.7 - GET/images/logon.gif - Mozilla/4.0+ (compatible;+MSIE+6.0;+Windows+98;+{Widget+Systems+Corporation};+Q342532) – http://www.adsrus.com/ • 2003-10-02 15:25:44 192.168.163.68 - GET/logon.html - Mozilla/4.0+ (compatible;+MSIE+5.5;+Windows+98} - http://www.publicco.com/new.html • 2003-10-02 15:26:27 192.168.163.68 - POST/purchase.dll - Mozilla/4.0+ (compatible;+MSIE+5.5;+Windows+98} – http://store.publicco.com/ • 2003-10-02 15:26:27 192.168.163.68 - POST/purchase.dll - Mozilla/4.0+ (compatible;+MSIE+6.0;+Windows+NT+5.1} – http://store.publicco.com/
網站紀錄的分析 • 使用者資料分析 • 使用者瀏覽行為分析 • 瀏覽內容分析 • 瀏覽時段分析 • 瀏覽來源分析 • 造訪來源分析 • 重複造訪原因分析
網站紀錄的功用 • 瞭解網路流量的負荷和該網站的需求量。 • 瞭解使用者的登錄位址 (IP)、瀏覽器、操作系統等。 • 瞭解使用者瀏覽各個網頁的關係。 • 瞭解使用者使用的困難之處。 • 幫助網站管理者瞭解網頁設計的缺失及需要加強的地方。
分析網站紀錄常使用的名詞 • Hits︰當使用者進入一個網頁至少就算一個hit,網頁可能包含圖片、動態連結、廣告等,因此使用者如進入一個包含兩個圖檔的網頁,就算三個hits (主頁、兩個圖檔)。 • Page views︰點選指定的網頁。 • Visits︰參觀整個網站的次數,如跳出網站再次使用瀏覽動作就算另一次visit。
使用統計數據的缺點 • 數據的定義如與評鑑目的不符,便失去意義。 • 必須結合其他質化評量法才能衡量完整績效。 • 無法反應使用者的目的。 • 無法反應使用者真正的使用情形。
使用者意見調查的方法 • 問卷調查法 • 訪談法 • 焦點團體法 • 觀察法 • 大聲思考法 • 個案研究法
使用者意見的搜集 • 利用訪談或問卷調查搜集使用者意見。 • 利用e-mail (網頁“Mailto”連結) 或網頁表格(web form) 搜集使用者意見。 • 使用者意見可以提供質化資訊,瞭解讀者使用行為背後的因素。