行動式與 Web UI 測試結果報告

從裝置、模擬器或工作台執行行動式測試之後,依預設會顯示行動式 Web 報告。如果只從 Rational® Test Workbench 產生測試,則會產生統計報告。行動式 Web 報告提供所記錄和播放的每一個動作的詳細資料,包括:思考時間、回應時間,以及有助您識別問題的警告訊息。統計報告會彙總執行的性能、顯示該項執行最重要的資料、彙總資源監視效能,以及提供平均步驟回應時間圖。

行動式與 Web UI 報告

一般測試資訊
首先,報告顯示所產生測試的一般資訊,如下所示:
  • 測試的名稱、儲存它的專案,其前次產生的日期和時間。
  • 測試執行的狀態(成功或失敗)以及警告數目(若有的話)。
  • 測得的回應時間值上限,以及一個動態鏈結,讓您切換至套用該值的步驟。
  • 受測試應用程式的名稱,以及該應用程式的其他詳細資料。
  • 用來產生測試的裝置。
  • 測試執行的持續時間。
測試元素的詳細資料
然後,報告彙總每一個已執行的步驟,以提供測試元素的詳細資料,如下所示:
  • 動作之間的思考時間。
  • 從開始執行測試到啟動動作所花費的時間。
  • 測得的回應時間。
  • 執行喜好設定的相關資訊,這是指測試執行喜好設定中啟用的思考時間上限。
  • 回應時間計算的相關警告:
    • 指出在執行測試期間是否未偵測到進度監視器,並且應該修改原則同步化。
    • 指出因同步化原則,未測量回應時間。回應時間是指應用程式對一般使用者動作做出反應所花的時間。

統計報告

整體頁面
首先,報告會提供摘要,如下所示:
執行摘要
彙總所執行測試的相關資訊:所執行測試的經歷時間、執行狀態、名稱。
行動式執行測試
彙總執行的性能,並顯示該項執行最重要的資料。此資料包括執行測試期間所啟動的應用程式 AUT 數目、已嘗試和已完成的步驟總數、完成百分比、失敗的步驟數目(若有的話),以及錯誤數目。
步驟效能
報告包含線條圖,顯示該項執行 10 個最長的平均步驟回應時間。圖形後面的表格提供每一個步驟的下列資訊:
  • 在執行期間,該步驟的要求回應時間下限。
  • 該項執行的平均要求回應時間。
  • 在執行期間,該步驟的回應時間上限。
  • 該項執行的回應時間標準差。
  • 嘗試率
  • 嘗試次數。
資源
報告顯示下列依應用程式層次和裝置層次來監視的資源的圖表:
  • CPU:依受測試應用程式和行動式裝置,顯示處理器的用量。
  • 已用的實體記憶體:依受測試應用程式和行動式裝置,顯示實體記憶體的用量。
  • 電池:依行動式裝置,顯示電池的用量。
  • 已傳輸的網路:依受測試應用程式和行動式裝置,顯示已送出的資料量。
  • 已接收的網路:依受測試應用程式和行動式裝置,顯示已收到的資料量。

意見