m

統計顯著性

付費功能:只有部份付費方案才可使用「統計顯著性」功能;查看您的方案是否有此功能。

您可以查看特定回覆群組回答調查問卷問題的方式在統計方面是否有顯著差異。若要使用 SurveyMonkey 的統計顯著性功能:

  • 在為調查問卷中的某個問題新增「比對」規則時,開啟統計顯著性功能。選擇要比對的群組,依群組細分並且並列比對調查問卷結果。
  • 檢查調查問卷中的問題的資料表,瞭解不同群組回答調查問卷的方式在統計方面是否有顯著差異。

檢視統計顯著性

下列步驟將引導您建立可以顯示統計顯著性的調查問卷。

步驟 1:在調查問卷中新增封閉式問題

若要在分析答案時顯示統計顯著性,您必須將「比對」規則套用於調查問卷中的一個問題。

您必須在調查問卷設計中使用下列任一問題類型,才能套用「比對」規則並計算統計顯著性:

務必將您的答案選項細分成有意義的群組。您在建立「比對」規則時選擇進行比對的答案選項將用於交叉比對您調查問卷其餘部分的資料。

步驟 2:收集回覆

完成調查問卷設計之後,請建立收集器以便分發調查問卷。寄送調查問卷的方式分為數種。

您預定用於「比對」規則中的每個答案選項至少要有 30 個回覆,方可開啟並查看統計顯著性。

提示!您可以使用 SurveyMonkey Audience 購買調查問卷回覆。以性別、年齡、收入和就業狀態等明確屬性為目標,獲得您鎖定對象的答案。
步驟 3:套用「比對」規則

若要開啟統計顯著性功能,您必須為調查問卷中的某個問題加入「比對」規則,將受訪者區分成不同的群組。

若要套用「比對」規則:

  1. 前往調查問卷的 [分析結果] 區段。
  2. 在左側側邊列的「目前的資料檢視頁面」區段中,按一下 [+比對結果]。
  3. 按一下 [依問題和答案比較],除非您在調查問卷中使用了 A/B 比較檢測
  4. 使用下拉式功能表尋找所需問題。
  5. 選取您所需的群組答案選項。系統會使用這些群組將您調查問卷其餘部分的資料進行交叉比對。
  6. 按一下 [顯示統計顯著性] 旁的切換按鈕,開啟統計顯著性功能。每個群組中至少要有 2 個答案選項包含 30 個回覆,才能開啟統計顯著性功能。
  7. 按一下 [套用]。

若要在建立規則之後編輯群組,請在左側邊列中按一下規則右側的向下箭頭,然後按一下 [編輯規則]。

提示!您可以建立多個「比對」規則,但一次只能套用或檢視一個「比對」規則。
步驟 4:檢查資料表

套用「比對」規則之後,各個群組對於每個問題的回答會以併列檢視方式呈現,方便您查看其中的相似及差異之處。

我們會在問題圖表下方的資料表中反白顯示在統計上具有重要意義的答案選項。

  • 系統會自動計算下列問題類型的統計顯著性:選擇題下拉選單矩陣/評分表,以及排名
  • 資料表中的每一列各代表一個回覆群組。每個回覆群組各以一個英文字母代表,供您在資料表中對照。
  • 資料表中的每一欄各代表一個選項。

將滑鼠游標移到任一選項上方,即可查看詳細資訊。您會看見下列其中一個訊息:

訊息
說明
明顯低於此群組選擇該選項的可能性明顯低於其他反白顯示的群組。
明顯高於此群組選擇該選項的可能性明顯高於其他反白顯示的群組。
需要更多回覆您至少需要 30 個回覆,才能計算該群組的統計顯著性。
合併選項目前,我們無法計算合併選項的統計顯著性。請將選項取消合併。
隱藏選項目前,我們無法計算隱藏選項的統計顯著性。請取消隱藏選項。
無明顯差異選取此選項的群組與其他群組的頻率差異不大。

請將頁面向下捲動至 [何謂統計顯著性的差異?] 區段。"了解更多資訊。

步驟 5:分享結果

分享資料頁面

若您在線上分享調查問卷結果,查看分享資料頁面的人就能看到統計顯著性。

若要建立包含統計顯著性的分享資料頁面:

  1. 在左側邊列的 [目前的資料檢視頁面] 中,按一下您所建立的統計顯著性的「比對」規則。
  2. 在左側邊列的 [儲存的資料檢視頁面] 下,按一下 [+另存為...]
  3. 輸入資料檢視頁面的名稱,並按一下 [儲存]。
  4. 按一下頁面右上角的 [分享全部資料]。
  5. 完成分享資料頁面的設定

匯出

「摘要資料 PDF」和「PPT 匯出」中均包含統計顯著性資料。您的匯出會將具有明顯差異的回覆標註與其明顯不同之回覆群組的代表字母。

若要匯出包含統計顯著性的結果,請套用「比對」規則並匯出目前的資料檢視頁面

調查問卷範例

您想瞭解男性是否明顯比女性更滿意您的產品。

  1. 在您的調查問卷中新增兩個多選題問題﹕
     •  請問您的性別?([男]、[女])
     •您滿意/不滿意我們的產品嗎?([滿意]、[不滿意])
  2. 確定至少有 30 位受訪者選取的性別是 [男性],另有 30 位受訪者選取的性別是 [女性]。
  3. 新增問題「您的性別?」的比較規則,"並選取男性和女性選項為您的群組。
  4. 使用「您對產品多滿意或多不滿意?」問題圖表下方的資料表。"以查看任何答案選項是否會出現統計顯著差異。

何謂統計顯著差異?

統計顯著差異可以讓您藉由統計測試,瞭解某個群組的答案是否與另一個群組的答案相差甚遠。統計意義是指數字差異具有可信度,對於資料分析非常有助益。不過,您仍然應將結果是否重要列入考量,結果解讀或後續行動皆操之在您。

例如,假設來自女性的客訴比男性還要多。您如何知道其中的差異是否真的需要解決?建立調查問卷,瞭解男性客戶對於產品的滿意度是否較高,就是一種好方法。我們的統計顯著性功能運用統計公式,可以協助您判斷男性對於產品的滿意度是否明顯高於女性。您可以根據資料採取行動,而不需憑空臆測。

有統計顯著差異

若資料表中的結果以反白顯示,表示兩個群組之間有著非常大的差異。顯著性是指數字在統計意義上的差別很大,而不代表結果是否重要或具有意義。

沒有統計顯著差異

若資料表中的結果並沒有反白顯示,即使用於比對的百分比可能不同,仍表示兩個數字在統計上的差異並不大。

沒有統計顯著差異的回覆表示以您的樣本規模來說,兩個比對項目之間沒有顯著的差別,但不一定表示這些項目並不重要。若能擴大樣本規模,或許可以發現統計顯著差異。

樣本規模

若您的樣本規模非常小,只能突顯差異非常大的兩個群組。若樣本規模非常龐大,則無論差異大小,都會顯示為明顯差異。

不過,若兩個數字在統計上具有不同的意義,並不表示結果代表不同的意義。您必須決定這樣的差異對於您的調查問卷目標是否有意義。

計算統計顯著性

我們採用標準的 95% 可信度計算統計顯著性。當我們顯示具有統計顯著性的答案時,表示機率或採樣錯誤導致兩個群組出現差異的可能性低於 5%,通常會顯示為 p < 0.05。

我們使用下列公式計算群組之間的統計顯著性:

統計
說明
公式
a1第一個群組按特定方式回答問題的比例乘以該群組的樣本規模。
b1第二個群組按特定方式回答問題的比例乘以該群組的樣本規模。
混合樣本比例 (p)兩個群組的兩個比例合併之後的結果。
標準錯誤 (SE)計算您的比例與真實比例之間的差異。數字越小表示比例越接近真實比例,數字越大表示比例越偏離真實比例。使用者加的影像
測試統計 (t)t 統計量。某個數字與中數之間的標準偏差數。
統計顯著性若測試統計的絕對值大於中數 1.96* 標準偏差,即在統計上屬於明顯差異。

*1.96 是代表 95% 可信度的數字,因為學者 t 分佈函數的 95% 落在中數 1.96 標準偏差之內。

計算範例

繼續沿用上述範例,看看對於您的產品感到滿意的男性百分比是否明顯高於女性百分比。

假設您的男性受訪者和女性受訪者各 1000 位,結果發現 70% 的男性表示滿意您的產品,女性則是 65%。70% 是否明顯高於 65%?

我們使用下列調查問卷資料完成公式:

  • p1 (對產品感到滿意的男性所佔的百分比) = 0.7
  • p2 (對產品感到滿意的女性所佔的百分比) = 0.65
  • n1 (您的男性調查問卷受訪者人數) = 1000
  • n2 (您的女性調查問卷受訪者人數) = 1000
公式
範例
使用者加的影像使用者加的影像

由於測試統計的絕對值大於 1.96,表示男性和女性之間具有明顯差異。男性對於您的產品感到滿意的可能性高於女性。

隱藏統計顯著性

若要隱藏所有問題的統計顯著性:

  1. 在左側邊列中,按一下比較規則右側的向下箭頭。
  2. 按一下 [編輯規則]。
  3. 按一下 [顯示統計顯著性] 旁的切換按鈕,關閉統計顯著性功能。
  4. 按一下 [套用]。

若要隱藏其中一個問題的統計顯著性:

  1. 按一下問題圖表上方的 [自訂]。
  2. 按一下 [顯示選項] 標籤。
  3. 取消勾選 [統計顯著性] 旁邊的方塊。
  4. 按一下 [儲存]。

當您顯示統計顯著性時,會自動開啟交換列和欄顯示選項。若取消勾選此顯示選項,會一併關閉統計顯著性功能。

在為調查問卷中的某個問題新增「比對」規則時,開啟統計顯著性功能。檢查調查問卷中的問題的資料表,瞭解不同群組回答調查問卷的方式在統計方面是否有顯著差異。

獲得回答