異常値(外れ値)とは何か?
統計学において、異常値(外れ値)とは、データ集合の他の点と大きく離れた観測値のことです。測定ミスや入力ミス、あるいは全体の傾向を代表しない特殊な事象を示すことがあります。
異常値の見つけ方
異常値は視覚的にプロットを確認することで見つけられます(例:箱ひげ図や散布図)。数値的には、zスコアや標準化残差などの偏差指標を計算して判定します。
分析への影響と対処法
異常値がデータに含まれると、平均や回帰係数などの統計結果が歪む可能性があります。そのため、解析前に異常値の影響を評価し、必要に応じて除外するか、情報として保持するかを判断します。
異常値の具体例
- 学生のテスト結果で、極端に高い点数はカンニング、極端に低い点数は試験準備不足を示すことがあります。
- 売上データで、突発的な大幅増は特別キャンペーンや単発取引、急激な減少は店舗の業績不振を表すことがあります。
- 医療データで、異常に高い/低い数値は疾患や異常状態の兆候で、追加検査が必要です。
異常値は必ずしもエラーではない
異常値がエラーや例外的な観測だけでなく、実際の変化を反映している場合もあります。たとえば株価の急上昇は好決算の結果であり、急落は悪材料によるものです。
結論
異常値の有無や原因を慎重に調査し、その統計的意味合いを正しく判断することが重要です。
