実測値と予測値の列を貼り付けると、log(1+x) をとってから誤差を計算するRMSLEと、2乗のままのMSLEを求めます。値の大きさが大きく異なるデータでも、「何倍ずれたか」に近い感覚で評価できます。売上や閲覧数など、0以上の値の予測評価に使えます。
RMSLE(対数平均二乗誤差の平方根)計算ツール
実測値と予測値から、log(1+x) をとった誤差の二乗平均平方根であるRMSLEを計算します。比率のずれを重視する指標です。
使い方
- 「実測値」と「予測値」を同じ順番で入力します。どちらも0以上の値にしてください。
- 「計算する」を押すと、RMSLE・MSLE・データ数が表示されます。
- 表で各行の log1p(予測値) − log1p(実測値) と、その2乗を確認します。
計算式
MSLE = (1/n) × Σ ( log(1 + ŷᵢ) − log(1 + yᵢ) )²
RMSLE = √MSLE
yᵢ は実測値、ŷᵢ は予測値、n はデータ数、log は自然対数です。1を足してから対数をとる(log1p)ので、値が0でも計算できます。
計算例
サンプルの実測値 3, 5, 2.5, 7, 100 と予測値 2.5, 5, 4, 8, 80 で計算します。
| # | 実測値 | 予測値 | 対数の差 | 2乗 |
|---|---|---|---|---|
| 1 | 3 | 2.5 | −0.1335 | 0.0178 |
| 2 | 5 | 5 | 0 | 0 |
| 3 | 2.5 | 4 | 0.3567 | 0.1272 |
| 4 | 7 | 8 | 0.1178 | 0.0139 |
| 5 | 100 | 80 | −0.2207 | 0.0487 |
2乗の合計は約 0.2076 で、5で割ると MSLE ≒ 0.0415 です。平方根をとって RMSLE ≒ 0.2038 になります。5行目は誤差が20ありますが、比率で見ると3行目(2.5に対して4)のほうが大きく効いています。
結果の見方
- RMSLEは0に近いほどよい予測です。単位はなく、対数の差のスケールで表されます。
- 大きな値の行の誤差が結果を支配しにくいため、値の幅が広いデータに向いています。
- 同じ差でも、実測値より小さく予測した(過小予測)ほうが対数の差がやや大きくなり、少し強く罰せられます。
- RMSLEが小さいときは、おおよそ「予測と実測の比が e^RMSLE 倍程度ずれている」と読むこともできますが、あくまで目安です。
RMSLEが向いているデータ
RMSLEは、売上金額・閲覧数・住宅価格のように、値が0以上で、小さな値から非常に大きな値まで幅広く分布するデータの評価に向いています。たとえば実測値10を20と予測した場合と、実測値1,000を2,000と予測した場合は、どちらも「2倍のずれ」なので、RMSLEではほぼ同じ大きさの誤差として扱われます。
RMSEで評価すると、大きな値の行の誤差が結果をほぼ決めてしまいますが、RMSLEなら小さな値の行の予測精度も反映されます。モデルを学習するときに、目的変数を log1p で変換してからMSEを最小化すると、RMSLEを小さくすることにつながります。
注意点
- 負の値があると対数を正しく扱えないため、このツールではエラーにしています。
- RMSEとは単位もスケールも異なるため、RMSEとRMSLEの数値を直接比べることはできません。
- log1p を使う定義が一般的ですが、1を足さずに対数をとる資料もあります。他の結果と比べるときは定義をそろえてください。
- 対数の底を10や2にすると値が変わります。このツールは自然対数です。
RMSLEのよくある質問
Q. RMSLEとRMSEの違いは何ですか?
A. RMSEは誤差そのものの大きさを、RMSLEは対数をとった後の差(比率に近いずれ)を見ます。値の幅が広いデータでは、RMSLEのほうが大きな値に引っ張られにくくなります。
Q. なぜlogに1を足すのですか?
A. log(0) は計算できないため、1を足して0でも計算できるようにしています。この関数はlog1pと呼ばれます。
Q. 予測値がマイナスになったらどうすればよいですか?
A. RMSLEでは扱えません。0以上になるように予測を補正するか、RMSEやMAEなど別の指標を使ってください。
