言語処理のための機械学習入門（第二刷）正誤表

言語処理のための機械学習入門（第二刷）正誤表
Hiroya Takamura
[email protected]
平成 27 年 7 月 6 日
第1章
• p.7, (thanks to お茶大小林研ゼミ参加者の皆様)
誤：表現してしまうこともある
正：表現してしまうこともある (本書でもそのようにする)
• p.12, 上の方にある凸計画問題の例 (thanks to お茶大小林研ゼミ参加者の皆様)
誤：max . − x1 x2 ,
正：max . − x21 − x22 ,
• p.13, 真ん中あたりにあるニュートン法の更新式 (thanks to お茶大小林研ゼミ参加者の皆様)
符号は単純なミスです。は、実応用においてこのような係数をつけることも多いのですが、もと
もとのニュートン法にはついていません。ですので、式からはを除き、コメントを入れることに
しました。
誤：
old
xnew = xold + Hx−1
),
old ∇x f (x
という更新式で計算を行う。
正：
old
xnew = xold − Hx−1
),
old ∇x f (x
という更新式で計算を行う。最急勾配法の場合のように学習率を積算する場合もある。
• p.13, 一番下のニュートン法の更新式 (thanks to お茶大小林研ゼミ参加者の皆様)
多次元における一つの要素についての式を書こうとして不正確になっていました。ここでは、よ
く説明に用いられる一次元の式との対応を明確にしたいという意図がありましたので、はじめか
ら一次元に落としてしまうことにします。また、上式でニュートン法にはをつけないことにした
ので、ここでも除きます。
誤：方程式 h(x) = 0 を解く場合には，記法の関係で x の i 番目の要素 xi についての更新式を書
くと
(
xnew
= xold
−
i
i
1
δh(xold
i )
δxi
)−1
h(xold
i ),
正：例えば一次元の方程式 h(x) = 0 を解く場合の更新式は
(
xnew = xold −
δh(xold )
δx
)−1
h(xold ),
• p.18, 1.2.3 項の最後の文 (thanks to お茶大小林研ゼミ参加者の皆様)
３次元空間を考えているので、等高線というより等位面。
誤：等高線の法線方向
正：等位面の法線方向
• p.36, 式 (1.32) (thanks to 青柳先生)
誤：P (x|µ),
正：P (x; µ)
• p.38, (thanks to 菊池くん)
離散確率変数の平均の定義式にタイポがありました。
∑
誤：mX =
xP (x)(X = x),
∑
正：mX =
xP (X = x)
• p.39, (thanks to 菊池くん)
多次元正規分布の説明が不正確でした。
誤：2π を d 乗するだけで
正：2πσ 2 を d 乗するだけで
• p.43, (thanks to 菊池くん)
P (D) の偏微分の式の分子に、∂ が抜けていました。
log P (D)
,
∂µ
∂ log P (D)
正：
∂µ
誤：
• p.50, 例題 1.23 の解答。（thanks to 真鍋さん、笹野さん）
最後の数値が間違っていました。途中の式は合っています。
誤：1.64,
正：1.41.
第2章
• p.62, (thanks to 笹野さん)
「のべ」の漢字に変換ミスがありました。
誤：述べ語数,
正：延べ語数
第3章
2
• p.83, k-平均法のアルゴリズム (thanks to お茶大小林研ゼミ参加者の皆様)
cmax をとる行で ∀c がついていますが、これは不要でした。
誤：∀c, cmax =
正：cmax =
• p.85, P (c|x(i) ) の計算 (thanks to お茶大小林研ゼミ参加者の皆様)
途中の式で、(i) が抜けていました。
P (x,c)
P (x)
P (x(i) ,c)
P (x(i) )
誤：P (c|x(i) ) =
正：P (c|x(i) ) =
• p.86, (thanks to 菊池くん)
クラスタリングアルゴリズムの初期値に「’」が抜けていました。
誤：m1 , m2 , · · · , mk
正：m01 , m02 , · · · , m0k
• p.87, (thanks to 菊池くん)
収束判定の指標に添字の c が抜けていました。
∑
誤： c |m − m0 |2
∑
正： c |mc − m0c |2
• p.89, 第二段落。「Q 関数」が二回登場する箇所。(thanks to 京大黒橋研の方々)
単調増加するのは不完全データの対数尤度であり、Q 関数ではありません。
誤：Q 関数,
正：対数尤度
∑
x(i) ∈D
log
∑
c
P (c, x(i) ; θ)
• p.93, 一番上の数式の直後の文 (thanks to お茶大小林研ゼミ参加者の皆様)
式変形の説明が不完全でした。上の数式を 0 としていることを明記すべきでした。
∑
誤：であるので，制約 x qx,c = 1 とあわせると，
∑
正：であるので，これを 0 として，制約 x qx,c = 1 とあわせると，
第4章
• p.106, 例題 4.2 のちょっと上 (thanks to 坂口さん)
誤：d(1) に good が 2 回出現しているが,
正：d(1) に good が 3 回出現しているが,
• p.131, 下から 5 行目のところ (thanks to お茶大小林研ゼミ参加者の皆様)
等号付き不等号の書き方がおかしかったです。
誤：2x21 + 4x1 x2 + 4x1 − 5 >= 0 のとき正クラスに
正：2x21 + 4x1 x2 + 4x1 − 5 ≥ 0 のとき正クラスに
• p.133, 例題の解答の最後の部分 (thanks to お茶大小林研ゼミ参加者の皆様)
P,N が斜体になっているが、他は立体なので、立体で統一すべきでした。
3
誤：
φ(d(1) , P ) = (1, 1, 0, 0, 0, 0, 0, 0),
φ(d(2) , P ) = (0, 0, 1, 0, 0, 0, 0, 0),
φ(d(3) , N ) = (0, 0, 0, 0, 0, 1, 0, 1),
φ(d(4) , N ) = (0, 0, 0, 0, 0, 1, 1, 0).
φ(d(1) , P) = (1, 1, 0, 0, 0, 0, 0, 0),
φ(d(2) , P) = (0, 0, 1, 0, 0, 0, 0, 0),
φ(d(3) , N) = (0, 0, 0, 0, 0, 1, 0, 1),
φ(d(4) , N) = (0, 0, 0, 0, 0, 1, 1, 0).
正：
• p.136, 収束値 w∗ (thanks to お茶大小林研ゼミ参加者の皆様)
正しい収束値と異なるという指摘がありました。
「∼に収束したとして」と仮定で話を進めており
論旨に問題ないとはいえ、正しくない収束値を用いているのはまずかろうということで、修正い
たします。
誤：
w∗
= (0.40, −0.07, 0.05, −0.20, −0.40, 0.33, 0.05, 0.80)
正：
w∗
=
(0.42, −0.25, 0.06, −0.26, −0.42, 0.25, −0.06, 0.26)
• p.137, 例題 4.14 の計算 (thanks to お茶大小林研ゼミ参加者の皆様)
上記の修正に伴い、例題 4.14 の計算結果が変わります。分類結果は変わりません。
誤：
w · φ(d, P ) =
w · φ(d, N )
0.05 × 1 − 0.20 × 1 = −0.15,
= 0.05 × 1 + 0.80 × 1 = 0.85,
であるので，N に分類される。確率値を出してみると，
1
exp(w · φ(d, P )) =
Zw
=
1
exp(w · φ(d, N )) =
Zw
=
exp(−0.15)/(exp(−0.15) + exp(0.85))
0.86/(0.86 + 2.34) = 0.27,
exp(0.85)/(exp(−0.15) + exp(0.85))
2.34/(0.86 + 2.34) = 0.73
正：
w · φ(d, P ) =
0.06 × 1 − 0.26 × 1 = −0.20,
w · φ(d, N ) =
−0.06 × 1 + 0.26 × 1 = 0.20,
4
であるので，N に分類される。確率値を出してみると，
1
exp(w · φ(d, P )) =
Zw
=
1
exp(w · φ(d, N )) =
Zw
=
exp(−0.20)/(exp(−0.20) + exp(0.20))
0.82/(0.82 + 1.22) = 0.40,
exp(0.20)/(exp(−0.20) + exp(0.20))
1.22/(0.82 + 1.22) = 0.60
• p.137, 最後のニュートン法の式 (thanks to お茶大小林研ゼミ参加者の皆様)
1 節のニュートン法の記述を変更・修正したことに伴い、こちらも修正します。
誤：
−1
old
wnew = wold + Hw
),
old ∇w L(w
正：
−1
old
wnew = wold − Hw
),
old ∇w L(w
第5章
• p.154, 本文下から 3 行目。(thanks to 小林先生)
∑
誤： D log P (y|x),
∑
正： (x(i) ,y(i) )∈D log P (y (i) |x(i) )
• p.157, 例題の式 (thanks to お茶大小林研ゼミ参加者の皆様)
1 つめと 2 つめの式と、3 つめと 4 つめの式が同じで、それぞれ片方は不要でした。
誤：
ψ1 (c1 , B) = 1.0,
ψ2 (c1 , c1 ) = 0.2,
ψ1 (c1 , B) = 1.0,
ψ2 (c1 , c2 ) = 0.3,
ψ1 (c2 , B) = 1.0,
ψ2 (c2 , c1 ) = 0.1,
ψ1 (c2 , B) = 1.0,
ψ2 (c2 , c2 ) = 0.1,
ψ3 (c1 , c1 ) = 0.2,
ψ4 (c1 , c1 ) = 0.3,
ψ5 (E, c1 ) = 1.0,
ψ3 (c1 , c2 ) = 0.2,
ψ4 (c1 , c2 ) = 0.1,
ψ5 (E, c2 ) = 1.0.
ψ3 (c2 , c1 ) = 0.1,
ψ4 (c2 , c1 ) = 0.2,
ψ3 (c2 , c2 ) = 0.1,
ψ4 (c2 , c2 ) = 0.1,
ψ1 (c1 , B) = 1.0,
ψ2 (c1 , c1 ) = 0.2,
ψ3 (c1 , c1 ) = 0.2,
ψ1 (c2 , B) = 1.0,
ψ2 (c1 , c2 ) = 0.3,
ψ3 (c1 , c2 ) = 0.2,
ψ2 (c2 , c1 ) = 0.1,
ψ3 (c2 , c1 ) = 0.1,
ψ2 (c2 , c2 ) = 0.1,
ψ3 (c2 , c2 ) = 0.1,
ψ4 (c1 , c1 ) = 0.3,
ψ5 (E, c1 ) = 1.0,
ψ4 (c1 , c2 ) = 0.1,
ψ5 (E, c2 ) = 1.0.
ψ4 (c2 , c1 ) = 0.2,
ψ4 (c2 , c2 ) = 0.1,
正：
5
付録
• p.182, 10 行目。(thanks to 青柳先生)
誤：スカラー変数 λ,
正：スカラー変数 t
• p.182, 図 A.1(b)。(thanks to 青柳先生)
誤：t ≤ −1,
正：t ≤ 0
章末問題解答
• p.191, 【６】の 4 行目の最後。(thanks to 青柳先生)
誤：g(x)∗ ,
正：g(x∗ )
索引
• p.207, (thanks to 笹野さん)
「のべ」の漢字に変換ミスがありました。
誤：述べ語数,
正：延べ語数
6

Download Report