16/07/23 21:42:58.74 KzKU6eO/.net
>>837 はユニグラムの例だけどその仲間を挙げてみる
Aは有限集合、Rは実数の集合
A^nはAの元を文字とする長さnの文字列の集合(直積)
A^*はAの元を文字とする任意長の文字列の集合(自由モノイド)
RXは集合Xの元を基底とする実数上のベクトル空間(自由ベクトル空間)
ユニグラム = バッグオブA : A^* -> RA
abbca -> 2a + 2b + c
バイグラム: A^* -> RA^2
abbca -> ab + bb + bc + ca
スキップグラム: A^* -> (RA, RA)のテンソル積 = RA^2
abbca -> a(2b) + b(a + b + c) + b(2a + b + c) + c(a + 2b) + a(b + c)
= 3ab + ac + 3ba + 2bb + 2bc + ca + 2cb
富豪グラム: A^* -> RA^*
abbca -> 2a +...+ c + ab +...+ ca + abb +...+ bca +...
計算間違いしてたらゴメン