Листочек 8: тут будет листочек про эмбединг#
Он когда-нибудь появится. Что можно поделать:
Позаписывать разные модели как автокодировщики:
pca
картинки
w2v
node2vec
elmo
ещё что-то
посчитать число параметров в fasttext
энкодер декодер с какими-нибудь свойствами для расстояний (типо все лежат в какой-нибудь залупе и тп)
Посчитать ченить в w2v и пооценивать параметры
Что-нибудь про классические механизмы внимания в автопереводах