Я. Гудфеллоу, И. Бенджио, А. Курвилль

x
, возможно, более осмысленное, чем расстояние в самом 
пространстве 
x
. Аналогично расстояние в пространстве 
h
y
определяет меру 
сходства между парами точек в пространстве 
y
.
Обе эти функции сходства 
обозначаются штриховыми двусторонними стрелками. Помеченные при-
меры (штриховые горизонтальные линии) – это пары 
(
x
,
y
)
, которые позво-
ляют обучить одностороннее или двустороннее отобра жение (сплошная 
двусторонняя стрелка) между представлениями 
f
x
(
x
)
и 
f
y
(
y
)
и скрепить эти 
представления друг с другом. После этого обучение без примеров произ-
водится следующим образом. Мы можем ассоциировать изображение 
x
test
со словом 
y
test
, даже если нет ни одного изображения этого слова, просто 
потому что представления слова 
f
y
(
y
test
)
и изображения 
f
x
(
x
test
)
можно свя-
зать между собой с помощью отображения между пространствами пред-
ставлений. Это работает, потому что, хотя изображение и слово никогда не 
были объединены в пару, соответствующие им векторы признаков 
f
x
(
x
test
)
и 
f
y
(
y
test
)
сопоставлены друг с другом. Идея рисунка подсказана Грантом 
Хачатряном

---

456 

 
Обучение представлений 
Сначала поговорим о том, как обучение с частичным привлечением учителя мо-
жет закончиться неудачей, поскольку обучение 
p
(