Термин
Контрастное обучение
Короткое определение
Метод обучения, сближающий совпадающие пары и раздвигающий несовпадающие в пространстве эмбеддингов. Так CLIP связывает картинки с текстом.
Контрастное обучение учит модель схожести на примерах: показывает верные и неверные пары и вознаграждает сближение совпадений и разделение несовпадений. Оно создаёт общие пространства «картинка-текст», делающие возможными zero-shot распознавание и поиск.
Считаете параметры для своего продукта?
Поможем собрать энкодер-леддер и посчитать стоимость доставки – до старта разработки.