Программисты — удалённая работа в Москве

Data Science. Разработка с нуля. Генерация изображений 1. Выбрать открытую диффузионную модель для генерации изображений по тексту, которая использует эмбеддинги текста на основе CLIP ( StableDiffusion v1.5). 2. Заменить CLIP эмбеддинг текста на другую версию CLIP, BLIP эмбеддинг и еще один эмбеддинг на выбор. 3. Сгенерировать изображения по одному и тому же промпту для трех видов эмбеддингов. Попробовать 5 промптов разной 4. Оценить результаты по 5 метрикам качества генерации изображений, обосновать выбор метрик. 5. Добавить полносвязный адаптер, чтобы приблизить ваши эмбеддинги к CLIP пространству. 6. Обучить адаптер на небольшом наборе пар (текст, эмбеддинг CLIP ). 7. Оценить полученный результат аналогично шагу 4 и сформулировать вывод. Рекомендуется использовать Pytorch и библиотеку diffusers.