Программирование SCADA — удалённая работа в Москве

Пожелания и особенности: Нужна консультация как Реализовать на Apache Spark в Scala конвейеры для загрузки и кэширования данных о фильмах и оценках, вычислять и обновлять агрегированные средние рейтинги, поддерживать ad-hoc запросы по жанрам и поступающие новые оценки, а затем построить сервис рекомендаций: индексировать фильмы через LSH, искать по сходству жанров, предсказывать рейтинги с помощью базового нормализованного метода и ALS из Spark MLlib и выдавать топ-K персонализованных рекомендаций, соблюдая структуру skeleton-кода, используя IntelliJ IDEA, sbt и обеспечивая прохождение автоматических тестов.