Системное программирование — удалённая работа в Москве

Системное программирование. Разработка с нуля. На основе ваших требований и анализа лучших практик в области создания парсеров, я подготовил подробное техническое задание. Оно структурировано так, чтобы максимально полно охватить все аспекты проекта и минимизировать недопонимание между заказчиком и разработчиком. ### 🎯 Техническое задание на разработку парсера вакансий **1. Сайты-источники данных** * **Основные целевые сайты:** `rabota.ru`, `hh.ru`, `superjob.ru`, `joblab.ru`, `zarplata.ru`. * **Требование к расширяемости:** Архитектура системы должна позволять относительно легко подключать новые сайты для парсинга в будущем, в том числе не российские. **2. Данные для сбора и их расположение** Для каждой компании необходимо собирать следующий массив данных. Все данные должны быть привязаны к компании-работодателю. | Поле данных | Описание | Особые указания | | :--- | :--- | :--- | | **Название компании** | Наименование компании-работодателя. | | | **Открытые должности** | Список всех открытых в компании вакансий. | Указывать в одной ячейке через запятую. | | **Контактный номер телефона** | Номер для связи. | Если номеров несколько, указывать в одной ячейке через запятую. | | **Контактная почта** | Электронный адрес для связи. | Если адресов несколько, указывать в одной ячейке через запятую. | | **Город** | Город расположения компании/вакансии. | | | **Адрес** | Физический адрес офиса. | | **Требования к наглядности:** Для каждого сайта-источника необходимо предоставить ссылку на пример страницы с вакансиями компании и **приложить аннотированный скриншот**, где четко отмечены места расположения каждого из перечисленных полей данных. Если какое-то поле (например, телефон) есть не на всех страницах, необходимо предоставить ссылку на страницу, где оно присутствует. **3. Алгоритм работы и фильтры** Парсер должен управляться через графический интерфейс или конфигурационный файл с поддержкой следующих фильтров поиска: * **Город** * **Должность** (поиск по ключевым словам) * **Поиск по готовой ссылке** — возможность вставить URL с одним из сайтов-источников, на котором уже применены нужные фильтры. Это позволяет использовать встроенные на сайтах возможности расширенного поиска. **4. Формат сохранения данных** * **Основной формат:** **Excel (.xlsx)**. Программа должна создавать файл, готовый к открытию в Microsoft Excel или аналогичных программах. * **Структура файла:** Вы должны предоставить разработчику **шаблон XLSX-файла**, составленный вручную. В этом файле на примере одной компании должно быть показано, как именно должны выглядеть собранные данные: названия столбцов, порядок их следования, формат записи данных (например, телефоны и должности через запятую в одной ячейке). Это исключит разночтения. **5. Дополнительные функциональные требования** * **Обход ограничений:** Необходимо предусмотреть механизм работы через **прокси-серверы** для избежания блокировок IP-адресов. * **Обработка авторизации:** На некоторых сайтах (например, superjob.ru) контактные данные (телефоны, email) видны только авторизованным пользователям. Программа должна поддерживать авторизацию на сайтах-источниках. Для этого необходимо предоставить валидные тестовые логины и пароли. * **Устойчивость к ошибкам:** Программа должна уметь приостанавливать работу при пропадании интернета или ошибках на сайте и автоматически возобновлять ее после восстановления связи, делая несколько попыток. * **Планировщик:** Реализовать функцию **ежедневного автоматического запуска** для обновления данных. **6. Архитектура и расширяемость** Это ключевое требование для будущего развития проекта. Система должна быть модульной. * **Ядро системы:** Отвечает за общее управление, обработку фильтров, экспорт в XLSX. * **Модули парсинга (Плагины):** Для каждого сайта-источника должен быть создан отдельный модуль (плагин), который содержит всю специфическую логику для работы с этим сайтом (особенности разметки, навигации, авторизации). Это позволит в будущем подключать новые сайты путем написания нового модуля, не переписывая ядро системы.

Системное программирование. Разработка с нуля. ### 🎯 Техническое задание на разработку парсера вакансий **1. Сайты-источники данных** * **Основные целевые сайты:** `rabota.ru`, `hh.ru`, `superjob.ru`, `joblab.ru`, `zarplata.ru`. * **Требование к расширяемости:** Архитектура системы должна позволять относительно легко подключать новые сайты для парсинга в будущем, в том числе не российские. **2. Данные для сбора и их расположение** Для каждой компании необходимо собирать следующий массив данных. Все данные должны быть привязаны к компании-работодателю. | Поле данных | Описание | Особые указания | | :--- | :--- | :--- | | **Название компании** | Наименование компании-работодателя. | | | **Открытые должности** | Список всех открытых в компании вакансий. | Указывать в одной ячейке через запятую. | | **Контактный номер телефона** | Номер для связи. | Если номеров несколько, указывать в одной ячейке через запятую. | | **Контактная почта** | Электронный адрес для связи. | Если адресов несколько, указывать в одной ячейке через запятую. | | **Город** | Город расположения компании/вакансии. | | | **Адрес** | Физический адрес офиса. | | **Требования к наглядности:** Для каждого сайта-источника необходимо предоставить ссылку на пример страницы с вакансиями компании и **приложить аннотированный скриншот**, где четко отмечены места расположения каждого из перечисленных полей данных. Если какое-то поле (например, телефон) есть не на всех страницах, необходимо предоставить ссылку на страницу, где оно присутствует. **3. Алгоритм работы и фильтры** Парсер должен управляться через графический интерфейс или конфигурационный файл с поддержкой следующих фильтров поиска: * **Город** * **Должность** (поиск по ключевым словам) * **Поиск по готовой ссылке** — возможность вставить URL с одним из сайтов-источников, на котором уже применены нужные фильтры. Это позволяет использовать встроенные на сайтах возможности расширенного поиска. **4. Формат сохранения данных** * **Основной формат:** **Excel (.xlsx)**. Программа должна создавать файл, готовый к открытию в Microsoft Excel или аналогичных программах. * **Структура файла:** Вы должны предоставить разработчику **шаблон XLSX-файла**, составленный вручную. В этом файле на примере одной компании должно быть показано, как именно должны выглядеть собранные данные: названия столбцов, порядок их следования, формат записи данных (например, телефоны и должности через запятую в одной ячейке). Это исключит разночтения. **5. Дополнительные функциональные требования** * **Обход ограничений:** Необходимо предусмотреть механизм работы через **прокси-серверы** для избежания блокировок IP-адресов. * **Обработка авторизации:** На некоторых сайтах (например, superjob.ru) контактные данные (телефоны, email) видны только авторизованным пользователям. Программа должна поддерживать авторизацию на сайтах-источниках. Для этого необходимо предоставить валидные тестовые логины и пароли. * **Устойчивость к ошибкам:** Программа должна уметь приостанавливать работу при пропадании интернета или ошибках на сайте и автоматически возобновлять ее после восстановления связи, делая несколько попыток. * **Планировщик:** Реализовать функцию **ежедневного автоматического запуска** для обновления данных. **6. Архитектура и расширяемость** Это ключевое требование для будущего развития проекта. Система должна быть модульной. * **Ядро системы:** Отвечает за общее управление, обработку фильтров, экспорт в XLSX. * **Модули парсинга (Плагины):** Для каждого сайта-источника должен быть создан отдельный модуль (плагин), который содержит всю специфическую логику для работы с этим сайтом (особенности разметки, навигации, авторизации). Это позволит в будущем подключать новые сайты путем написания нового модуля, не переписывая ядро системы.

Системное программирование. Разработка с нуля. Задача: Разработать программный сервис для автоматизации действий на учебном сайте, включающий: 1. Автоматический вход (логин) на сайт для множества различных ученических аккаунтов; 2. Автоматическое получение и анализ домашних заданий через API или web-интерфейс сайта; 3. Решение заданий с помощью языковой модели ИИ (GPT-5, Grok-4 и др.), формирование и отправка результатов обратно на сайт; 4. Поддержка параллельной/массовой работы с многочисленными аккаунтами («многопоток»); 5. Гибкая интеграция ИИ-моделей с возможностью замены backend. Требования: • Клиент-бот должен максимально эмулировать действия пользователя либо через прямое взаимодействие с API (если доступно), либо через эмуляцию браузера (Selenium, Playwright и т.д.). • Решение должно быть расширяемым (будущая интеграция других моделей, новых видов заданий/сайтов); • Обязательна документация (как настроить, использовать, менять ИИ, добавлять аккаунты); • Минимизация риска блокировки аккаунтов (человеко-подобное поведение, смена user-agent, прокси). В результате нужно получить: • Рабочий прототип на Python (или другом согласованном языке); • Инструкции по развертыванию, использованию и дальнейшей кастомизации; • Исходный код с комментариями и отдельным README-файлом.

Системное программирование. Разработка с нуля, доработка существующего продукта, настройка. Разработка программы автоматизации учета изделий на предприятии.

Системное программирование. сделать работу по информатике. Нужно сделать такую работу через Word.

Системное программирование. Настройка, разработка с нуля.

Системное программирование. Настройка, доработка существующего продукта. Описание Мы — быстрорастущая e-commerce компания с продвинутой IT-инфраструктурой (Google Sheets, PostgreSQL, 1С), ищем в команду инженера по данным на неполный день. Задача — стать техническим интегратором между системами: обрабатывать выгрузки из 1С, строить пайплайны данных в PostgreSQL и автоматизировать визуализацию в Google Sheets / BI. Что предстоит делать: • Принимать регулярные выгрузки из 1С, чистить, преобразовывать, загружать в PostgreSQL • Поддерживать и развивать структуру БД (ETL-таблицы, витрины, агрегации) • Писать скрипты (Google Apps Script) для автоматического обновления таблиц и отчётов • Делать интеграции между Google Sheets ↔ PostgreSQL • Строить простые автоматизации для внутренних процессов Ожидания от кандидата: • Отличное знание SQL (PostgreSQL): JOIN, агрегаты, оконные функции, оптимизация • Опыт работы с Google Apps Script / Google Sheets API • Понимание ETL и структуры потоков данных • Умение работать самостоятельно, видеть «картину целиком», а не только задачи • Плюсом будет опыт с Python, REST API, BI (Power BI / Metabase / Looker Studio), знание работы маркетплейсов.