Добро пожаловть на мой небольшой блог. Буду рад если он окажется полезным.
Apache
Продолжаю выкладывать записи вебинаров Cloud.ru и сегодня предлагаю вашему вниманию вебинар про Spark. Про Spark я знал, только то, что оно бывает, а теперь я знаю что это такое и что мне в этом направлении развиваться смысла нет и паровоз Read more
Установка на сервер локально Устанавливаем JDK: Создаем пользователя и даем ему права sudo: Скачиваем и распаковываем Kafka: Редактируем конфигурационный файл ~/kafka/config/server.properties Добавляем: Изменяем: Создаем сервис для автозапуска zookeeper /etc/systemd/system/zookeeper.service Создаем сервис для запуска kafka /etc/systemd/system/kafka.service: Запускаем: Проверка работоспособности Проверяем, что сервисы Read more
Подготовка Active Directory Пример интеграции с Active Directory Добавляем в файл airflow.cfg папаметры в секцию [webserver]: Выносим webserver_config.py из Docker Compose во внешний файл: Конфигурация webserver_config.py для интеграции с Active Directory: Настройка отправки почты из Air Flow Пример конфигурации AirFlow.cfg