Всем привет! На канале Data analysis | Анализ данных | DA разбираются темы и вопросы, которые должен знать аналитик данных, имеющий опыт 3-6 лет. Все темы взяты из реальных вакансий, опубликованных на hh.ru.

Будет полезно, если вы являетесь аналитиком данных (начинающим или опытным) или работаете по смежной профессии, либо просто интересуетесь базами данных, Python, SQL, экономикой и финансами и всеми производными от этих тем.

🟠Список разобранных вопросов:

✅Python:

▶️Эмбеддинги предложений
▶️Алгоритм кластеризации
▶️Кластеризация текстовой информации
▶️Визуализация: Matplotlib
▶️Визуализация: Seaborn
▶️Python в Tableau
▶️Python + SQL: Cx_oracle
▶️Большие данные в Python: Dask
▶️Массовая загрузка файлов в БД

✅SQL:

▶️PARTITION (оконные функции)
▶️PARTITION (партиционирование)
▶️Процедуры: разбор IN | OUT | IN OUT
▶️Процедуры: объявления и исключения
▶️PACKAGE (пакеты)
▶️Циклы LOOP, WHILE, FOR
▶️CURSOR
▶️Индексы
▶️Представления (Views)
▶️Материализованные и нематериализованные views
▶️Pivot в SQL
▶️Hints (хинты)
▶️EXPLAIN PLAN
▶️TRIGGER (триггеры)

✅Базы данных:

▶️Какие бывают базы данных
▶️Виды БД наглядно
▶️ACID и BASE
▶️Типы данных
▶️OLAP-кубы
▶️Проектирование баз данных
▶️Разница между БД и DWH
▶️Витрины данных
▶️ETL и ELT процессы
▶️Звездочка, снежинка, Data Vault
▶️Слои данных в DWH
▶️Нормализация

✅Инструменты:

▶️Обзор Hadoop
▶️Обзор Hive
▶️Обзор Impala
▶️Обзор Airflow
▶️Обзор ClickHouse
▶️Массивы, groupArray, groupUniqArray, uniq
▶️arraySort, arrayReverseSort и arrayFilter
▶️Tableau
▶️Arenadata Catalog
▶️Qlik Sense
▶️Informatica PowerCenter

✅А/Б тестирование:

▶️Основы А/Б тестов
▶️А/Б тесты на практике
▶️Математические методы проверки результатов
▶️Инструменты А/Б тестирования

✅Работа с данными:

▶️Парадокс Симпсона
▶️Банковские клиенты
▶️Клиентская информация в банковском DWH
▶️Банковские продукты
▶️Продуктовая информация в банковском DWH
▶️Счета, баланс и фин рез в банковском DWH
▶️Качество данных
▶️Метаданные
▶️Source-to-Target Mapping

🟠В ближайшем будущем будем разбирать:

▶️Больше про SQL и базы данных: архитектуру и т.п.
▶️Больше питоновских библиотек и кейсов
▶️Про банковские данные
▶️Актуальные инструменты, в частности BI-инструменты и ETL-инструменты

🧩 Пишем игру Pac-Man на Python в 300 строк кода

• В данной статье мы напишем легендарную игру Pac-Man на Python, уместив ее в 300 строчек кода.

🧷 Читать статью

#Статья

High-speed VDS — решение для Python-разработчиков, которым важны скорость, стабильность и полный контроль:

— Процессоры Intel Xeon Gold 3-го поколения: высокая производительность при любых задачах — от обработки запросов до численных расчетов.
— Сеть до 10 Гбит/с, безлимитный трафик: никаких неожиданных ограничений при работе с API, базами данных или внешними сервисами.
— Быстрый старт: автоматическая установка Ubuntu/Debian — разверните окружение и запустите uvicorn или celery за пару минут.
— Гибкая тарификация: платите посуточно, без комиссий и переплат — идеально для тестов, стендов и MVP.
— Быстрое масштабирование: добавляйте CPU, RAM или SSD к существующему серверу без пересоздания.
— Скидки на длительную аренду: оставайтесь с нами на еще более выгодных условиях.
— Круглосуточная поддержка в чате: быстро реагирует на любые вопросы.

Подходит для веб-приложений на Django/FastAPI/Flask, ботов, парсеров, ML-стендов, CI/CD и любых Python-проектов, где важна скорость и надежность.

🔗 Попробуйте — и почувствуйте разницу!

📌 Модуль Loguru в Python, приятное ведение журналов.

• Loguru - это модуль Python, целью которой является приятное ведение журналов в Python.

• При создании приложения практически всегда лень настраивать регистратор стандартной библиотеки loging, а вместо него используется функция print(). Ведение журналов имеет фундаментальное значение для каждого приложения и упрощает процесс отладки. loguru позволяет начать использовать ведение журнала с самого начала и без настройки. Это так же просто, как loguru import logger.

• Модуль loguru предназначен для того, чтобы сделать ведение логов менее болезненным и плюс ко всему добавляет ряд полезных функций.

Установка модуля loguru в виртуальное окружение (код на картинке).

📕 Документация

#урок