Курс "Язык Python — Для бизнес аналитиков. Построение отчетов и визуализация данных для офисных приложений"Код: EDU-Python-29
Продолжительность - 5 дней Производится набор группы
Курс «Язык Python — Для бизнес аналитиков. Построение отчетов и визуализация данных для офисных приложений»Аудитория: предназначен для бизнес аналитиков, начинающих разработчиков отчетов, которые будут использовать язык Python для построения отчетов, управлением отображения данных, генерацией отчетности в стандартных форматах — WORD, EXCEL, PDF Начальная подготовка: желание автоматизировать свою непосредственную работу, средствами выполнения SQL запросов в базу данных и публикацией данных в файлы стандартных форматов Рассматриваются базы данных PostgreSQL и ClickHouse Программа курса1. Исталяция интерпретатора Python . Механизм PIP - и создание песочницы для выполнения кода приложения, подготовка песочницы для работы с базами данных на примерах с Oracle и Postgresql. 2. «Привет Мир» - Первое приложение, созданное и запущенное в песочнице. Анатомия приложения. Подключение и использование библиотек, использование модулей — простейших примерах. Далее, по ходу курса, будут определяться те или иные языковые конструкции, основные правила работы с языком Python. 3. Типы данных языка, встроенные типы данных. Основные встроенные типы данных языка Python и ПРАВИЛА PEP8 - которые не соблюдают, но соблюдать нужно. 4. А в какой среде разработки писать приложение. Вариантов много - но родные PyCharm — именно в этой среде и проходит вся работа по созданию отчетов. PIP - утилита и конфигурация песочницы, для взаимодействия с Excel, Word, файлами формата PDF. Дополнение песочницы средствами для работы с базой данных Oracle и Postgresql. В чем сходство и различия. 5. Обзор средств написания SQL запросов в базы данных Oracle и Postgresql (далее — База Данных ( DB)), использование колоночной базы данных ClickHouse. 6. Что такое запрос в базу данных. Как выполняется запрос, основные синтаксические команды языка SQL. Основная команда SQL для аналитических запросов — SELECT. Общее описание команды. Разделы SELECT, FROM, ORDER BY и другие — на примерах простых запросов в DB с использованием штатных средств для работы с данными, которые всегда должны быть под рукой. Введение в план выполнения запроса, как получить план и как правильно его читать. Аналитические функции в SQL запросах, функции группировок и сортировок. Как ускорить выполнение сложных запросов — введение в оптимизацию SQL на примере DB. Важность использования индексов, партиционирования, сохранения результатов выполнения запросов в памяти сервера — чисто теоретически — но это нужно требовать от администратора базы данных. Написание более сложных запросов SELECT — связывание нескольких таблиц, построение деревьев и виртуальных таблиц, оконные функции. 7. Ну вот и началось программирование, Объектная опция в Python - Инкапсуляция - Полиморфизм - Наследование - Абстракция, об этом можно говорить очень много, но АНАЛИТИК или ТЕСТИРОВЩИК это должен просто понимать и иногда ИСПОЛЬЗОВАТЬ - Легкое введение в ООП и абстракции Python 8. Понятие @dataclass — описание класса для последующего создания на его основе объекта, для наполнения последнего данными из базы данных. Методы сортировки данных. Простые механизмы сравнения объектов, хранение объектов в Python. Списки, множества, кортежи, словари — функциональность, разница, механизмы использования. Строка в Python — это тоже список. 9. Правила доступа к данным в DB из Python. Как правильно соединиться с базой данных. Что такое курсор в Python и как он взаимодействует с базой данных. Легкое введение в транзакционные механизмы DB. Передача параметров в SQL запрос из Python, получение данных из курсора и размещение их в памяти аналитического приложения. Предварительная обработка данных, перед отправкой их в отчеты (сортировки, создание дополнительных колонок, маркировка групп, выполнение дополнительных вычислений) 10. Получение данных для аналитический вычислений в Python приложение из других источников данных, таких как WEB и REST сервисы. Обзор механизмов подключения. Получение данных для дальнейшей обработки на примерах REST сервисов 11. Обзор пакетов Python для взаимодействия с файлами операционной системы для дальнейшей выгрузки данных, которые были получены из DB. Для работы с EXCEL, WORD, PDF файлами, в текстовые файлы SCV — мы выгружаем данные встроенными в Python пакетами 12. Создание рабочей книги EXCEL средсвами Python, заполнение книги листами, определение стилей форматирования, заполнение листа данными из Python, определение формул на листах, использование условного форматирования ячеек листа EXCEL из Python приложения. Построение Диаграмм для визуализации данных средствами Python в Excel 13. Выгрузка данных из Python в документы Word. Использование шаблонов документов для их дальнейшего наполнения данными. Форматирование документа средсвами Python 14. Особенности выгрузки данных в PDF формата 15. Публикация отчета на стандартном сервере приложений, на примере WildFly сервера. Легкое создание Web сервера средствами Python для отправки аналитического отчета конечному пользователю. Тестирование собственного аналитического сервера. 16. Сравнение полученных результатов с аналогичными BI серверами, такими ка Oracle BI, Microsoft BI и другими. Преимущества и недостатки. 17. PANDAS. Взаимодействие с базой данных. Подготовка ДатаФрейма. Выполнение запросов к фрейму, сортировки и группировки. Визуализация данных из Pandas. Построение шахматок и кросс отчетов 18. Получение ДатаФрейма из колоночной базы данных clickhouse. Преимущества выполнения аналитических SQL запросов в ClickHouse. 19. Публикация из pandas в Excel и другие форматы, визуализация данных - MatplotLib В конце обучения на курсе проводится итоговая аттестация в виде теста или на основании оценок за практические работы, выполненных в процессе обучения.
Свободно распространяемое программное обеспечение популярно как среди частных лиц, так и среди организаций. Действительно, СПО позволяет серьезно экономить на приобретении лицензий для компаний, которые многократно тиражируют программное решение. Также благодаря тому, что СПО можно квалифицированно дорабатывать собственными силами под конкретные нужды организации, оно приобретает еще и дополнительную гибкость и удобство в использовании. Открытое программное обеспечение — это программное обеспечение с открытым исходным кодом. Исходный код создаваемых программ открыт, то есть доступен для просмотра и изменения. Это позволяет использовать уже созданный код для создания новых версий программ, для исправления ошибок и, возможно, помочь в доработке открытой программы. В конце обучения на курсах проводится итоговая аттестация в виде теста или на основании оценок за практические работы, выполненные в процессе обучения. Учебный центр "Интерфейс" оказывает консалтинговые услуги по построению моделей бизнес-процессов, проектированию информационных систем, разработке структуры баз данных и т.д.
|