Пройдя курс вы сможете:
Освоите языки Python и SQL. Сможете работать с библиотеками и фреймворками pandas, airflow, spark.
Узнаете, как подключаться к источникам информации и загружать их в систему. Сможете очищать, сохранять и интегрировать данные.
Поймёте, как проводить регрессионное тестирование. Сможете тестировать пакеты, пайплайны и обрабатывать ошибки.
Разберётесь, как готовить отчётность и согласовывать инфраструктуру данных. Сможете предоставить корректные данные заказчику.
Поймёте, как реализовывать загрузку данных и собирать информацию из разных источников. Сможете выстраивать готовый пайплайн проекта.
Познакомитесь с git и облачными сервисами для совместной работы. Сможете эффективно взаимодействовать со всеми участниками процесса.
Аналитики Big Data несут ответственность за анализ больших данных для оценки технических характеристик организации и предоставления рекомендаций по усовершенствованию системы.
Специалист может сосредоточиться на:
потоковой передаче и оперативных данных
миграции данных.
Аналитики больших данных могут работать в различных компаниях, включая фирмы, предоставляющие финансовые услуги, и поставщиков технологических услуг.
Требуемые навыки
Аналитики больших данных должны обладать отличными техническими знаниями, поскольку они отвечают за оценку наборов информации и реализацию соответствующих решений.