Udemybeginnerja

データサイエンスのための前処理入門PythonとSparkで学ぶビッグデータエンジニアリング(PySpark) 速習講座

Learn Apache Spark with Python! Master big data processing & preprocessing for data science & engineering. Build skills for ABC talent.

Related:Spark SQL
3.8(189)
1,490students
2h 51m
Certificate
Yuki Saito
Yuki Saitoデータエンジニア / マネージャー / データ活用企画

Course Content

データサイエンスのための前処理入門PythonとSparkで学ぶビッグデータエンジニアリング(PySpark) 速習講座 is a beginner-level Udemy course taught by Yuki Saito. It runs 2h 51m, is taught in Japanese, and includes a certificate of completion. Learners rate it 3.8 out of 5 from 189 reviews, with 1,490 students enrolled. It is a paid course, last updated November 2024.

現役データエンジニアが教える!データエンジニアリングの基礎と実践

AIや機械学習プロジェクトで最も重要なのは、データの準備と管理です。データエンジニアリングと呼ばれるこの作業は、データサイエンスのプロジェクト全体の 80%以上 の時間を占めるのが現状です。

このコースでは、Apache Spark を使ったデータエンジニアリングのスキルを習得します。Sparkは、ビッグデータ処理における 分散処理 のデファクトスタンダードとして広く利用されています。

PySpark をPythonと組み合わせて、馴染み深いCSV形式のデータを通して、データエンジニアリングの基礎を学びます。

このコースがおすすめな方

  • データエンジニアを目指している方
  • 普段Pythonを使用しており、データエンジニアリングの知識を深めたい方
  • AIやビッグデータ分野で、データを自在に操れるエンジニアになりたい方

コースのポイント

  • 分散処理 の概念を理解し、Sparkの基本的な使い方を習得
  • PythonとPySparkを使って、効率的なデータ処理パイプラインを構築
  • データエンジニアリングに必要なスキルを実践的に習得

内容の特徴

このコースは、データサイエンスの高度な理論や数学的な内容に焦点を当てるのではなく、データエンジニア としての役割に特化した内容です。

教材

ソースコードと詳細な解説は、以下のGitHubリポジトリで公開しています。

[GitHubリポジトリへのリンク]

動画内では、GitHubの資料に加えて、さらに詳しい解説も行います。

$ whoami — the devs behind tutorialsearch.io

Want AI in your product? Hire the team behind TutorialSearch.io

LLM features, RAG, agents and automation wired into a real product — built by the devs who shipped this site.