Skip to content

yk-st/data_platform_full_scratch

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

62 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

環境構築

Docker.ipynbをもとに環境構築をお願いします。

ビジネスパーソン向け他のコース

  1. 「DX(デジタルトランスフォーメーション)のためのビッグデータ活用とデータ活用企画のつくりかたまで」 https://www.udemy.com/course/dx-bigdata/?referralCode=B9C9B09E1333C4C3FA49

  2. 「【実戦で学ぶ速習講座】リレーショナルデータベースで始めるデータ活用とデータ分析のためのSQLを学ぼう」 https://www.udemy.com/course/business_sql/?referralCode=24DC6166DC34A63E61A5

エンジニア向け他のコース情報

  1. 「データサイエンスのための前処理入門PythonとSparkで学ぶビッグデータエンジニアリング(PySpark) 速習講座」 https://www.udemy.com/course/python-spark-pyspark/?referralCode=E67BF8B61F65866794EB

※コース内では簡易インストール(Dockerを使わないインストール)を用いた解説を行なっていますが、本手順でも大きな差はなく受講可能です。

  1. 「【PythonとSparkで始めるデータマネジメント入門】 ビッグデータレイクのための統合メタデータ管理入門」 https://www.udemy.com/course/draft/4367192/?referralCode=AB48AD18D10E55DCB0E5

  2. 「【データサイエンスのためのストリーミング前処理入門 PythonとSparkで始めるビッグデータストリーミング処理入門」 https://www.udemy.com/course/python-spark-streaming/?referralCode=F5E3B429A5C47468BDAD

  3. 「超速入門!【データサイエンスへの最初の一歩】PythonとSparkで学ぶデータ分析のための前処理と分散処理 一気見講座」 https://www.udemy.com/course/draft/4415660/?referralCode=EF89D5D240FB483AF4A1

  4. 「【実戦で学ぶデータ分析基盤構築講座】ローカル端末で1から始めるデータ分析基盤の構築とデータ活用のための活動」 https://www.udemy.com/course/dataplatform_local/?referralCode=FFAE0C4DC02083D63DC9

  5. 「【実戦で学ぶ基盤構築】ローカル端末で作り理解するエンジニアのための機械学習基盤の作成とMLOps」 https://www.udemy.com/course/mlops-pf-and-ml/?referralCode=E6DF74BCFAE60315F390

更新履歴

  1. 2021/07/35 : first commit
  2. 2022/08/21 : mysqlの設定を環境に寄らないようにしました。
  3. 2022/08/22 : postgresの設定を環境に寄らないようにしました。
  4. 2022/08/25 : 【実戦で学ぶ基盤構築】ローカル端末で作り理解するエンジニアのための機械学習基盤の作成とMLOps コースの追加をしました
  5. 2022/09/08 : 不要なコマンドを削除しました。
  6. 2023/01/21 : bullseyeのリポジトリパッケージを更新しました。
  7. 2023/11/19 : Sparkのバージョン固定をしました

About

No description, website, or topics provided.

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published