えんじにあのじゆうちょう

勉強したことを中心にアウトプットしていきます。

MLops

Deltalakeのバージョニング機能を試してみる

はじめに 機械学習をプロダクションで行う場合、基本的にはMLOpsの枠組みに乗せてモデルを継続的に学習させ精度を向上、Keepしていくということが重要になるわけですが、一方であるときに使ったパラメータやデータセットの管理は結構手間です。 パラメータで…

kubeflowで機械学習パイプラインを試してみる(処理コンテナ実装編)

はじめに 前回に引き続き、Kubeflow pipelineを使って機械学習パイプラインを組んで見る第2段です。今回は、pipeline処理を行うコンテナと処理を1つ作ってみて、雰囲気に触れてみようと思います。前回の記事はこちら t.marufeuille.dev

Kubeflowで機械学習パイプラインを試してみる(MiniKFインストール編)

はじめに 2月は会社のブログ活動&E資格受験があって、しばらく間が空いてしまいました(言い訳) さて、今回からは機械学習パイプラインの構築に向けての検証として、Kubeflowを試してみようと思います。ちょっと前にmlflowのtrackingだけ試しました(以下…

MLflowのTracking機能を試してみた

はじめに 今回はMLflowを使って機械学習の実験管理について少し試したのでまとめてみました。 本当はこのエントリが新年一発目になる予定だったのですが、諸事情あって別のエントリになりました