TFX パイプラインのオーケストレーション

Kubeflow パイプライン

Kubeflow は、Kebernetes での機械学習（ML）フレームワークのデプロイを単純で移植可能かつスケーラブルにすることに専念したオープンソースの ML プラットフォームです。Kubeflow パイプラインは Kubeflow プラットフォームの一環として Kubernetes で再現可能なワークフローの作成と実行を可能にし、実験とノートブックに基づくエクスペリエンスが備わっています。Kubernetes の Kubeflow パイプラインサービスには、ホスティングされたメタデータ保存、コンテナベースのオーケストレーションエンジン、ノートブックサーバー、およびユーザーによる複雑な ML パイプラインを大規模に開発、実行、および管理を支援する UI が含まれます。Kubeflow Pipelines SDK を使用すると、コンポーネントとパイプラインの作成と共有をプログラミングで行えます。

Google Cloud での大規模な TFX の実行についての詳細は、Kuberflow パイプラインの TFX の例をご覧ください。