モデラー、ML エンジニア、アナリスト: Dataiku 11 を愛する新たな理由

[Dataiku 11](https://blog.dataiku.com/dataiku-11)は、AI の監視とガバナンスに重点を置き、テクニカルコミュニティに影響を与え、<br>対象分野である専門家やビジネスプロフェッショナルの可能性を広げるなど、大きなブレークスルーをもたらしました。 

新しいDataiku 11.1 へのアップデートにより、私たちは急速なイノベーションのスピードを維持しています。既存機能の改善に加えて、モデラー、ML エンジニア、アナリストなどがDataiku全体のエクスペリエンス向上を目的とする多くの新機能 ([ユーザーフィードバック](https://blog.dataiku.com/you-asked-we-listened)から生まれたものも含みます) が導入されています。

## データサイエンティスト向けの機能を強化
データサイエンティストは、使い慣れたビジュアル ML フレームワーク上で時系列モデリングに追加された新しいオプションを確認することができます。

[ハイパーパラメータ](https://doc.dataiku.com/dss/11/release_notes/11.html?_gl=1*kxlqrq*_ga*NDc2MTQ5MzU0LjE1ODQ1MzcyNTY.*_ga_B3YXRYMY48*MTY2NjYxOTAwNC40NDguMS4xNjY2NjIwMzI3LjYwLjAuMA..#machine-learning)の最適化を実行するときに、クロスバリデーション戦略に時間順序の導入が可能になりました。連続した重複しないデータフォールドにより、過去のデータでモデルがトレーニングされ、将来のデータを予測し、より正確な生産条件のモデルが保証されます。

さらに、データサイエンティストは予測モデルの[モデル比較](https://content.dataiku.com/dataiku-10-blog/model-comparisons?lb_email=marketing@dataiku.com)を生成できるようになります。

<img src="https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/1196881/ece834d7-c211-f1dd-81df-6fe9b71480d8.png" width="600px">
<img src="https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/1196881/59cdcc8a-2b26-c4ea-2b77-013dad2ce2a8.gif" width="600px">


分類タスクをモデリングする場合、データサイエンティストは、**stratified sampling** オプションを使用して、フォールドが母集団全体と同じ一貫したクラスの割合を持っていることを確認し、サンプルバイアスを排除できます。

## Computer Vision および MLFlow モデルの説明可能なML
Dataiku のビジュアル ML interpretability 機能は、データサイエンティストと ML エンジニアがモデルの動作をよりよく理解し、ステークホールダーに説明できるようにするのに役立ちます。  

Dataiku 11.1 では、model explainability が画像分類モデルでも利用できるようになりました。これは、スコアリングされた各画像の視覚的なヒートマップ表現に変換され、モデルの予測に最も影響を与えた領域が強調表示されます。

<img src="https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/1196881/c88c0294-3080-9034-4ebc-af35b8bc6b85.png" width="600px">

もう 1 つの注目すべき機能は、MLFlow 統合を通じて Dataiku に外部から取り入れたモデルでも、さまざまな [explainability 機能](https://doc.dataiku.com/dss/11/release_notes/11.html?_gl=1*1vrm727*_ga*NDc2MTQ5MzU0LjE1ODQ1MzcyNTY.*_ga_B3YXRYMY48*MTY2NjYxOTAwNC40NDguMS4xNjY2NjIwMzI3LjYwLjAuMA..#model-explainability-for-mlflow-models)が利用可能ということです。
<br>データサイエンティストは、部分依存関係を計算して、モデルが各変数の値によってどのように影響を受けるか確認できたり、subpopulation analysis を使用してデータのサブセットの潜在的なバイアスの追跡、個々の説明機能を活用して極端な確率を深く掘り下げたりすることが可能になりました。
<br>これらの機能により、コーダーの労力が減り、MLFlowモデルの解釈可能性が次のレベルへと引き上げました。

## MLFlow 形式へのモデルのエクスポート
Dataiku と MLFlow との統合は、特に開発者コミュニティと、使い慣れたテクノロジーを引き続き使いたいと考えている専門家のデータサイエンティストにとって、大きな注目を浴びている点となっています。

MLFlow モデルは、Dataiku 10 以降、saved models として Dataiku にインポートでき、<br>Dataiku 11 以降 experiment tracking に含めることができます。 

この統合の強化の一環として、Dataiku 11.1 では開発されたモデルを MLFlow 形式でエクスポートすることができるようになりました。これは、オープンソースフレームワークをアーキテクチャに組み込んだり、Dataiku 外部にモデルをデプロイしたりする ML エンジニア向けの機能となります。

## ビジュアルデザイナー向けの追加のチャートタイプ
Dataiku 11.1 では、ユーザーがデータを視覚化して探索するのに役立つ新しいチャート タイプが導入されています。KPI チャートを使用して、ユーザーはビジネス目標に関連する値を測定および追跡できるようになりました。

チームは、これらのチャートを使用して KPI の進行状況とステータスをすばやく測定するため、条件付きフォーマッティングによって提供される明確な視覚的合図を高く評価します。

Dataiku には、カテゴリおよび階層データ内の要素間の関係と比率を視覚化するためのオプションとして、ツリーマップも含まれるようになりました。
<img src="https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/1196881/3da1f950-dde7-daf0-5506-87a43f10e51b.png" width="600px">

## 新機能についてさらに詳しく
Dataiku製品の新機能について、詳しくは[こちら](https://community.dataiku.com/t5/What-s-New/Brand-New-Features-for-Modelers-ML-Engineers-and-Analysts-in/ba-p/30179?_gl=1*1dczc3s*_ga*MTIxOTk5ODk2Ny4xNjY1NDA3NTk4*_ga_B3YXRYMY48*MTY2NjkxNzM0OS41OC4wLjE2NjY5MTczNDkuNjAuMC4w)のコミュニティ記事をご参照ください。


原文:  [*Modelers, ML Engineers, and Analysts: New Reasons for You to Love Dataiku 11*](https://blog.dataiku.com/dataiku-11-1)