EEMBC
IoTConnetと呼ぶEEMBCベンチマーク・フレームワークはまさにこの問題を解決する。具体的にはフレームワークに接続するための小さなファームウェア・スケルトンAPIを提供するのです。当APIは、簡単なテキストベースのプロトコルを定義し、当ベンチマークの実行を調整するためにクロスプラットフォーム・ホストUIランナー・アプリケーションを使います。多くの場合、他にもいくつかのデバイスも使う必要があります(例えばエネルギー・モニターやワイヤレス・ゲートウェイ)。
上記の能力によりML組み込みベンチマークは、再現性と一貫性のある、容易に作業のできるツールとなると思われる。
基本的なテストハーネス・ファームウェアはGitHubサイトにアップされている。
EEMBCではULPMark-ML/tinyMLperfのホストUIランナーを現在開発中で、最初のリリースは2021年第4四半期を予定している。
2023年10月30日、EEMBCは、SPEC (The Standard Performance Evaluation Corporation)の新しい組込み系グループ(SPEC EG)になった。