Loquela

公開用の簡潔な方法論

Loquela におけるモデル根拠の表示方法

公開カタログは、推定値や提供元の宣伝を Loquela のベンチマーク結果として扱うことなく、役立つ情報を提供できるよう設計されています。詳細な社内評価計画、製品戦略、未公開の調査は公開しません。

実測

記録された端末、ビルド、モデルパッケージ、サンプルセット、計測方法を使って Loquela が取得した結果です。

提供元

モデル、ランタイム、Android、パッケージの管理者が公開し、その一次情報源にリンクしている情報です。

推定

明示した手法から算出した計画上の値であり、観測した性能としては示しません。

未測定

有用な項目ですが、Loquela が比較可能で信頼できる根拠をまだ持っていないものです。

比較に必要な最小限の記録

端末での結果を公開する場合は、Loquela のバージョン、端末名、Android バージョン、可能であればプロセッサとメモリ、正確なモデル ID、音声サンプルセット、試行回数、計測範囲が推論のみか停止から文字表示までの全体かを明記します。