保存済み終端summaryの表示 · 再計算なし

固定特徴量評価の部分結果

PMLを比較基準として、candidateのamp3075・rawcomplex4099を示します。各指標は小さいほど誤差が小さい数値です。順位は3表現の点推定の記述的な順序であり、差の確証とは別です。総合順位は設けません。

canonical_complex4099は未評価のまま保持
特徴観測はtrain 115/120成功・5件失敗、test 117/120成功・3件失敗。8件とも外挿域の負F0で失敗しました。全train120規約を満たさないためABX/readoutは未評価です。0点補完・失敗除外による再fitは行っていません。

ABX:固定集合での比較

3表現とも4,960/4,960三つ組を測定。固定集合のカバレッジは113録音・39話者で、120全録音の音素比較ではありません。話者内・話者間それぞれの3集計をすべて掲載します。値は0〜1の元スケールです。

条件 / 集計PML · pml2110candidate · amp3075candidate · rawcomplex4099canonical_complex4099
話者内flat_stratum1位 0.322464自身の95%区間 [0.228217, 0.436214]2位 0.353865自身の95%区間 [0.261900, 0.467516]3位 0.408213自身の95%区間 [0.317563, 0.528753]未評価
話者内x_speaker_macro1位 0.311156自身の95%区間 [0.209477, 0.412832]2位 0.390934自身の95%区間 [0.270865, 0.522756]3位 0.458887自身の95%区間 [0.337413, 0.588072]未評価
話者内nested_phone_context1位 0.329922自身の95%区間 [0.241865, 0.423616]2位 0.339181自身の95%区間 [0.264486, 0.451285]3位 0.396199自身の95%区間 [0.320920, 0.517961]未評価
話者間flat_stratum1位 0.442865自身の95%区間 [0.402707, 0.484814]2位 0.481814自身の95%区間 [0.447162, 0.520787]3位 0.490683自身の95%区間 [0.455534, 0.528547]未評価
話者間x_speaker_macro1位 0.443960自身の95%区間 [0.404289, 0.484080]2位 0.482194自身の95%区間 [0.444082, 0.520746]3位 0.492787自身の95%区間 [0.454524, 0.531414]未評価
話者間nested_phone_context1位 0.420683自身の95%区間 [0.390328, 0.463005]2位 0.481904自身の95%区間 [0.442361, 0.513292]3位 0.507065自身の95%区間 [0.464087, 0.539837]未評価

ABX:PMLとの対応差

差はcandidate − PML。負はcandidateの誤差が小さい方向です。下表は対応差の区間であり、上表の各表現自身の区間ではありません。

条件 / 集計amp3075 − PMLrawcomplex4099 − PML
話者内flat_stratum+0.031401対応差の95%区間 [-0.105273, 0.182790]+0.085749対応差の95%区間 [-0.056882, 0.237580]
話者内x_speaker_macro+0.079779対応差の95%区間 [-0.093590, 0.257380]+0.147731対応差の95%区間 [-0.017990, 0.313779]
話者内nested_phone_context+0.009259対応差の95%区間 [-0.099640, 0.152778]+0.066277対応差の95%区間 [-0.044392, 0.215278]
話者間flat_stratum+0.038948対応差の95%区間 [-0.006285, 0.082876]+0.047817対応差の95%区間 [-0.002085, 0.092592]
話者間x_speaker_macro+0.038234対応差の95%区間 [-0.011877, 0.081581]+0.048827対応差の95%区間 [-0.002415, 0.094621]
話者間nested_phone_context+0.061221対応差の95%区間 [0.005566, 0.101589]+0.086381対応差の95%区間 [0.026915, 0.127129]

固定線形readout

評価対象はtest 120録音・40話者。3表現ともtrain特徴120件すべてを用意し、事前規約に従って目的変数が有効なtrainを使用しています。有効教師値はlog_f0が119件、rms_dbfs・spectral_slopeが各120件です。speaker_macro_mae、各表現自身の95%区間、定数train平均予測の誤差を示します。定数予測の誤差は3表現で共通であり、順位には含めません。

目的変数PML · pml2110candidate · amp3075candidate · rawcomplex4099定数train平均予測 MAEcanonical_complex4099
log_f02位 0.179840自身の95%区間 [0.151517, 0.211679]3位 0.241737自身の95%区間 [0.095389, 0.504675]1位 0.171598自身の95%区間 [0.140397, 0.207636]0.266827未評価
rms_dbfs2位 4.228148自身の95%区間 [3.551453, 5.075950]1位 2.979433自身の95%区間 [2.115475, 4.244403]3位 10.726583自身の95%区間 [8.901586, 12.549242]2.408880未評価
spectral_slope1位 1.877299自身の95%区間 [1.544165, 2.237564]2位 2.162019自身の95%区間 [1.576857, 2.992788]3位 4.983156自身の95%区間 [3.901325, 6.267288]1.800606未評価

readout:PMLとの対応差

各目的変数とも対応比較は120/120録音です。元comparison summaryの差と区間をそのまま掲載します。

目的変数amp3075 − PMLrawcomplex4099 − PML
log_f0+0.061897対応差の95%区間 [-0.096753, 0.329909]-0.008243対応差の95%区間 [-0.055698, 0.037005]
rms_dbfs-1.248715対応差の95%区間 [-2.478483, 0.130356]+6.498435対応差の95%区間 [4.441479, 8.612368]
spectral_slope+0.284720対応差の95%区間 [-0.325542, 1.133657]+3.105857対応差の95%区間 [2.030874, 4.335591]

解釈できる範囲

出典と表示精度

8個の既存終端summaryを参照しています。HTMLは小数点以下6桁へ表示丸めしています。scalar JSONには元の数値精度と各区間、対応差、件数を保持し、出典SHA対応で照合できます。自身の点推定と対応比較の点推定には集計上の浮動小数点の微差があり、どちらも元の値を保持しています。

summarySHA-256
abx/pml/pml21102659ff61c2631ee7c13f596c905e51ec8a6bd3673685ce1152b9730754bd15c2
readout/pml/pml2110cfec3c5bd14684fbaa14b41a7d2fa455b738286982821ef29f4a40878d4d48fb
abx/candidate/amp3075a0abb613454516ff788b163769457e0a259b7d721b2e6dd964cbae064e407a14
readout/candidate/amp30750e8ce4adedb1e898699336a2bdf033da552297f1d5efb1cedb6fade269b71e2c
abx/candidate/rawcomplex40994d6e57f931323023b61cf6a0eb0f1783d33be13df28d081519c195a04e0d202d
readout/candidate/rawcomplex4099988c75faecd5da726acc534f6ecf675404f5438f864d2599eb908fbb4fa2ba6f
comparison/amp30758e6492969c2afad1cdbcdfc8b196aea8d509625780ba288b079422a8348653c3
comparison/rawcomplex4099dca05b2dd5a7755930ab8592531aa552440e9157206b493bd4c764f155a2624a