<table><caption>Table 42: Comparison of GlotLID vs FT176 on UDHR benchmark (part 1)</caption><thead><tr><th rowspan="2">iso639-3</th><th rowspan="2">UDHR Code(s)</th><th rowspan="2">FT176 Code(s)</th><th colspan="2">GlotLID-M</th><th colspan="2">FT176</th><th colspan="2">GlotLID-M θ=.3</th><th colspan="2">GlotLID-M θ=.5</th><th colspan="2">FT176 θ=.3</th><th colspan="2">FT176 θ=.5</th></tr><tr><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th></tr></thead><tbody><tr><td>aar</td><td>aar</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>0.91603</td><td>0.00126</td><td>0.91603</td><td>0.00122</td><td></td><td></td><td></td><td></td></tr><tr><td>abk</td><td>abk</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>0.58635</td><td>0.0</td><td>0.58635</td><td>0.0</td><td>0.58065</td><td>0.0</td><td></td><td></td></tr><tr><td>ace</td><td>ace</td><td>-</td><td><strong>0.91603</strong></td><td>0.00129</td><td>-</td><td>-</td><td>0.91603</td><td>0.00126</td><td>0.91603</td><td>0.00122</td><td></td><td></td><td></td><td></td></tr><tr><td>acu</td><td>acu</td><td>-</td><td><strong>0.58635</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.58635</td><td>0.0</td><td>0.58635</td><td>0.0</td><td>0.58065</td><td>0.0</td><td></td><td></td></tr><tr><td>ada</td><td>ada</td><td>-</td><td>0.91045</td><td>0.00154</td><td>-</td><td>-</td><td>0.91045</td><td>0.00154</td><td>0.91045</td><td>0.00154</td><td>0.93846</td><td>0.00098</td><td></td><td></td></tr><tr><td>ady</td><td>ady</td><td>-</td><td><strong>0.83495</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.83495</td><td>0.0</td><td>0.83495</td><td>0.0</td><td>0.83495</td><td>0.0</td><td></td><td></td></tr><tr><td>agr</td><td>agr</td><td>af</td><td>0.95238</td><td>0.00077</td><td>0.84553</td><td>0.00052</td><td>0.96774</td><td>0.00051</td><td><strong>0.97561</strong></td><td>0.00037</td><td>0.96774</td><td>0.00051</td><td>0.92857</td><td>0.0</td><td>0.90909</td></tr><tr><td>aii</td><td>aii</td><td>-</td><td>0.81429</td><td>0.00039</td><td>-</td><td>-</td><td><strong>0.82014</strong></td><td>0.00025</td><td>0.82014</td><td>0.00024</td><td>0.82014</td><td>0.00025</td><td></td><td></td><td></td></tr><tr><td>ajg</td><td>ajg</td><td>-</td><td>0.64516</td><td>0.0085</td><td>-</td><td>-</td><td>0.65217</td><td>0.00808</td><td><strong>0.65574</strong></td><td>0.0077</td><td>0.65217</td><td>0.00808</td><td></td><td></td><td></td></tr><tr><td>alt</td><td>alt</td><td>-</td><td>0.95495</td><td>0.00039</td><td>-</td><td>-</td><td><strong>0.96364</strong></td><td>0.00025</td><td>0.96364</td><td>0.00024</td><td>0.96364</td><td>0.00025</td><td></td><td></td><td></td></tr><tr><td>amc</td><td>amc</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>ame</td><td>ame</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>amh</td><td>amh</td><td>am</td><td><strong>1.0</strong></td><td>0.0</td><td>0.35443</td><td>0.00283</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.26667</td><td>0.00276</td><td>0.25503</td></tr><tr><td>ami</td><td>ami</td><td>-</td><td><strong>0.20896</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.125</td><td>0.0</td><td>0.95924</td><td>0.0</td><td>0.95924</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>amr</td><td>amr</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.99187</td><td>0.0</td><td>0.99187</td><td>0.0</td><td>0.99187</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>ara</td><td>ara</td><td>ar/arz</td><td>0.89552</td><td>0.0018</td><td>0.64171</td><td>0.00316</td><td>0.93023</td><td>0.00114</td><td><strong>0.98361</strong></td><td>0.00024</td><td>0.93023</td><td>0.00114</td><td>0.66298</td><td>0.0028</td><td>0.66667</td></tr><tr><td>arg</td><td>an</td><td>-</td><td>-</td><td>-</td><td>-</td><td>5e-05</td><td></td><td></td><td></td><td></td><td></td><td></td><td>5e-05</td><td></td><td>4e-05</td></tr><tr><td>arl</td><td>arl</td><td>-</td><td><strong>0.99187</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.99187</td><td>0.0</td><td>0.99187</td><td>0.0</td><td>0.99187</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>arn</td><td>arn</td><td>-</td><td>0.93913</td><td>0.00013</td><td>-</td><td>-</td><td><strong>0.94737</strong></td><td>0.0</td><td>0.94737</td><td>0.0</td><td>0.94737</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>ast</td><td>ast</td><td>-</td><td>0.97521</td><td>0.00013</td><td>0.47059</td><td>0.00203</td><td>0.97521</td><td>0.00013</td><td><strong>0.98333</strong></td><td>0.0</td><td>0.97521</td><td>0.0</td><td><strong>0.62626</strong></td><td>0.00032</td><td>0.57471</td></tr><tr><td>auc</td><td>auc</td><td>-</td><td><strong>0.01504</strong></td><td>0.0</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>4e-05</td></tr><tr><td>ava</td><td>ava</td><td>-</td><td>-</td><td>-</td><td>-</td><td>9e-05</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>ayr</td><td>ayr</td><td>-</td><td><strong>0.99174</strong></td><td>0.00013</td><td>-</td><td>-</td><td>0.91071</td><td>0.00013</td><td>0.84615</td><td>0.0</td><td>0.91071</td><td>0.00013</td><td></td><td></td><td></td></tr><tr><td>aze</td><td>aze</td><td>az/azj</td><td>0.6413</td><td>0.00837</td><td>0.23529</td><td>0.01178</td><td>0.6413</td><td>0.00821</td><td><strong>0.64658</strong></td><td>0.00758</td><td>0.6413</td><td>0.00821</td><td>0.26914</td><td>0.00864</td><td>0.00678</td></tr><tr><td>bak</td><td>ba</td><td>-</td><td>0.0009</td><td>0.0009</td><td>-</td><td>0.00113</td><td>0.00088</td><td>0.00088</td><td><strong>0.64658</strong></td><td>0.00758</td><td>0.00088</td><td>0.00088</td><td>0.00096</td><td>0.29367</td><td>0.00076</td></tr><tr><td>bam</td><td>bam</td><td>-</td><td>0.49682</td><td>0.00747</td><td>-</td><td>-</td><td>0.5098</td><td>0.00682</td><td><strong>0.55319</strong></td><td>0.00513</td><td>0.5098</td><td>0.00682</td><td></td><td></td><td></td></tr><tr><td>ban</td><td>ban</td><td>-</td><td><strong>0.98361</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.98361</td><td>0.0</td><td>0.97521</td><td>0.0</td><td>0.98361</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>bar</td><td>bar</td><td>-</td><td>-</td><td>-</td><td>-</td><td>5e-05</td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td><td></td><td>0</td></tr><tr><td>bax</td><td>bax</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>bba</td><td>bba</td><td>-</td><td>0.92187</td><td>0.00116</td><td>-</td><td>-</td><td>0.92913</td><td>0.00101</td><td><strong>0.93548</strong></td><td>0.00073</td><td>0.92913</td><td>0.00101</td><td></td><td></td><td></td></tr><tr><td>bci</td><td>bci</td><td>-</td><td>0.97521</td><td>0.00039</td><td>-</td><td>0.0</td><td>0.9916</td><td>0.00013</td><td><strong>1.0</strong></td><td>0.0</td><td>0.9916</td><td>0.00013</td><td></td><td></td><td></td></tr><tr><td>bcl</td><td>bcl</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>0.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td></tr><tr><td>bel</td><td>bel</td><td>-</td><td><strong>0.98333</strong></td><td>0.0</td><td>0.62105</td><td>0.0033</td><td>0.98333</td><td>0.0</td><td>0.98333</td><td>0.0</td><td>0.98333</td><td>0.0</td><td>0.66667</td><td>0.00262</td><td>0.83688</td></tr><tr><td>bem</td><td>bem</td><td>-</td><td><strong>0.98333</strong></td><td>0.00026</td><td>-</td><td>-</td><td>0.98333</td><td>0.00025</td><td>0.98333</td><td>0.00024</td><td>0.98333</td><td>0.00024</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td></tr><tr><td>ben</td><td>ben</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>0.97674</td><td>0.00014</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td>0.0</td></tr><tr><td>bfa</td><td>bfa</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>bho</td><td>bho</td><td>-</td><td><strong>0.78519</strong></td><td>0.00039</td><td>-</td><td>-</td><td>0.78519</td><td>0.00038</td><td>0.77273</td><td>0.00024</td><td>0.78519</td><td>0.00038</td><td></td><td></td><td></td></tr><tr><td>bin</td><td>bin</td><td>-</td><td>0.9927</td><td>0.00013</td><td>-</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>bis</td><td>bis</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>bit</td><td>bit</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>boa</td><td>boa</td><td>-</td><td>0.99213</td><td>0.00013</td><td>-</td><td>-</td><td>0.99213</td><td>0.00013</td><td><strong>1.0</strong></td><td>0.0</td><td>0.99213</td><td>0.00013</td><td></td><td></td><td></td></tr><tr><td>bod</td><td>bod</td><td>-</td><td><strong>0.89091</strong></td><td>0.00013</td><td>0.66667</td><td>0.00283</td><td>0.89091</td><td>0.00013</td><td>0.89091</td><td>0.00012</td><td>0.89091</td><td>0.00013</td><td>0.66667</td><td>0.00276</td><td>0.66667</td></tr><tr><td>bre</td><td>bre</td><td>-</td><td><strong>0.98361</strong></td><td>0.0</td><td>0.60204</td><td>0.00354</td><td>0.98361</td><td>0.0</td><td>0.98361</td><td>0.0</td><td>0.98361</td><td>0.0</td><td>0.86131</td><td>0.00074</td><td>0.92683</td></tr><tr><td>buc</td><td>buc</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0.00018</td></tr><tr><td>bug</td><td>bug</td><td>-</td><td>0.95312</td><td>0.00064</td><td>-</td><td>-</td><td>0.96063</td><td>0.00051</td><td><strong>0.976</strong></td><td>0.00024</td><td>0.96063</td><td>0.00051</td><td></td><td></td><td></td></tr><tr><td>bul</td><td>bul</td><td>-</td><td>0.96</td><td>0.00064</td><td>0.85294</td><td>0.00085</td><td>0.96</td><td>0.00063</td><td><strong>0.97561</strong></td><td>0.00037</td><td>0.96</td><td>0.00063</td><td>0.89231</td><td>0.00055</td><td>0.95868</td></tr><tr><td>bum</td><td>bum</td><td>-</td><td><strong>0.54762</strong></td><td>0.00026</td><td>-</td><td>-</td><td>0.53659</td><td>0.00013</td><td>0.46154</td><td>0.00012</td><td>0.53659</td><td>0.00013</td><td></td><td></td><td>0.00013</td></tr><tr><td>bxr</td><td>bxr</td><td>-</td><td>-</td><td>-</td><td>-</td><td>0.00024</td><td></td><td></td><td></td><td></td><td></td><td></td><td>9e-05</td><td></td><td>0</td></tr><tr><td>cab</td><td>cab</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>cak</td><td>cak</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>cat</td><td>cat</td><td>-</td><td>0.9375</td><td>0.00103</td><td>0.43165</td><td>0.00745</td><td>0.95238</td><td>0.00076</td><td><strong>0.96774</strong></td><td>0.00049</td><td>0.95238</td><td>0.00076</td><td>0.64865</td><td>0.00299</td><td>0.81379</td></tr><tr><td>cbi</td><td>cbi</td><td>-</td><td>0.9771</td><td>0.00026</td><td>-</td><td>-</td><td><strong>0.99225</strong></td><td>0.0</td><td>0.99225</td><td>0.0</td><td>0.99225</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>chk</td><td>chk</td><td>-</td><td><strong>0.7033</strong></td><td>0.0</td><td>0.00039</td><td>0.0008</td><td>0.65909</td><td>0.0</td><td>0.54321</td><td>0.0</td><td>0.65909</td><td>0.0</td><td>0.00032</td><td></td><td>0</td></tr><tr><td>chr</td><td>chr</td><td>-</td><td><strong>0.67308</strong></td><td>0.00039</td><td>-</td><td>-</td><td>0.66</td><td>0.00013</td><td>0.61053</td><td>0.0</td><td>0.66</td><td>0.00013</td><td></td><td></td><td></td></tr><tr><td>cts</td><td>cts</td><td>-</td><td><strong>0.97479</strong></td><td>0.00013</td><td>-</td><td>-</td><td>0.97479</td><td>0.00013</td><td>0.98305</td><td>0.0</td><td>0.97479</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>cbu</td><td>cbu</td><td>-</td><td><strong>0.18462</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.9677</td><td>0.0</td><td>0.93333</td><td>0.0</td><td>0.9677</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>ccp</td><td>ccp</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>ceb</td><td>ceb</td><td>-</td><td>0.96721</td><td>0.00051</td><td>0.58291</td><td>0.00387</td><td>0.9916</td><td>0.00013</td><td><strong>1.0</strong></td><td>0.0</td><td>0.9916</td><td>0.00013</td><td>0.62366</td><td>0.00317</td><td>0.65909</td></tr><tr><td>ces</td><td>ces</td><td>-</td><td><strong>0.98387</strong></td><td>0.0</td><td>0.4</td><td>0.00834</td><td>0.98387</td><td>0.0</td><td>0.98387</td><td>0.0</td><td>0.98387</td><td>0.0</td><td>0.60606</td><td>0.00345</td><td>0.76433</td></tr><tr><td>cfm</td><td>cfm</td><td>-</td><td><strong>0.85714</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.85714</td><td>0.0</td><td>0.84615</td><td>0.0</td><td>0.85714</td><td>0.0</td><td></td><td></td><td>0.00152</td></tr><tr><td>cha</td><td>cha</td><td>-</td><td><strong>0.8381</strong></td><td>0.00013</td><td>-</td><td>-</td><td>0.82353</td><td>0.0</td><td>0.8</td><td>0.0</td><td>0.82353</td><td>0.0</td><td></td><td></td><td>0</td></tr><tr><td>che</td><td>che</td><td>-</td><td>-</td><td>-</td><td>-</td><td>0.00052</td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td><td></td><td>0</td></tr><tr><td>chj</td><td>chj</td><td>-</td><td>0.12727</td><td>0.00554</td><td>-</td><td>-</td><td>0.14286</td><td>0.00391</td><td><strong>0.15385</strong></td><td>0.00147</td><td>0.14286</td><td>0.00391</td><td></td><td></td><td></td></tr><tr><td>chk</td><td>chk</td><td>-</td><td>0.97521</td><td>0.00013</td><td>-</td><td>-</td><td><strong>0.98333</strong></td><td>0.0</td><td>0.97479</td><td>0.0</td><td>0.98333</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>chr</td><td>chr</td><td>-</td><td><strong>0.03333</strong></td><td>0.0</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>chv</td><td>chv</td><td>-</td><td><strong>0.86154</strong></td><td>0.0</td><td><strong>0.86154</strong></td><td>0.0</td><td>0.86154</td><td>0.0</td><td>0.86154</td><td>0.0</td><td>0.86154</td><td>0.0</td><td>0.86154</td><td>0.0</td><td>0.84375</td></tr><tr><td>cic</td><td>cic</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>cjk</td><td>cjk</td><td>-</td><td><strong>0.92641</strong></td><td>0.00039</td><td>-</td><td>-</td><td>0.92641</td><td>0.00038</td><td>0.92035</td><td>0.00012</td><td>0.92641</td><td>0.00038</td><td></td><td></td><td></td></tr><tr><td>cjs</td><td>cjs</td><td>-</td><td><strong>0.65217</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.65217</td><td>0.0</td><td>0.63736</td><td>0.0</td><td>0.65217</td><td>0.0</td><td>0.0</td><td></td><td>0</td></tr><tr><td>ckb</td><td>ckb</td><td>-</td><td><strong>0.86154</strong></td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.9375</td><td>0.00101</td><td><strong>0.94488</strong></td><td>0.00086</td><td>0.9375</td><td>0.00101</td><td>0.0</td><td>0.0</td><td>0.0</td></tr><tr><td>cnh</td><td>cnh</td><td>-</td><td>0.93023</td><td>0.00116</td><td>-</td><td>-</td><td>0.90909</td><td>0.00152</td><td><strong>0.91603</strong></td><td>0.00134</td><td>0.90909</td><td>0.00152</td><td></td><td></td><td></td></tr><tr><td>cni</td><td>cni</td><td>-</td><td>0.90226</td><td>0.00167</td><td>-</td><td>-</td><td>0.63736</td><td>0.0</td><td>0.54118</td><td>0.0</td><td>0.63736</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>cof</td><td>cof</td><td>-</td><td><strong>0.74747</strong></td><td>0.0</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>cor</td><td>cor</td><td>-</td><td>-</td><td>-</td><td>-</td><td>0.00698</td><td></td><td></td><td></td><td></td><td></td><td></td><td>0.00032</td><td></td><td>0</td></tr><tr><td>cos</td><td>cos</td><td>-</td><td><strong>0.98305</strong></td><td>0.0</td><td>0.03077</td><td>0.00019</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td></tr><tr><td>cot</td><td>cot</td><td>-</td><td>0.96774</td><td>0.00026</td><td>-</td><td>-</td><td>0.96774</td><td>0.00025</td><td><strong>0.97561</strong></td><td>0.00012</td><td>0.96774</td><td>0.00025</td><td></td><td></td><td></td></tr><tr><td>cpu</td><td>cpu</td><td>-</td><td><strong>0.89908</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.89908</td><td>0.0</td><td>0.89908</td><td>0.0</td><td>0.89908</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>crh</td><td>crh</td><td>-</td><td><strong>0.98361</strong></td><td>0.00026</td><td>-</td><td>-</td><td>0.98361</td><td>0.00025</td><td>0.98361</td><td>0.00024</td><td>0.98361</td><td>0.00025</td><td></td><td></td><td></td></tr><tr><td>cri</td><td>cri</td><td>-</td><td><strong>0.85185</strong></td><td>0.00026</td><td>-</td><td>-</td><td>0.85185</td><td>0.00025</td><td>0.80769</td><td>0.00024</td><td>0.85185</td><td>0.00025</td><td></td><td></td><td></td></tr><tr><td>crs</td><td>crs</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td></tr><tr><td>esa</td><td>esa</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>sw</td><td>sw</td><td>-</td><td><strong>0.0</strong></td><td>0.00206</td><td>-</td><td>-</td><td>0.0</td><td>0.00051</td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>ctd</td><td>ctd</td><td>-</td><td><strong>0.78431</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.78431</td><td>0.0</td><td>0.74747</td><td>0.0</td><td>0.78431</td><td>0.0</td><td></td><td></td><td>0</td></tr><tr><td>cym</td><td>cym</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>0.22303</td><td>0.01999</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.65574</td><td>0.0028</td><td>0.85938</td></tr><tr><td>dag</td><td>dag</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>dan</td><td>dan</td><td>-</td><td>0.85135</td><td>0.00283</td><td>0.65922</td><td>0.00269</td><td>0.91304</td><td>0.00152</td><td><strong>0.98437</strong></td><td>0.00024</td><td>0.91304</td><td>0.00152</td><td>0.7973</td><td>0.00119</td><td>0.86567</td></tr><tr><td>ddn</td><td>ddn</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>deu</td><td>deu</td><td>-</td><td><strong>0.98745</strong></td><td>0.00013</td><td>0.35242</td><td>0.02079</td><td>0.98745</td><td>0.00013</td><td>0.98745</td><td>0.00012</td><td>0.98745</td><td>0.00013</td><td>0.73394</td><td>0.004</td><td>0.86131</td></tr><tr><td>dga</td><td>dga</td><td>-</td><td>0.71166</td><td>0.00566</td><td>-</td><td>-</td><td>0.73885</td><td>0.0048</td><td><strong>0.8</strong></td><td>0.00318</td><td>0.73885</td><td>0.0048</td><td></td><td></td><td>0</td></tr><tr><td>dip</td><td>dip</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>diq</td><td>diq</td><td>-</td><td>0.00129</td><td>-</td><td>-</td><td>0.00071</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>div</td><td>div</td><td>-</td><td>0.96774</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>0.96774</td><td>0.0</td><td>0.93333</td><td>0.0</td><td>0.96774</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td></tr><tr><td>duu</td><td>duu</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>dyo</td><td>dyo</td><td>-</td><td><strong>0.97391</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.97391</td><td>0.0</td><td>0.96491</td><td>0.0</td><td>0.97391</td><td>0.0</td><td></td><td></td><td>0</td></tr><tr><td>dyu</td><td>dyu</td><td>-</td><td><strong>0.23188</strong></td><td>0.00811</td><td>-</td><td>-</td><td>0.22059</td><td>0.00783</td><td>0.17323</td><td>0.00697</td><td>0.22059</td><td>0.00783</td><td></td><td></td><td></td></tr><tr><td>dzo</td><td>dzo</td><td>-</td><td><strong>0.90769</strong></td><td>0.00142</td><td>-</td><td>-</td><td>0.90769</td><td>0.00139</td><td>0.90769</td><td>0.00134</td><td>0.90769</td><td>0.00139</td><td></td><td></td><td></td></tr><tr><td>ell</td><td>ell</td><td>-</td><td><strong>0.97908</strong></td><td>0.0</td><td>0.96063</td><td>0.00047</td><td>0.97908</td><td>0.0</td><td>0.97908</td><td>0.0</td><td>0.97908</td><td>0.0</td><td><strong>0.99592</strong></td><td>5e-05</td><td>0.98755</td></tr><tr><td>emk</td><td>emk</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>0</td></tr><tr><td>eml</td><td>eml</td><td>-</td><td>0.0112</td><td>-</td><td>-</td><td>0.0016</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>9e-05</td></tr><tr><td>eng</td><td>eng</td><td>-</td><td>0.85294</td><td>0.00232</td><td>0.0289</td><td>0.19006</td><td>0.87218</td><td>0.00189</td><td><strong>0.8855</strong></td><td>0.00159</td><td>0.87218</td><td>0.00189</td><td>0.14052</td><td>0.0006</td><td>0.31915</td></tr><tr><td>epo</td><td>epo</td><td>-</td><td>0.96825</td><td>0.00051</td><td>0.18155</td><td>0.02593</td><td><strong>0.976</strong></td><td>0.00038</td><td>0.976</td><td>0.00037</td><td>0.976</td><td>0.00038</td><td>0.55455</td><td>0.0045</td><td>0.75949</td></tr><tr><td>ese</td><td>ese</td><td>-</td><td>0.75</td><td>0.00013</td><td>-</td><td>-</td><td><strong>0.75789</strong></td><td>0.0</td><td>0.73118</td><td>0.0</td><td>0.73118</td><td>0.0</td><td></td><td></td><td>0</td></tr></tbody></table>
<table><caption>Table 43: Comparison of GlotLID vs FT176 on UDHR benchmark (part 2)</caption><thead><tr><th rowspan="3">iso639-3</th><th rowspan="3">UDHR Code(s)</th><th rowspan="3">FT176 Code(s)</th><th colspan="2">GlotLID-M</th><th colspan="2">FT176</th><th colspan="2">GlotLID-M θ=.3</th><th colspan="2">GlotLID-M θ=.5</th><th colspan="2">FT176 θ=.3</th><th colspan="2">FT176 θ=.5</th></tr><tr><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th></tr><tr><th>et</th><th>et</th><th>et</th><th>et</th><th>et</th><th>et</th><th>et</th><th>et</th><th>et</th><th>et</th><th>et</th></tr></thead><tbody><tr><td>est</td><td>ekk</td><td>et</td><td>0.60302</td><td>0.01017</td><td>0.28986</td><td>0.01386</td><td>0.63492</td><td>0.00871</td><td><strong>0.7362</strong></td><td>0.00526</td><td>0.553</td><td>0.00446</td><td><strong>0.84507</strong></td><td>0.00098</td></tr><tr><td>eus</td><td>eus</td><td>eu</td><td>0.9313</td><td>0.00116</td><td>0.58586</td><td>0.00372</td><td>0.96825</td><td>0.00051</td><td><strong>0.98387</strong></td><td>0.00024</td><td>0.95082</td><td>0.00014</td><td><strong>0.97479</strong></td><td>0.0</td></tr><tr><td>eve</td><td>eve</td><td>-</td><td><strong>0.27586</strong></td><td>0.00373</td><td>-</td><td>-</td><td>0.27451</td><td>0.00215</td><td>0.22222</td><td>0.00012</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>evn</td><td>evn</td><td>-</td><td><strong>0.21154</strong></td><td>0.00438</td><td>-</td><td>-</td><td>0.2029</td><td>0.00038</td><td>0.03333</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>ewe</td><td>ewe</td><td>-</td><td><strong>0.98361</strong></td><td>0.00026</td><td>-</td><td>-</td><td>0.98361</td><td>0.00025</td><td>0.98361</td><td>0.00024</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>fao</td><td>fao</td><td>-</td><td><strong>0.98305</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>fao</td><td>fao</td><td>-</td><td><strong>0.98305</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>fat</td><td>prs/pes</td><td>fa</td><td>0.90152</td><td>0.00322</td><td>0.97959</td><td>0.00024</td><td>0.90494</td><td>0.00303</td><td>0.90494</td><td>0.00293</td><td><strong>0.99174</strong></td><td>9e-05</td><td>0.99174</td><td>9e-05</td></tr><tr><td>fat</td><td>fat</td><td>-</td><td><strong>0.97521</strong></td><td>0.00026</td><td>-</td><td>-</td><td>0.97521</td><td>0.00025</td><td>0.97521</td><td>0.00024</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>fij</td><td>fij</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>fin</td><td>fin</td><td>-</td><td>0.38415</td><td>0.026</td><td>0.11397</td><td>0.04539</td><td>0.39252</td><td>0.02462</td><td><strong>0.41311</strong></td><td>0.02188</td><td>0.20228</td><td>0.02242</td><td><strong>0.28704</strong></td><td>0.01369</td></tr><tr><td>fkv</td><td>fkv</td><td>-</td><td><strong>0.28571</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.28571</td><td>0.0</td><td>0.28571</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>fon</td><td>fon</td><td>-</td><td>0.94118</td><td>0.00051</td><td>-</td><td>-</td><td>0.94915</td><td>0.00038</td><td><strong>0.95726</strong></td><td>0.00024</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>fra</td><td>fra</td><td>fr</td><td>0.95238</td><td>0.00077</td><td>0.17831</td><td>0.02607</td><td>0.95935</td><td>0.00051</td><td><strong>0.9661</strong></td><td>0.00012</td><td>0.29412</td><td>0.01323</td><td><strong>0.40404</strong></td><td>0.00789</td></tr><tr><td>frr</td><td>-</td><td>frr</td><td>0.95238</td><td>0.00077</td><td>0.17831</td><td>0.02607</td><td>0.95935</td><td>0.00051</td><td><strong>0.9661</strong></td><td>0.00012</td><td>0.29412</td><td>0.01323</td><td><strong>0.40404</strong></td><td>0.00789</td></tr><tr><td>fry</td><td>fry</td><td>-</td><td>0.99174</td><td>0.00013</td><td>0.944</td><td>0.00028</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>0.9916</strong></td><td>0.0</td><td>0.98305</td><td>0.0</td></tr><tr><td>fuf</td><td>fuf</td><td>-</td><td><strong>0.04762</strong></td><td>0.00051</td><td>-</td><td>-</td><td>0.01613</td><td>0.00051</td><td>0.0</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>fur</td><td>fur</td><td>-</td><td>0.944</td><td>0.00077</td><td>-</td><td>-</td><td>0.95935</td><td>0.00051</td><td><strong>0.96721</strong></td><td>0.00037</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>fuv</td><td>fuv</td><td>-</td><td>0.77912</td><td>0.00245</td><td>-</td><td>-</td><td>0.80833</td><td>0.00126</td><td><strong>0.81197</strong></td><td>0.00073</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>fvr</td><td>fvr</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>gaa</td><td>gaa</td><td>-</td><td>0.93846</td><td>0.00103</td><td>-</td><td>-</td><td>0.96825</td><td>0.00051</td><td><strong>0.98387</strong></td><td>0.00024</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>gag</td><td>gag</td><td>-</td><td><strong>0.93103</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.93103</td><td>0.0</td><td>0.93103</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>gaz</td><td>gaz</td><td>-</td><td>0.83221</td><td>0.00322</td><td>-</td><td>-</td><td><strong>0.88235</strong></td><td>0.00177</td><td>0.83761</td><td>0.00073</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>gjn</td><td>gjn</td><td>-</td><td>0.90476</td><td>0.00103</td><td>-</td><td>-</td><td>0.93443</td><td>0.00051</td><td><strong>0.95798</strong></td><td>0.00012</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>gkp</td><td>gkp</td><td>-</td><td>0.92063</td><td>0.00129</td><td>-</td><td>-</td><td>0.93548</td><td>0.00101</td><td><strong>0.96667</strong></td><td>0.00049</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>gla</td><td>gla</td><td>gd</td><td>0.94574</td><td>0.00026</td><td>0.57843</td><td>0.00372</td><td>0.95312</td><td>0.00013</td><td><strong>0.96063</strong></td><td>0.0</td><td>0.7451</td><td>0.00138</td><td><strong>0.80702</strong></td><td>9e-05</td></tr><tr><td>gld</td><td>gld</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>gle</td><td>gle</td><td>-</td><td>0.95</td><td>0.00103</td><td>0.72258</td><td>0.00108</td><td><strong>0.96815</strong></td><td>0.00063</td><td>0.96815</td><td>0.00061</td><td>0.79433</td><td>0.00041</td><td><strong>0.80597</strong></td><td>0.00018</td></tr><tr><td>glg</td><td>glg</td><td>gl</td><td><strong>0.98305</strong></td><td>0.00013</td><td>0.78832</td><td>0.00113</td><td>0.98305</td><td>0.00013</td><td>0.98305</td><td>0.00012</td><td>0.90756</td><td>0.00028</td><td><strong>0.94643</strong></td><td>0.0</td></tr><tr><td>glv</td><td>glv</td><td>gv</td><td><strong>1.0</strong></td><td>0.0</td><td>0.08571</td><td>0.00038</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.0</td><td>5e-05</td><td>0.0</td><td>0.0</td></tr><tr><td>gom</td><td>-</td><td>gom</td><td>0.95649</td><td>0.00618</td><td>0.5</td><td>0.00028</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>grn</td><td>gug</td><td>gn</td><td>0.98333</td><td>0.00013</td><td>0.85217</td><td>0.00028</td><td>0.60714</td><td>0.00568</td><td><strong>0.65359</strong></td><td>0.00379</td><td>0.30233</td><td>5e-05</td><td>0.08</td><td>0.0</td></tr><tr><td>gsw</td><td>gsw</td><td>als</td><td>0.96063</td><td>0.00064</td><td>-</td><td>-</td><td>0.9916</td><td>0.0</td><td>0.9916</td><td>0.0</td><td><strong>0.8785</strong></td><td>0.0</td><td>0.55422</td><td>0.0</td></tr><tr><td>guc</td><td>guc</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>0.96825</td><td>0.00051</td><td><strong>0.98387</strong></td><td>0.00024</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>guj</td><td>guj</td><td>gu</td><td><strong>1.0</strong></td><td>0.0</td><td>0.99379</td><td>5e-05</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>guk</td><td>guk</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>guu</td><td>guu</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>gyr</td><td>gyr</td><td>-</td><td><strong>0.52632</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.52632</td><td>0.0</td><td>0.44444</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>hat</td><td>hat</td><td>ht</td><td>0.90706</td><td>0.00322</td><td>0.45128</td><td>0.00137</td><td>0.9313</td><td>0.00227</td><td><strong>0.95312</strong></td><td>0.00147</td><td>0.1831</td><td>0.00032</td><td>0.032</td><td>4e-05</td></tr><tr><td>hau</td><td>hau</td><td>-</td><td>0.94488</td><td>0.0027</td><td>-</td><td>-</td><td>0.96</td><td>0.00189</td><td><strong>0.97297</strong></td><td>0.00122</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>haw</td><td>haw</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>hbs</td><td>hrv/bos/srp/cnr</td><td>bs/hr/sh/sr</td><td>0.95957</td><td>0.00335</td><td>0.68431</td><td>0.01466</td><td>0.97534</td><td>0.00177</td><td><strong>0.98066</strong></td><td>0.0011</td><td><strong>0.93048</strong></td><td>0.00184</td><td>0.73559</td><td>0.00058</td></tr><tr><td>hea</td><td>hea</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>heb</td><td>heb</td><td>he</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>hif</td><td>-</td><td>hif</td><td>0.98082</td><td>0.00339</td><td>-</td><td>9e-05</td><td>0.00076</td><td>0.00076</td><td>0.00076</td><td>0.00076</td><td>-</td><td>0</td><td>0</td><td>0</td></tr><tr><td>hil</td><td>-</td><td>hil</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>-</td><td>0</td><td>0</td><td>0</td></tr><tr><td>hin</td><td>hin</td><td>hi</td><td>0.62</td><td>0.00978</td><td>0.33333</td><td>0.01169</td><td>0.62312</td><td>0.00947</td><td><strong>0.62944</strong></td><td>0.00892</td><td>0.33333</td><td>0.0114</td><td><strong>0.34066</strong></td><td>0.0107</td></tr><tr><td>hlt</td><td>hlt</td><td>-</td><td><strong>0.92982</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.92982</td><td>0.0</td><td>0.89091</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>hms</td><td>hms</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>hna</td><td>hna</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>hni</td><td>hni</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>hnj</td><td>hnj</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>hns</td><td>hns</td><td>hsb</td><td>0.89655</td><td>0.00026</td><td>-</td><td>-</td><td><strong>0.91228</strong></td><td>0.0</td><td>0.91228</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>0</td></tr><tr><td>hsb</td><td>hsb</td><td>hsb</td><td><strong>1.0</strong></td><td>0.0</td><td>0.77064</td><td>0.00033</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>0.82353</strong></td><td>0.0</td><td>0.68132</td><td>0.0</td></tr><tr><td>hun</td><td>hun</td><td>hu</td><td>0.82192</td><td>0.00335</td><td>0.30928</td><td>0.01263</td><td>0.84507</td><td>0.00278</td><td><strong>0.89552</strong></td><td>0.00171</td><td>0.57143</td><td>0.00414</td><td><strong>0.69767</strong></td><td>0.00232</td></tr><tr><td>hus</td><td>hus</td><td>-</td><td>0.98082</td><td>0.00339</td><td>-</td><td>-</td><td><strong>0.98615</strong></td><td>0.0</td><td>0.97479</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>huu</td><td>huu</td><td>-</td><td><strong>0.98305</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.96552</td><td>0.0</td><td>0.96552</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>hye</td><td>hye</td><td>hy</td><td><strong>1.0</strong></td><td>0.0</td><td>0.99281</td><td>5e-05</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>ibb</td><td>ibb</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>ibo</td><td>ibo</td><td>-</td><td>0.98718</td><td>0.00026</td><td>-</td><td>-</td><td>0.99355</td><td>0.00013</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>ido</td><td>ido</td><td>io</td><td><strong>0.95</strong></td><td>0.00013</td><td>0.21839</td><td>0.00438</td><td>0.94915</td><td>0.0</td><td>0.94915</td><td>0.0</td><td><strong>0.24324</strong></td><td>0.00014</td><td>0.09231</td><td>0.0</td></tr><tr><td>idu</td><td>idu</td><td>-</td><td><strong>0.0</strong></td><td>0.00013</td><td>-</td><td>-</td><td>0.0</td><td>0.00013</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>iii</td><td>iii</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>jsi</td><td>jsi</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>ike</td><td>ike</td><td>-</td><td><strong>0.97872</strong></td><td>0.00026</td><td>-</td><td>-</td><td>0.97872</td><td>0.00025</td><td>0.97872</td><td>0.00024</td><td>-</td><td>-</td><td>-</td><td>0</td></tr><tr><td>ile</td><td>ile</td><td>-</td><td>-</td><td>-</td><td>-</td><td>0.00033</td><td>-</td><td>-</td><td>-</td><td>-</td><td>5e-05</td><td>0</td><td>0.94545</td><td>0.0</td></tr><tr><td>ilo</td><td>ilo</td><td>ilo</td><td>0.91339</td><td>0.00142</td><td>0.77465</td><td>0.00137</td><td>0.928</td><td>0.00114</td><td><strong>0.97479</strong></td><td>0.00037</td><td><strong>0.97345</strong></td><td>0.0</td><td>0.94545</td><td>0.0</td></tr><tr><td>ina</td><td>ina</td><td>ia</td><td>0.86131</td><td>0.00232</td><td>0.82569</td><td>0.00019</td><td>0.90769</td><td>0.00139</td><td><strong>0.944</strong></td><td>0.00073</td><td>0.77551</td><td>0.0</td><td>0.28571</td><td>0.0</td></tr><tr><td>isl</td><td>isl</td><td>is</td><td><strong>0.9916</strong></td><td>0.00013</td><td>0.74839</td><td>0.00179</td><td>0.9916</td><td>0.00013</td><td>0.9916</td><td>0.00012</td><td>0.77852</td><td>0.00147</td><td><strong>0.78621</strong></td><td>0.00129</td></tr><tr><td>ita</td><td>ita</td><td>it</td><td>0.8</td><td>0.00373</td><td>0.15038</td><td>0.03191</td><td>0.83916</td><td>0.00278</td><td><strong>0.86957</strong></td><td>0.00208</td><td>0.30769</td><td>0.01236</td><td><strong>0.47967</strong></td><td>0.00562</td></tr><tr><td>jav</td><td>jav</td><td>jo</td><td><strong>0.97581</strong></td><td>0.00051</td><td>0.43243</td><td>0.0024</td><td>0.97581</td><td>0.00051</td><td>0.97561</td><td>0.00037</td><td><strong>0.48485</strong></td><td>9e-05</td><td>0.16418</td><td>0.0</td></tr><tr><td>jbo</td><td>-</td><td>jbo</td><td>0.98082</td><td>0.00339</td><td>0.43243</td><td>0.0024</td><td>0.97581</td><td>0.00051</td><td>0.97561</td><td>0.00061</td><td>0.00037</td><td>0.00037</td><td>4e-05</td><td>0</td></tr><tr><td>jpn</td><td>jpn</td><td>ja</td><td>0.78681</td><td>0.01017</td><td>0.5</td><td>0.1381</td><td>0.79245</td><td>0.0096</td><td>0.79245</td><td>0.00929</td><td>0.68852</td><td>0.00607</td><td><strong>0.80109</strong></td><td>0.00321</td></tr><tr><td>kaa</td><td>kaa</td><td>-</td><td>0.96667</td><td>0.00026</td><td>-</td><td>-</td><td>0.96667</td><td>0.00025</td><td><strong>0.97479</strong></td><td>0.00012</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kal</td><td>kal</td><td>-</td><td><strong>0.98305</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kan</td><td>kan</td><td>kn</td><td><strong>1.0</strong></td><td>0.0</td><td>0.67836</td><td>0.00259</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.99145</td><td>5e-05</td><td><strong>1.0</strong></td><td>0.0</td></tr><tr><td>kat</td><td>kat</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>kaz</td><td>kaz</td><td>kk</td><td>0.96721</td><td>0.00039</td><td>0.39057</td><td>0.00844</td><td><strong>0.97521</strong></td><td>0.00025</td><td>0.96667</td><td>0.00024</td><td>0.40845</td><td>0.00763</td><td><strong>0.42491</strong></td><td>0.00691</td></tr><tr><td>kbd</td><td>kbd</td><td>-</td><td><strong>0.87692</strong></td><td>0.00206</td><td>-</td><td>-</td><td>0.87692</td><td>0.00202</td><td>0.87692</td><td>0.00196</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kbp</td><td>kbp</td><td>-</td><td>0.85714</td><td>0.00257</td><td>-</td><td>-</td><td>0.90909</td><td>0.00152</td><td><strong>0.9375</strong></td><td>0.00098</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kbr</td><td>kbr</td><td>-</td><td>0.99174</td><td>0.00013</td><td>-</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kde</td><td>kde</td><td>-</td><td><strong>0.58491</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.58491</td><td>0.0</td><td>0.54369</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kdh</td><td>kdh</td><td>-</td><td><strong>0.77551</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.76289</td><td>0.0</td><td>0.76384</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kea</td><td>kea</td><td>-</td><td><strong>0.72727</strong></td><td>0.00129</td><td>-</td><td>-</td><td>0.72727</td><td>0.00126</td><td>0.69811</td><td>0.00011</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kek</td><td>kek</td><td>-</td><td><strong>0.97521</strong></td><td>0.00039</td><td>-</td><td>-</td><td><strong>0.9916</strong></td><td>0.00013</td><td>0.9916</td><td>0.00012</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kha</td><td>kha</td><td>-</td><td>0.97521</td><td>0.00026</td><td>-</td><td>-</td><td><strong>0.98333</strong></td><td>0.00013</td><td>0.97479</td><td>0.00012</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>khm</td><td>khm</td><td>km</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>kin</td><td>kin</td><td>-</td><td>0.76336</td><td>0.0027</td><td>-</td><td>-</td><td>0.81967</td><td>0.00152</td><td><strong>0.8547</strong></td><td>0.00086</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kir</td><td>kir</td><td>-</td><td>0.95238</td><td>0.00077</td><td>-</td><td>0.67797</td><td>0.95238</td><td>0.00076</td><td><strong>0.96774</strong></td><td>0.00049</td><td>0.69767</td><td>0.00239</td><td><strong>0.81081</strong></td><td>0.00125</td></tr><tr><td>kjh</td><td>kjh</td><td>-</td><td>0.83099</td><td>0.00296</td><td>-</td><td>-</td><td>0.83099</td><td>0.0029</td><td><strong>0.84892</strong></td><td>0.00244</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kkh</td><td>kkh</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kmb</td><td>kmb</td><td>ku</td><td><strong>0.99194</strong></td><td>0.00013</td><td>-</td><td>-</td><td>0.99194</td><td>0.00013</td><td>0.99194</td><td>0.00012</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kmr</td><td>kmr</td><td>ku</td><td><strong>0.66667</strong></td><td>0.0076</td><td>0.53881</td><td>0.00476</td><td>0.66667</td><td>0.00745</td><td>0.66667</td><td>0.00721</td><td>0.59296</td><td>0.00372</td><td><strong>0.6</strong></td><td>0.0033</td></tr><tr><td>knc</td><td>knc</td><td>-</td><td>0.97059</td><td>0.00039</td><td>-</td><td>-</td><td><strong>0.97778</strong></td><td>0.00025</td><td>0.97778</td><td>0.00024</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kng</td><td>kng</td><td>-</td><td><strong>0.0</strong></td><td>0.00039</td><td>-</td><td>-</td><td>0.0</td><td>0.00013</td><td>0.0</td><td>0.00012</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kom</td><td>koi</td><td>-</td><td>0.95935</td><td>0.00064</td><td><strong>0.65909</strong></td><td>0.0</td><td>0.98333</td><td>0.00025</td><td>0.9916</td><td>0.00012</td><td>0.65909</td><td>0.0</td><td>0.525</td><td>0.0</td></tr><tr><td>koo</td><td>koo</td><td>-</td><td><strong>0.79389</strong></td><td>0.00013</td><td>-</td><td>-</td><td>0.79389</td><td>0.00013</td><td>0.79389</td><td>0.00012</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kor</td><td>kor</td><td>ko</td><td>0.95238</td><td>0.00077</td><td>0.86331</td><td>0.0009</td><td>0.96774</td><td>0.00051</td><td><strong>0.99174</strong></td><td>0.00012</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>kqn</td><td>kqn</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>-</td><td>-</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kqs</td><td>kqs</td><td>-</td><td><strong>0.20896</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.99524</td><td>0.0</td><td>0.93279</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>kre</td><td>-</td><td>kre</td><td>-</td><td>-</td><td>-</td><td>0.00132</td><td>-</td><td>-</td><td>-</td><td>-</td><td>-</td><td>0.0011</td><td>-</td><td>0.0004</td></tr><tr><td>kri</td><td>kri</td><td>-</td><td><strong>0.96875</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.96875</td><td>0.0</td><td>0.96063</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>krl</td><td>krl</td><td>-</td><td><strong>0.02581</strong></td><td>0.0</td><td>-</td><td>-</td><td>0.02581</td><td>0.0</td><td>0.02581</td><td>0.0</td><td>-</td><td>-</td><td>-</td><td>-</td></tr><tr><td>ktu</td><td>ktu</td><td>-</td><td><strong>0.78912</strong></td><td>0.00747</td><td>-</td><td>-</td><td>0.57944</td><td>0.00404</td><td>0.54369</td><td>0.00367</td><td>-</td><td>-</td><td>-</td><td>-</td></tr></tbody></table>
<table><caption>Table 44: Comparison of GlotLID vs FT176 on UDHR benchmark (part 3)</caption><thead><tr><th rowspan="3">iso639-3</th><th rowspan="3">UDHR Code(s)</th><th rowspan="3">FT176 Code(s)</th><th colspan="2">GlotLID-M</th><th colspan="2">FT176</th><th colspan="2">GlotLID-M θ=.3</th><th colspan="2">GlotLID-M θ=.5</th><th colspan="2">FT176 θ=.3</th><th colspan="2">FT176 θ=.5</th></tr><tr><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th><th rowspan="2">F1↑</th><th rowspan="2">FPR↓</th></tr><tr><th colspan="2">with confidence threshold θ</th><th colspan="2"></th><th colspan="2"></th></tr></thead><tbody><tr><td>kwi</td><td>kwi</td><td>-</td><td><strong>0.837</strong></td><td>0.0</td><td></td><td></td><td>0.78899</td><td>0.0</td><td>0.70588</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>lad</td><td>lad</td><td>-</td><td>0.92174</td><td>0.00026</td><td></td><td></td><td>0.92174</td><td>0.00025</td><td>0.92982</td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>lao</td><td>lao</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>0.84932</td><td>0.00104</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.98413</td><td>9e-05</td><td><strong>1.0</strong></td><td>0.0</td></tr><tr><td>lat</td><td>lat</td><td>lo</td><td><strong>0.975</strong></td><td>0.00013</td><td>0.6568</td><td>0.00495</td><td>0.975</td><td>0.00013</td><td>0.97071</td><td>0.00012</td><td>0.92174</td><td>9e-05</td><td>0.78</td><td>0.0</td></tr><tr><td>lav</td><td>lav</td><td>lv</td><td>0.94118</td><td>0.00193</td><td>0.88148</td><td>0.00146</td><td>0.95618</td><td>0.00139</td><td>0.96386</td><td>0.0011</td><td>0.96356</td><td>0.00037</td><td><strong>0.99167</strong></td><td>4e-05</td></tr><tr><td>lez</td><td>lez</td><td>-</td><td></td><td></td><td></td><td>0.00019</td><td></td><td></td><td></td><td></td><td></td><td>0.00014</td><td></td><td></td><td></td></tr><tr><td>lia</td><td>lia</td><td>-</td><td><strong>0.94643</strong></td><td>0.0</td><td></td><td></td><td>0.94643</td><td>0.0</td><td>0.92727</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>lij</td><td>lij</td><td>-</td><td>0.49785</td><td>0.01493</td><td></td><td></td><td>0.53953</td><td>0.01238</td><td><strong>0.64804</strong></td><td>0.00758</td><td></td><td></td><td></td><td></td></tr><tr><td>lin</td><td>lin</td><td>-</td><td>0.99145</td><td>0.00026</td><td></td><td></td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>lit</td><td>lit</td><td>-</td><td>0.9375</td><td>0.00103</td><td></td><td></td><td>0.96774</td><td>0.00051</td><td><strong>0.98361</strong></td><td>0.00024</td><td>0.97521</td><td>9e-05</td><td><strong>0.9916</strong></td><td>0.0</td></tr><tr><td>lid</td><td>lid</td><td>-</td><td>0.53465</td><td>0.0018</td><td></td><td></td><td><strong>0.5567</strong></td><td>0.00126</td><td>0.51685</td><td>0.00073</td><td></td><td>0.0006</td><td></td><td></td></tr><tr><td>lmo</td><td>lmo</td><td>-</td><td></td><td>0.00991</td><td></td><td>0.00212</td><td></td><td>0.0897</td><td></td><td>0.00733</td><td></td><td></td><td></td><td>4e-05</td></tr><tr><td>lns</td><td>lns</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>lob</td><td>lob</td><td>-</td><td>0.92857</td><td>0.00026</td><td></td><td></td><td><strong>0.93694</strong></td><td>0.00013</td><td>0.93578</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>lot</td><td>lot</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>loz</td><td>loz</td><td>-</td><td><strong>0.84892</strong></td><td>0.0</td><td></td><td></td><td>0.84892</td><td>0.0</td><td>0.84892</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>ltz</td><td>ltz</td><td>-</td><td><strong>0.98305</strong></td><td>0.0</td><td><u>0.90435</u></td><td>0.00014</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.90265</td><td>9e-05</td><td>0.88889</td><td>0.0</td></tr><tr><td>lua</td><td>lua</td><td>-</td><td>0.72414</td><td>0.0018</td><td></td><td></td><td>0.75</td><td>0.00126</td><td><strong>0.78846</strong></td><td>0.00037</td><td></td><td></td><td></td><td></td></tr><tr><td>lue</td><td>lue</td><td>-</td><td><strong>0.99145</strong></td><td>0.0</td><td></td><td></td><td>0.99145</td><td>0.0</td><td>0.99145</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>lug</td><td>lug</td><td>-</td><td>0.9589</td><td>0.00077</td><td></td><td></td><td>0.97222</td><td>0.00051</td><td><strong>0.98592</strong></td><td>0.00024</td><td></td><td></td><td></td><td></td></tr><tr><td>lun</td><td>lun</td><td>-</td><td>0.81752</td><td>0.00039</td><td></td><td></td><td>0.8209</td><td>0.00013</td><td><strong>0.82707</strong></td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>lus</td><td>lus</td><td>-</td><td>0.94309</td><td>0.0009</td><td></td><td></td><td>0.95868</td><td>0.00063</td><td><strong>0.97479</strong></td><td>0.00057</td><td></td><td></td><td></td><td></td></tr><tr><td>mad</td><td>mad</td><td>-</td><td><strong>0.92174</strong></td><td>0.0</td><td></td><td></td><td>0.92174</td><td>0.0</td><td>0.89286</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>mag</td><td>mag</td><td>-</td><td>0.75385</td><td>0.00051</td><td></td><td></td><td><strong>0.76562</strong></td><td>0.00025</td><td>0.76562</td><td>0.00024</td><td></td><td></td><td></td><td></td></tr><tr><td>mah</td><td>mah</td><td>-</td><td>0.96063</td><td>0.00064</td><td></td><td></td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>mai</td><td>mai</td><td>-</td><td><strong>0.83099</strong></td><td>0.0</td><td><u>0.06977</u></td><td>0.0</td><td>0.83099</td><td>0.0</td><td>0.83099</td><td>0.0</td><td>0.69977</td><td>0.0</td><td>0.02381</td><td>0.0</td></tr><tr><td>mal</td><td>mal</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>0.9145</td><td>0.00108</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>mam</td><td>mam</td><td>-</td><td>0.93913</td><td>0.00026</td><td></td><td></td><td><strong>0.95575</strong></td><td>0.0</td><td>0.94643</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>mar</td><td>mar</td><td>-</td><td><strong>0.99174</strong></td><td>0.00013</td><td><strong>0.98361</strong></td><td>9e-05</td><td>0.99174</td><td>0.00013</td><td>0.99174</td><td>0.00012</td><td>0.98361</td><td>9e-05</td><td>0.98361</td><td>9e-05</td></tr><tr><td>maz</td><td>maz</td><td>-</td><td>0.83582</td><td>0.00219</td><td></td><td></td><td>0.85496</td><td>0.00177</td><td><strong>0.896</strong></td><td>0.00098</td><td></td><td></td><td></td><td></td></tr><tr><td>mcd</td><td>mcd</td><td>-</td><td>0.97521</td><td>0.00026</td><td></td><td></td><td><strong>0.9916</strong></td><td>0.0</td><td>0.98305</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>mcf</td><td>mcf</td><td>-</td><td>0.9771</td><td>0.00039</td><td></td><td></td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>men</td><td>men</td><td>-</td><td></td><td></td><td></td><td></td><td>0.9771</td><td>0.00038</td><td><strong>0.99225</strong></td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>mfq</td><td>mfq</td><td>-</td><td>0.88722</td><td>0.00193</td><td></td><td></td><td>0.95935</td><td>0.00063</td><td><strong>0.9916</strong></td><td>0.00012</td><td></td><td></td><td></td><td>0</td></tr><tr><td>mhr</td><td>mhr</td><td>-</td><td></td><td>0.00013</td><td></td><td>5e-05</td><td></td><td>0.00013</td><td></td><td>0.00012</td><td></td><td></td><td></td><td>0</td></tr><tr><td>mic</td><td>mic</td><td>-</td><td><strong>0.15625</strong></td><td>0.0</td><td></td><td></td><td>0.33333</td><td>0.0</td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>miq</td><td>miq</td><td>-</td><td><strong>0.832</strong></td><td>0.0</td><td></td><td></td><td>0.832</td><td>0.0</td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>mkd</td><td>mkd</td><td>-</td><td><strong>0.99174</strong></td><td>0.0</td><td>0.96774</td><td>0.00014</td><td>0.99174</td><td>0.0</td><td>0.99174</td><td>0.0</td><td>0.97561</td><td>9e-05</td><td><strong>0.99174</strong></td><td>0.0</td></tr><tr><td>mlg</td><td>mlg</td><td>-</td><td>0.94737</td><td>0.00051</td><td>0.80342</td><td>0.00066</td><td>0.96429</td><td>0.00025</td><td><strong>0.97297</strong></td><td>0.00012</td><td><strong>0.83673</strong></td><td>5e-05</td><td>0.76923</td><td>0.0</td></tr><tr><td>mlt</td><td>mlt</td><td>-</td><td>0.77419</td><td>0.00451</td><td>0.71951</td><td>0.00212</td><td>0.78947</td><td>0.00404</td><td><strong>0.82759</strong></td><td>0.00306</td><td><strong>0.9916</strong></td><td>0.0</td><td>0.98305</td><td>0.0</td></tr><tr><td>mnw</td><td>mnw</td><td>-</td><td>0.88276</td><td>0.00206</td><td>0.63317</td><td>0.00335</td><td>0.9771</td><td>0.00025</td><td><strong>0.98462</strong></td><td>0.00012</td><td>0.68108</td><td>0.00262</td><td><u>0.85714</u></td><td>0.00085</td></tr><tr><td>mor</td><td>mor</td><td>-</td><td></td><td></td><td></td><td></td><td>0.9916</td><td>0.0</td><td>0.9916</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>mos</td><td>mos</td><td>-</td><td>0.97015</td><td>0.00051</td><td></td><td></td><td>0.98485</td><td>0.00025</td><td><strong>0.99237</strong></td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>mri</td><td>mri</td><td>-</td><td>0.8227</td><td>0.00026</td><td></td><td></td><td><strong>0.82857</strong></td><td>0.00013</td><td>0.82857</td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>mri</td><td>mri</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>msa</td><td>msa</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>mto</td><td>mto</td><td>-</td><td>0.86842</td><td>0.00785</td><td>0.23222</td><td>9e-05</td><td>0.89535</td><td>0.00568</td><td><strong>0.91124</strong></td><td>0.0044</td><td>0.63004</td><td>0.00616</td><td><strong>0.73232</strong></td><td>0.00049</td></tr><tr><td>mwl</td><td>mwl</td><td>-</td><td><strong>0.0</strong></td><td>0.00103</td><td></td><td></td><td>0.0</td><td>0.00038</td><td></td><td>0.00012</td><td></td><td>5e-05</td><td></td><td>0</td></tr><tr><td>mxi</td><td>mxi</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>mxv</td><td>mxv</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>mya</td><td>mya</td><td>-</td><td>0.12121</td><td>0.0</td><td><u>0.5042</u></td><td>0.00556</td><td>0.12121</td><td>0.0</td><td>0.0625</td><td>0.0</td><td>0.5042</td><td>0.00542</td><td>0.5042</td><td>0.00526</td></tr><tr><td>myv</td><td>myv</td><td>-</td><td>0.66667</td><td>0.00747</td><td>9e-05</td><td>0.00042</td><td>0.66667</td><td>0.00732</td><td><strong>0.67045</strong></td><td>0.00697</td><td></td><td></td><td></td><td>0</td></tr><tr><td>mzi</td><td>mzi</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>nah</td><td>nah</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>9e-05</td><td></td><td>0</td></tr><tr><td>nap</td><td>nap</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>5e-05</td><td></td><td>4e-05</td></tr><tr><td>nba</td><td>nba</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>ndo</td><td>ndo</td><td>-</td><td>0.8806</td><td>0.00206</td><td></td><td></td><td>0.90076</td><td>0.00164</td><td><strong>0.95161</strong></td><td>0.00073</td><td></td><td></td><td></td><td></td></tr><tr><td>nds</td><td>nds</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>0.92308</td><td>0.00019</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.93913</td><td>9e-05</td><td>0.93913</td><td>9e-05</td></tr><tr><td>nep</td><td>nep</td><td>-</td><td><strong>0.99115</strong></td><td>0.0</td><td>0.96552</td><td>0.00014</td><td>0.99115</td><td>0.0</td><td>0.99115</td><td>0.0</td><td>0.96552</td><td>0.00014</td><td><strong>0.98246</strong></td><td>4e-05</td></tr><tr><td>nhn</td><td>nhn</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>nio</td><td>nio</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>niu</td><td>niu</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>niv</td><td>niv</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>njo</td><td>njo</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>nku</td><td>nku</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>nld</td><td>nld</td><td>-</td><td>0.70659</td><td>0.00631</td><td>0.39189</td><td>0.00844</td><td>0.71084</td><td>0.00606</td><td><strong>0.71515</strong></td><td>0.00575</td><td>0.77333</td><td>0.00152</td><td><strong>0.89231</strong></td><td>0.00058</td></tr><tr><td>nno</td><td>nno</td><td>-</td><td>0.95868</td><td>0.00039</td><td>0.4</td><td>0.00019</td><td><strong>0.96667</strong></td><td>0.00025</td><td>0.96661</td><td>0.00012</td><td><strong>0.41558</strong></td><td>5e-05</td><td>0.35616</td><td>0.0</td></tr><tr><td>nob</td><td>nob</td><td>-</td><td>0.98462</td><td>0.00026</td><td>0.53744</td><td>0.00481</td><td><strong>0.99225</strong></td><td>0.00013</td><td>0.98438</td><td>0.00012</td><td>0.63212</td><td>0.00312</td><td><strong>0.66286</strong></td><td>0.00236</td></tr><tr><td>not</td><td>not</td><td>-</td><td><strong>0.97391</strong></td><td>0.0</td><td></td><td></td><td>0.97391</td><td>0.0</td><td>0.97391</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>nso</td><td>nso</td><td>-</td><td>0.86957</td><td>0.00232</td><td></td><td></td><td>0.87591</td><td>0.00215</td><td><strong>0.88235</strong></td><td>0.00196</td><td></td><td></td><td></td><td></td></tr><tr><td>nya</td><td>nya</td><td>-</td><td>0.96414</td><td>0.00116</td><td></td><td></td><td>0.97581</td><td>0.00076</td><td><strong>0.99588</strong></td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>nym</td><td>nym</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>nya</td><td>nya</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>azi</td><td>azi</td><td>-</td><td><strong>0.85938</strong></td><td>0.0</td><td></td><td></td><td>0.85938</td><td>0.0</td><td>0.85938</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>nazi</td><td>nazi</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td></td><td></td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>naa</td><td>naa</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>oci</td><td>oci</td><td>-</td><td><strong>0.41101</strong></td><td>0.0</td><td><u>0.22008</u></td><td>0.00132</td><td>0.40516</td><td>0.0</td><td>0.38131</td><td>0.0</td><td>0.17073</td><td>0.00078</td><td>0.09565</td><td>0.00022</td></tr><tr><td>ojb</td><td>ojb</td><td>-</td><td><strong>0.7027</strong></td><td>0.0</td><td></td><td></td><td>0.7027</td><td>0.0</td><td>0.66667</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>oki</td><td>oki</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>orh</td><td>orh</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>oss</td><td>oss</td><td>-</td><td>0.50273</td><td>0.00785</td><td><u>0.05128</u></td><td>0.0</td><td>0.50549</td><td>0.00758</td><td><strong>0.50829</strong></td><td>0.00721</td><td>0.02597</td><td>0.0</td><td>0.0</td><td>0.0</td></tr><tr><td>ote</td><td>ote</td><td>-</td><td><strong>0.0</strong></td><td>0.00425</td><td></td><td></td><td>0.0</td><td>0.00341</td><td></td><td>0.00134</td><td></td><td></td><td></td><td></td></tr><tr><td>pam</td><td>pam</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td><u>0.0</u></td><td>0.00052</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td></tr><tr><td>pan</td><td>pan</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>pan</td><td>pan</td><td>-</td><td>0.7973</td><td>0.00386</td><td></td><td></td><td>0.83099</td><td>0.00303</td><td><strong>0.86765</strong></td><td>0.0022</td><td></td><td></td><td></td><td></td></tr><tr><td>pau</td><td>pau</td><td>-</td><td><strong>0.97436</strong></td><td>0.0</td><td></td><td></td><td>0.97436</td><td>0.0</td><td>0.97436</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>pbb</td><td>pbb</td><td>-</td><td>0.71698</td><td>0.00554</td><td></td><td></td><td>0.76056</td><td>0.00366</td><td><strong>0.816</strong></td><td>0.00183</td><td></td><td></td><td></td><td></td></tr><tr><td>pcd</td><td>pcd</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>pcm</td><td>pcm</td><td>-</td><td><strong>0.71739</strong></td><td>0.0</td><td></td><td></td><td>0.71739</td><td>0.0</td><td>0.71739</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>pfl</td><td>pfl</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>pis</td><td>pis</td><td>-</td><td><strong>0.9916</strong></td><td>0.0</td><td></td><td></td><td>0.9916</td><td>0.0</td><td>0.9916</td><td>0.0</td><td></td><td></td><td></td><td>0</td></tr><tr><td>pui</td><td>pui</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>pms</td><td>pms</td><td>-</td><td></td><td>0.00039</td><td></td><td>0.00085</td><td></td><td>0.00038</td><td></td><td>0.00012</td><td></td><td>0.00014</td><td></td><td>0</td></tr><tr><td>pub</td><td>pub</td><td>-</td><td>0.65969</td><td>0.00785</td><td>0.65625</td><td>0.00292</td><td>0.65969</td><td>0.0077</td><td>0.65969</td><td>0.00746</td><td><strong>0.66667</strong></td><td>0.00271</td><td>0.65957</td><td>0.00263</td></tr><tr><td>pol</td><td>pol</td><td>-</td><td>0.74074</td><td>0.00541</td><td>0.26966</td><td>0.01532</td><td>0.76923</td><td>0.00455</td><td><strong>0.81633</strong></td><td>0.0033</td><td>0.62176</td><td>0.00335</td><td><strong>0.7284</strong></td><td>0.00192</td></tr><tr><td>pon</td><td>pon</td><td>-</td><td>0.0</td><td></td><td></td><td></td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>por</td><td>por</td><td>-</td><td>0.86957</td><td>0.00463</td><td>0.4829</td><td>0.01211</td><td>0.87273</td><td>0.00442</td><td><strong>0.89219</strong></td><td>0.00355</td><td>0.71642</td><td>0.00437</td><td><strong>0.83624</strong></td><td>0.0021</td></tr><tr><td>pov</td><td>pov</td><td>-</td><td><strong>0.96104</strong></td><td>0.0</td><td></td><td></td><td>0.96104</td><td>0.0</td><td>0.95652</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>ppl</td><td>ppl</td><td>-</td><td><strong>0.42105</strong></td><td>0.0</td><td></td><td></td><td>0.20896</td><td>0.0</td><td>0.125</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>pus</td><td>pus</td><td>-</td><td>0.75</td><td>0.0</td><td><strong>0.98305</strong></td><td>0.0</td><td>0.75</td><td>0.0</td><td>0.75</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td></tr><tr><td>que</td><td>que</td><td>-</td><td>0.92242</td><td>0.01094</td><td><u>0.51086</u></td><td>0.00306</td><td>0.93787</td><td>0.00682</td><td><strong>0.9491</strong></td><td>0.00379</td><td>0.22307</td><td>0.00014</td><td>0.05846</td><td>4e-05</td></tr><tr><td>rar</td><td>rar</td><td>-</td><td><strong>0.99174</strong></td><td>0.00013</td><td></td><td></td><td>0.99174</td><td>0.00013</td><td>0.99174</td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>rgn</td><td>rgn</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr></tbody></table>
<table><caption>Table 45: Comparison of GlotLID vs FT176 on UDHR benchmark (part 4)</caption><thead><tr><th rowspan="2">iso639-3</th><th rowspan="2">UDHR Code(s)</th><th rowspan="2">FT176 Code(s)</th><th colspan="2">GlotLID-M</th><th colspan="2">FT176</th><th colspan="2">GlotLID-M θ=.3</th><th colspan="2">GlotLID-M θ=.5</th><th colspan="2">FT176 θ=.3</th><th colspan="2">FT176 θ=.5</th></tr><tr><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th></tr></thead><tbody><tr><td>rmn</td><td>rmn</td><td>-</td><td><strong>0.86636</strong></td><td>0.00013</td><td></td><td></td><td>0.86111</td><td>0.00013</td><td>0.85047</td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>roh</td><td>roh</td><td>rm</td><td><strong>0.99268</strong></td><td>0.0</td><td>0.63764</td><td>0.00118</td><td>0.99145</td><td>0.0</td><td>0.98775</td><td>0.0</td><td>0.29857</td><td>0.00014</td><td>0.09217</td><td>4e-05</td></tr><tr><td>ron</td><td>ron</td><td>ro</td><td>0.81328</td><td>0.00566</td><td>0.57647</td><td>0.00674</td><td>0.80833</td><td>0.00556</td><td>0.82906</td><td>0.00465</td><td>0.80992</td><td>0.00207</td><td><strong>0.91943</strong></td><td>0.00067</td></tr><tr><td>run</td><td>run</td><td>-</td><td>0.87591</td><td>0.00219</td><td>0.0</td><td></td><td>0.88889</td><td>0.00189</td><td>0.90909</td><td>0.00147</td><td></td><td></td><td></td><td></td></tr><tr><td>rup</td><td>rup</td><td>-</td><td><strong>0.125</strong></td><td>0.0</td><td></td><td></td><td>0.125</td><td>0.0</td><td>0.09524</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>rus</td><td>rus</td><td>ru</td><td>0.43478</td><td>0.02008</td><td>0.21352</td><td>0.02084</td><td>0.47431</td><td>0.0168</td><td><strong>0.51064</strong></td><td>0.01406</td><td>0.22901</td><td>0.01856</td><td><strong>0.27972</strong></td><td>0.01378</td></tr><tr><td>sag</td><td>sag</td><td>-</td><td><strong>0.81553</strong></td><td>0.0</td><td></td><td></td><td>0.80392</td><td>0.0</td><td>0.79208</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>sah</td><td>sah</td><td>sah</td><td>0.54128</td><td>0.01287</td><td>0.62105</td><td>0.00339</td><td>0.56459</td><td>0.01149</td><td>0.60513</td><td>0.00941</td><td>0.63441</td><td>0.00312</td><td><strong>0.67836</strong></td><td>0.00241</td></tr><tr><td>san</td><td>san</td><td>sa</td><td><strong>0.66667</strong></td><td>0.0</td><td><strong>0.58333</strong></td><td>5e-05</td><td>0.66667</td><td>0.0</td><td>0.66667</td><td>0.0</td><td>0.58333</td><td>5e-05</td><td>0.51707</td><td>0.0</td></tr><tr><td>scn</td><td>scn</td><td>-</td><td></td><td>0.00129</td><td></td><td>0.00061</td><td></td><td>0.00101</td><td></td><td>0.00024</td><td></td><td>0</td><td>0</td><td>0</td></tr><tr><td>SCO</td><td>SCO</td><td>SCO</td><td>0.92683</td><td>0.00051</td><td><strong>0.0</strong></td><td>0.00042</td><td><strong>0.95</strong></td><td>0.00013</td><td>0.94118</td><td>0.00012</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td></tr><tr><td>sey</td><td>sey</td><td>-</td><td><strong>0.02985</strong></td><td>0.00051</td><td></td><td></td><td>0.0</td><td>0.00038</td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>shk</td><td>shk</td><td>-</td><td><strong>0.88889</strong></td><td>0.0</td><td></td><td></td><td>0.88889</td><td>0.0</td><td>0.86792</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>shn</td><td>shn</td><td>-</td><td><strong>0.99145</strong></td><td>0.0</td><td></td><td></td><td>0.99145</td><td>0.0</td><td>0.99145</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>shp</td><td>shp</td><td>-</td><td><strong>0.27397</strong></td><td>0.0</td><td></td><td></td><td>0.25</td><td>0.0</td><td>0.14706</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>sid</td><td>sid</td><td>-</td><td>0.90625</td><td>0.00154</td><td></td><td></td><td>0.90625</td><td>0.00152</td><td><strong>0.94309</strong></td><td>0.00086</td><td></td><td></td><td><strong>1.0</strong></td><td>0.0</td></tr><tr><td>sin</td><td>sin</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>0.99174</td><td>5e-05</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>skr</td><td>skr</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>slk</td><td>slk</td><td>-</td><td>0.88889</td><td>0.00193</td><td>0.88722</td><td>0.00066</td><td>0.9375</td><td>0.00101</td><td><strong>0.94488</strong></td><td>0.00086</td><td>0.96667</td><td>9e-05</td><td><strong>0.97479</strong></td><td>4e-05</td></tr><tr><td>slr</td><td>slr</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>slv</td><td>slv</td><td>-</td><td>0.92308</td><td>0.00129</td><td>0.26866</td><td>0.01358</td><td>0.96</td><td>0.00063</td><td><strong>0.97561</strong></td><td>0.00037</td><td>0.72483</td><td>0.00161</td><td><strong>0.8595</strong></td><td>0.0004</td></tr><tr><td>sme</td><td>sme</td><td>-</td><td><strong>0.96667</strong></td><td>0.00026</td><td></td><td></td><td>0.96667</td><td>0.00025</td><td>0.96667</td><td>0.00024</td><td></td><td></td><td></td><td></td></tr><tr><td>smo</td><td>smo</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td></td><td></td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>sna</td><td>sna</td><td>-</td><td>0.93846</td><td>0.00103</td><td></td><td></td><td>0.96063</td><td>0.00063</td><td><strong>0.98387</strong></td><td>0.00024</td><td></td><td></td><td></td><td></td></tr><tr><td>snk</td><td>snk</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>snn</td><td>snn</td><td>-</td><td><strong>0.56818</strong></td><td>0.0</td><td></td><td></td><td>0.56818</td><td>0.0</td><td>0.425</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>som</td><td>som</td><td>so</td><td>0.75817</td><td>0.00476</td><td><strong>0.71318</strong></td><td>0.00118</td><td>0.80556</td><td>0.00354</td><td><strong>0.89231</strong></td><td>0.00171</td><td>0.29412</td><td>0.0</td><td>0.0339</td><td>0.0</td></tr><tr><td>sot</td><td>sot</td><td>-</td><td><strong>0.98333</strong></td><td>0.0013</td><td></td><td></td><td><strong>0.9916</strong></td><td>0.0</td><td>0.9916</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>spa</td><td>spa</td><td>es</td><td>0.75</td><td>0.00669</td><td>0.9529</td><td>0.07429</td><td>0.76415</td><td>0.00606</td><td><strong>0.78</strong></td><td>0.00477</td><td>0.24093</td><td>0.02403</td><td><strong>0.36281</strong></td><td>0.01239</td></tr><tr><td>sqi</td><td>sqi</td><td>als</td><td>0.85714</td><td>0.00257</td><td>0.3224</td><td>0.01164</td><td>0.86131</td><td>0.00227</td><td><strong>0.89394</strong></td><td>0.00159</td><td>0.49789</td><td>0.00542</td><td><strong>0.60825</strong></td><td>0.00334</td></tr><tr><td>srd</td><td>srd</td><td>sc</td><td>0.88722</td><td>0.0018</td><td><strong>0.80955</strong></td><td>0.00019</td><td>0.93651</td><td>0.00088</td><td><strong>0.97521</strong></td><td>0.00024</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td></tr><tr><td>srr</td><td>srr</td><td>-</td><td>0.89231</td><td>0.00154</td><td></td><td></td><td>0.93443</td><td>0.00063</td><td><strong>0.9661</strong></td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>ssw</td><td>ssw</td><td>-</td><td>0.94891</td><td>0.00077</td><td></td><td></td><td>0.97015</td><td>0.00038</td><td><strong>0.99237</strong></td><td>0.00045</td><td></td><td></td><td></td><td></td></tr><tr><td>suk</td><td>suk</td><td>-</td><td>0.68712</td><td>0.00605</td><td></td><td></td><td>0.69136</td><td>0.00581</td><td><strong>0.71895</strong></td><td>0.00065</td><td></td><td></td><td></td><td></td></tr><tr><td>sun</td><td>sun</td><td>-</td><td>0.9697</td><td>0.00039</td><td>0.26891</td><td>0.0115</td><td><strong>0.9771</strong></td><td>0.00025</td><td>0.9771</td><td>0.00024</td><td><strong>0.68519</strong></td><td>0.00028</td><td>0.35443</td><td>0.0</td></tr><tr><td>swa</td><td>swa</td><td>sw</td><td>0.85315</td><td>0.0027</td><td>0.10546</td><td>0.04455</td><td>0.86525</td><td>0.0024</td><td><strong>0.89051</strong></td><td>0.00183</td><td>0.30321</td><td>0.01057</td><td><strong>0.49425</strong></td><td>0.00312</td></tr><tr><td>swb</td><td>swb</td><td>-</td><td>0.80292</td><td>0.00296</td><td></td><td></td><td>0.84615</td><td>0.00202</td><td><strong>0.86885</strong></td><td>0.00122</td><td></td><td></td><td></td><td></td></tr><tr><td>swe</td><td>swe</td><td>sv</td><td>0.88112</td><td>0.00219</td><td>0.86713</td><td>0.00085</td><td>0.93333</td><td>0.00114</td><td><strong>1.0</strong></td><td>0.0</td><td>0.96875</td><td>0.00014</td><td><strong>0.98413</strong></td><td>4e-05</td></tr><tr><td>tah</td><td>tah</td><td>-</td><td>0.91892</td><td>0.0013</td><td></td><td></td><td>0.91892</td><td>0.00013</td><td><strong>0.92727</strong></td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>taj</td><td>taj</td><td>-</td><td><strong>0.66667</strong></td><td>0.0</td><td></td><td></td><td>0.66667</td><td>0.0</td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>tam</td><td>tam</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td></td><td></td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>tat</td><td>tat</td><td>-</td><td>0.68208</td><td>0.00695</td><td>0.4055</td><td>0.00811</td><td>0.68208</td><td>0.00682</td><td><strong>0.69822</strong></td><td>0.00611</td><td>0.42754</td><td>0.00721</td><td><strong>0.50862</strong></td><td>0.00504</td></tr><tr><td>tbz</td><td>tbz</td><td>-</td><td><strong>0.20896</strong></td><td>0.0</td><td></td><td></td><td>0.18182</td><td>0.0</td><td>0.9524</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>tca</td><td>tca</td><td>-</td><td><strong>0.9916</strong></td><td>0.0</td><td></td><td></td><td>0.9916</td><td>0.0</td><td>0.9916</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>tdt</td><td>tdt</td><td>-</td><td><strong>0.66292</strong></td><td>0.0076</td><td></td><td></td><td>0.66292</td><td>0.00745</td><td>0.65537</td><td>0.00721</td><td></td><td></td><td></td><td></td></tr><tr><td>tel</td><td>tel</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>0.9916</td><td>5e-05</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>tem</td><td>tem</td><td>-</td><td><strong>0.97345</strong></td><td>0.0</td><td></td><td></td><td>0.97345</td><td>0.0</td><td>0.94545</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>tet</td><td>tet</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>tgk</td><td>tgk</td><td>-</td><td>0.86131</td><td>0.00245</td><td>0.67429</td><td>0.00269</td><td>0.92913</td><td>0.00114</td><td><strong>0.95082</strong></td><td>0.00061</td><td>0.68605</td><td>0.00248</td><td><strong>0.71951</strong></td><td>0.00205</td></tr><tr><td>tgl</td><td>tgl</td><td>-</td><td>0.9403</td><td>0.0009</td><td>0.90104</td><td>0.005826</td><td>0.95455</td><td>0.00063</td><td><strong>0.97674</strong></td><td>0.00024</td><td>0.49799</td><td>0.00565</td><td><strong>0.83562</strong></td><td>0.00094</td></tr><tr><td>tha</td><td>tha</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>0.99574</td><td>5e-05</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>tir</td><td>tir</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td></td><td></td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>tiv</td><td>tiv</td><td>-</td><td>0.98551</td><td>0.00026</td><td></td><td></td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>tly</td><td>tly</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>tob</td><td>tob</td><td>-</td><td>0.98361</td><td>0.00026</td><td></td><td></td><td>0.98361</td><td>0.00025</td><td><strong>0.99174</strong></td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>toi</td><td>toi</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td></td><td></td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>toj</td><td>toj</td><td>-</td><td>0.83688</td><td>0.00026</td><td></td><td></td><td>0.83688</td><td>0.00025</td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>ton</td><td>ton</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td></td><td></td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>top</td><td>top</td><td>-</td><td><strong>0.99174</strong></td><td>0.0013</td><td></td><td></td><td>0.99174</td><td>0.00013</td><td>0.99174</td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>tpi</td><td>tpi</td><td>-</td><td><strong>0.98361</strong></td><td>0.0013</td><td></td><td></td><td>0.98361</td><td>0.00013</td><td>0.98361</td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>tsn</td><td>tsn</td><td>-</td><td>0.98361</td><td>0.00026</td><td></td><td></td><td><strong>0.99174</strong></td><td>0.00013</td><td>0.99174</td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>tso</td><td>tso</td><td>-</td><td>0.94158</td><td>0.0018</td><td></td><td></td><td>0.94158</td><td>0.00177</td><td>0.95139</td><td>0.00134</td><td></td><td></td><td></td><td></td></tr><tr><td>tsz</td><td>tsz</td><td>-</td><td>0.82517</td><td>0.00309</td><td></td><td></td><td>0.86765</td><td>0.00215</td><td><strong>0.90625</strong></td><td>0.00122</td><td></td><td></td><td></td><td></td></tr><tr><td>tuk</td><td>tuk</td><td>-</td><td>0.96748</td><td>0.00103</td><td>0.53659</td><td>5e-05</td><td>0.96748</td><td>0.00101</td><td><strong>0.98347</strong></td><td>0.00049</td><td><strong>0.53988</strong></td><td>0.0</td><td>0.47436</td><td>0.0</td></tr><tr><td>tur</td><td>tur</td><td>-</td><td>0.49383</td><td>0.01583</td><td>0.19704</td><td>0.02305</td><td>0.50209</td><td>0.01503</td><td><strong>0.51502</strong></td><td>0.01381</td><td>0.29777</td><td>0.013</td><td><strong>0.35714</strong></td><td>0.00963</td></tr><tr><td>twi</td><td>twi</td><td>-</td><td>0.95349</td><td>0.00154</td><td></td><td></td><td>0.96094</td><td>0.00126</td><td><strong>0.9685</strong></td><td>0.00098</td><td></td><td></td><td></td><td></td></tr><tr><td>tyv</td><td>tyv</td><td>-</td><td>0.98361</td><td>0.00026</td><td><strong>0.55422</strong></td><td>0.0</td><td>0.99174</td><td>0.00013</td><td><strong>1.0</strong></td><td>0.0</td><td>0.55422</td><td>0.0</td><td>0.35616</td><td>0.0</td></tr><tr><td>tzh</td><td>tzh</td><td>-</td><td>0.98333</td><td>0.00026</td><td></td><td></td><td>0.98333</td><td>0.00025</td><td><strong>0.9916</strong></td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>tzm</td><td>tzm</td><td>-</td><td>0.01754</td><td>0.00669</td><td></td><td></td><td>0.01754</td><td>0.00657</td><td><strong>0.0177</strong></td><td>0.00623</td><td></td><td></td><td></td><td></td></tr><tr><td>tzo</td><td>tzo</td><td>-</td><td>0.97479</td><td>0.00013</td><td></td><td></td><td><strong>0.98305</strong></td><td>0.0</td><td>0.98305</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>udu</td><td>udu</td><td>-</td><td>0.98361</td><td>0.00026</td><td></td><td></td><td><strong>0.99174</strong></td><td>0.00013</td><td>0.99174</td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>uig</td><td>uig</td><td>-</td><td><strong>0.91892</strong></td><td>0.0</td><td></td><td></td><td>0.91403</td><td>0.0</td><td>0.89908</td><td>0.0</td><td>0.66667</td><td>0.0</td><td>0.66667</td><td>0.0</td></tr><tr><td>ukr</td><td>ukr</td><td>-</td><td>0.98361</td><td>0.00026</td><td>0.80537</td><td>0.00137</td><td>0.98361</td><td>0.00025</td><td><strong>0.99174</strong></td><td>0.00012</td><td>0.84507</td><td>0.00101</td><td><strong>0.86957</strong></td><td>0.0008</td></tr><tr><td>umb</td><td>umb</td><td>-</td><td><strong>0.87931</strong></td><td>0.00129</td><td></td><td></td><td>0.87931</td><td>0.00126</td><td>0.87611</td><td>0.00086</td><td></td><td></td><td></td><td></td></tr><tr><td>ura</td><td>ura</td><td>-</td><td><strong>0.82963</strong></td><td>0.0</td><td></td><td></td><td>0.82963</td><td>0.0</td><td>0.82963</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>urd</td><td>urd</td><td>-</td><td><strong>0.96522</strong></td><td>0.0009</td><td>0.70701</td><td>0.00429</td><td>0.96522</td><td>0.00088</td><td>0.96522</td><td>0.00086</td><td>0.92116</td><td>0.00083</td><td>0.96104</td><td>0.00036</td></tr><tr><td>uzb</td><td>uzb</td><td>-</td><td>0.70414</td><td>0.01274</td><td>0.40741</td><td>0.00448</td><td>0.78033</td><td>0.00833</td><td>0.86545</td><td>0.0044</td><td><strong>0.57754</strong></td><td>0.0006</td><td>0.56977</td><td>0.00013</td></tr><tr><td>vai</td><td>vai</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>vec</td><td>vec</td><td>-</td><td>0.94488</td><td>0.0009</td><td><strong>0.62385</strong></td><td>0.00071</td><td>0.95238</td><td>0.00076</td><td><strong>0.96774</strong></td><td>0.00049</td><td>0.58427</td><td>0.00014</td><td>0.35616</td><td>0.0</td></tr><tr><td>ven</td><td>ven</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td></td><td></td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>xep</td><td>xep</td><td>-</td><td></td><td></td><td><strong>0.0625</strong></td><td>9e-05</td><td>0.66304</td><td>0.00013</td><td>0.66304</td><td>0.00012</td><td>0.6455</td><td>0.0</td><td>0.32729</td><td>0.0</td></tr><tr><td>vie</td><td>vie</td><td>-</td><td>0.66304</td><td>0.00013</td><td>0.58095</td><td>0.00127</td><td><strong>0.97436</strong></td><td>0.0</td><td>0.97436</td><td>0.0</td><td>0.00028</td><td>0.0</td><td><strong>0.66667</strong></td><td>0.0</td></tr><tr><td>vmw</td><td>vmw</td><td>-</td><td>0.95798</td><td>0.00026</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td>4e-05</td></tr><tr><td>vol</td><td>vol</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>war</td><td>war</td><td>-</td><td><strong>0.9916</strong></td><td>0.0</td><td>0.25993</td><td>0.00853</td><td>0.9916</td><td>0.0</td><td>0.9916</td><td>0.0</td><td><strong>0.44872</strong></td><td>0.0028</td><td>0.36364</td><td>0.00094</td></tr><tr><td>wln</td><td>wln</td><td>-</td><td>0.62105</td><td>0.00914</td><td><strong>0.05085</strong></td><td>0.00259</td><td>0.62434</td><td>0.00884</td><td><strong>0.64481</strong></td><td>0.00782</td><td>0.01887</td><td>0.00207</td><td>0.0</td><td>0.00152</td></tr><tr><td>wol</td><td>wol</td><td>-</td><td>0.79747</td><td>0.00412</td><td></td><td></td><td>0.86897</td><td>0.0024</td><td><strong>0.92537</strong></td><td>0.00111</td><td></td><td></td><td></td><td></td></tr><tr><td>wwa</td><td>wwa</td><td>-</td><td><strong>0.88636</strong></td><td>0.0</td><td></td><td></td><td>0.88636</td><td>0.0</td><td>0.87356</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>xho</td><td>xho</td><td>-</td><td>0.94574</td><td>0.0009</td><td></td><td></td><td>0.96825</td><td>0.00051</td><td><strong>0.976</strong></td><td>0.00037</td><td></td><td></td><td></td><td></td></tr><tr><td>xsm</td><td>xsm</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>yad</td><td>yad</td><td>-</td><td><strong>0.8785</strong></td><td>0.0</td><td></td><td></td><td>0.85714</td><td>0.0</td><td>0.75</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>yao</td><td>yao</td><td>-</td><td>0.97345</td><td>0.00026</td><td></td><td></td><td><strong>0.98214</strong></td><td>0.00013</td><td>0.98214</td><td>0.00012</td><td></td><td></td><td></td><td></td></tr><tr><td>yap</td><td>yap</td><td>-</td><td>0.96721</td><td>0.00026</td><td></td><td></td><td><strong>0.98333</strong></td><td>0.0</td><td>0.98333</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>yid</td><td>yid</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>ykg</td><td>ykg</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>yor</td><td>yor</td><td>-</td><td>0.85106</td><td>0.0027</td><td>0.86441</td><td>0.00033</td><td>0.88889</td><td>0.00189</td><td><strong>0.93023</strong></td><td>0.0011</td><td><strong>0.91892</strong></td><td>0.0</td><td>0.8785</td><td>0.0</td></tr><tr><td>yrk</td><td>yrk</td><td>-</td><td><strong>0.8381</strong></td><td>0.00013</td><td></td><td></td><td>0.83495</td><td>0.0</td><td>0.69565</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>yua</td><td>yua</td><td>-</td><td><strong>1.0</strong></td><td>0.0</td><td></td><td></td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>zam</td><td>zam</td><td>-</td><td><strong>0.0</strong></td><td>0.00013</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>zdj</td><td>zdj</td><td>-</td><td>0.78125</td><td>0.00245</td><td></td><td></td><td>0.88496</td><td>0.00051</td><td><strong>0.8972</strong></td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>zgh</td><td>zgh</td><td>-</td><td><strong>0.17647</strong></td><td>0.0</td><td></td><td></td><td>0.17647</td><td>0.0</td><td>0.14925</td><td>0.0</td><td></td><td></td><td></td><td></td></tr><tr><td>zho</td><td>wuu/gan/yue/hsn/cmn/hak/cjy/nan</td><td>wuu/yue/zh</td><td>0.71795</td><td>0.07248</td><td>0.74988</td><td>0.02263</td><td>0.73346</td><td>0.06516</td><td><strong>0.75177</strong></td><td>0.0566</td><td>0.88255</td><td>0.00717</td><td><strong>0.91715</strong></td><td>0.00352</td></tr><tr><td>zro</td><td>zro</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>ztu</td><td>ztu</td><td>-</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>zul</td><td>zul/nbl</td><td>-</td><td>0.65591</td><td>0.00077</td><td></td><td></td><td>0.66304</td><td>0.00051</td><td><strong>0.67033</strong></td><td>0.00024</td><td></td><td></td><td></td><td></td></tr><tr><td>zyb</td><td>zyb</td><td>-</td><td>0.92683</td><td>0.00051</td><td></td><td></td><td><strong>0.95</strong></td><td>0.00013</td><td>0.94915</td><td>0.0</td><td></td><td></td><td></td><td></td></tr></tbody></table>
<table><caption>Table 46: Comparison of GlotLID vs OpenLID on UDHR benchmark (part 1)</caption><thead><tr><th rowspan="3">iso639-3</th><th rowspan="3">UDHR Code(s)</th><th rowspan="3">OpenLID Code(s)</th><th colspan="2">GlotLID-M</th><th colspan="2">OpenLID</th><th colspan="2">GlotLID-M θ=3</th><th colspan="2">GlotLID-M θ=5</th><th colspan="2">OpenLID θ=3</th><th colspan="2">OpenLID θ=5</th></tr><tr><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th></tr></thead><tbody><tr><td>ace</td><td>ace</td><td>ace</td><td>0.90909</td><td>0.00126</td><td>0.71856</td><td>0.00247</td><td><strong>0.91603</strong></td><td>0.00107</td><td>0.91603</td><td>0.00103</td><td>0.83916</td><td>0.00247</td><td><strong>0.88889</strong></td><td>0.00075</td></tr><tr><td> afr</td><td> afr</td><td> afr</td><td>0.95238</td><td>0.00068</td><td>0.88235</td><td>0.00086</td><td>0.96774</td><td>0.00043</td><td><strong>0.97561</strong></td><td>0.00031</td><td>0.90909</td><td>0.00086</td><td>0.96</td><td>0.00027</td></tr><tr><td> als</td><td> als</td><td> als</td><td><strong>0.86131</strong></td><td>0.00205</td><td>0.32153</td><td>0.01331</td><td>0.7377</td><td>0.00182</td><td>0.56863</td><td>0.00134</td><td>0.38689</td><td>0.01331</td><td><strong>0.472</strong></td><td>0.00702</td></tr><tr><td> amh</td><td> amh</td><td> amh</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> arb</td><td> arb</td><td> arb</td><td><strong>0.98333</strong></td><td>0.00011</td><td>0.92437</td><td>0.00021</td><td>0.92035</td><td>0.00011</td><td>0.8381</td><td>0.0001</td><td>0.94017</td><td>0.00021</td><td><strong>0.94828</strong></td><td>5e-05</td></tr><tr><td> ast</td><td> ast</td><td> ast</td><td>0.97521</td><td>0.00011</td><td>0.66667</td><td>0.00317</td><td>0.97521</td><td>0.00011</td><td><strong>0.98333</strong></td><td>0.0</td><td>0.75472</td><td>0.00317</td><td><strong>0.81633</strong></td><td>0.00139</td></tr><tr><td> ayr</td><td> ayr</td><td> ayr</td><td><strong>0.99174</strong></td><td>0.00011</td><td>0.75472</td><td>0.00209</td><td>0.91071</td><td>0.00011</td><td>0.84615</td><td>0.0</td><td>0.81081</td><td>0.00209</td><td><strong>0.89552</strong></td><td>0.00075</td></tr><tr><td> azb</td><td> azb</td><td> azb</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td> azj</td><td> azj</td><td> azj</td><td><strong>0.74306</strong></td><td>0.00696</td><td>0.48163</td><td>0.00354</td><td>0.15789</td><td>0.00215</td><td>0.03008</td><td>0.00113</td><td>0.4856</td><td>0.00354</td><td><strong>0.4876</strong></td><td>0.00338</td></tr><tr><td> bam</td><td> bam</td><td> bam</td><td>0.49682</td><td>0.00662</td><td>0.19403</td><td>0.02275</td><td>0.5098</td><td>0.0058</td><td><strong>0.55319</strong></td><td>0.00433</td><td>0.20553</td><td>0.02275</td><td><strong>0.26</strong></td><td>0.01543</td></tr><tr><td> ban</td><td> ban</td><td> ban</td><td>0.97561</td><td>0.00011</td><td>0.79195</td><td>0.0015</td><td><strong>0.98361</strong></td><td>0.0</td><td>0.97521</td><td>0.0</td><td>0.83453</td><td>0.0015</td><td><strong>0.87218</strong></td><td>0.0007</td></tr><tr><td> bel</td><td> bel</td><td> bel</td><td><strong>0.98333</strong></td><td>0.0</td><td>0.34706</td><td>0.0118</td><td>0.98333</td><td>0.0</td><td>0.98333</td><td>0.0</td><td>0.35224</td><td>0.0118</td><td><strong>0.39333</strong></td><td>0.00964</td></tr><tr><td> bem</td><td> bem</td><td> bem</td><td><strong>0.98333</strong></td><td>0.00023</td><td>0.40411</td><td>0.00934</td><td>0.98333</td><td>0.00021</td><td>0.98333</td><td>0.00021</td><td>0.41844</td><td>0.00934</td><td><strong>0.47581</strong></td><td>0.00696</td></tr><tr><td> ben</td><td> ben</td><td> ben</td><td><strong>1.0</strong></td><td>0.0</td><td>0.99213</td><td>5e-05</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>5e-05</td><td>1.0</td><td>0.0</td></tr><tr><td> bho</td><td> bho</td><td> bho</td><td>0.78519</td><td>0.00034</td><td>0.78519</td><td>0.00016</td><td>0.78519</td><td>0.00032</td><td>0.77273</td><td>0.00021</td><td><strong>0.79104</strong></td><td>0.00016</td><td>0.78195</td><td>0.00011</td></tr><tr><td> bod</td><td> bod</td><td> bod</td><td><strong>0.89091</strong></td><td>0.00011</td><td>0.7451</td><td>0.00021</td><td>0.89091</td><td>0.00011</td><td>0.89091</td><td>0.0001</td><td>0.7451</td><td>0.00021</td><td>0.7451</td><td>0.00021</td></tr><tr><td> bos</td><td> bos</td><td> bos</td><td>0.18103</td><td>0.01038</td><td>0.18841</td><td>0.00698</td><td>0.18605</td><td>0.00805</td><td>0.14607</td><td>0.00464</td><td>0.19403</td><td>0.00698</td><td><strong>0.20077</strong></td><td>0.00605</td></tr><tr><td> bug</td><td> bug</td><td> bug</td><td>0.95312</td><td>0.00057</td><td>0.76129</td><td>0.00182</td><td>0.96063</td><td>0.00043</td><td><strong>0.976</strong></td><td>0.00021</td><td>0.80272</td><td>0.00182</td><td><strong>0.86765</strong></td><td>0.0008</td></tr><tr><td> bul</td><td> bul</td><td> bul</td><td>0.96</td><td>0.00057</td><td>0.9375</td><td>0.00043</td><td>0.95238</td><td>0.00064</td><td><strong>0.96774</strong></td><td>0.00041</td><td>0.92308</td><td>0.00059</td><td>0.96</td><td>0.00027</td></tr><tr><td> cat</td><td> cat</td><td> cat</td><td>0.93023</td><td>0.00103</td><td>0.91603</td><td>0.00059</td><td>0.95238</td><td>0.00064</td><td><strong>0.97561</strong></td><td>0.00031</td><td>0.95238</td><td>0.00043</td><td>0.95238</td><td>0.00032</td></tr><tr><td> ceb</td><td> ceb</td><td> ceb</td><td>0.96721</td><td>0.00046</td><td>0.58416</td><td>0.00451</td><td>0.9916</td><td>0.00011</td><td><strong>1.0</strong></td><td>0.0</td><td>0.60825</td><td>0.00451</td><td><strong>0.64481</strong></td><td>0.00348</td></tr><tr><td> ces</td><td> ces</td><td> ces</td><td><strong>0.98387</strong></td><td>0.0</td><td>0.93846</td><td>0.00032</td><td>0.98387</td><td>0.0</td><td>0.98387</td><td>0.0</td><td>0.96063</td><td>0.00032</td><td><strong>0.976</strong></td><td>5e-05</td></tr><tr><td> cjk</td><td> cjk</td><td> cjk</td><td><strong>0.92641</strong></td><td>0.00034</td><td>0.61995</td><td>0.00724</td><td>0.92641</td><td>0.00032</td><td>0.92035</td><td>0.0001</td><td>0.63014</td><td>0.00724</td><td><strong>0.66667</strong></td><td>0.00563</td></tr><tr><td> ckb</td><td> ckb</td><td> ckb</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td> crh</td><td> crh</td><td> crh</td><td>0.97561</td><td>0.00034</td><td>0.82759</td><td>0.00134</td><td><strong>0.98361</strong></td><td>0.00021</td><td>0.98361</td><td>0.00021</td><td>0.86331</td><td>0.00134</td><td><strong>0.88235</strong></td><td>0.00086</td></tr><tr><td> cym</td><td> cym</td><td> cym</td><td><strong>1.0</strong></td><td>0.0</td><td>0.82667</td><td>0.0014</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.91852</td><td>0.0014</td><td><strong>0.96124</strong></td><td>0.00027</td></tr><tr><td> dan</td><td> dan</td><td> dan</td><td>0.85135</td><td>0.00251</td><td>0.84932</td><td>0.00113</td><td>0.91304</td><td>0.00129</td><td><strong>0.98437</strong></td><td>0.00021</td><td>0.88571</td><td>0.00113</td><td><strong>0.96124</strong></td><td>0.00021</td></tr><tr><td> deu</td><td> deu</td><td> deu</td><td><strong>0.98745</strong></td><td>0.00011</td><td>0.97119</td><td>0.00027</td><td>0.98745</td><td>0.00011</td><td>0.98745</td><td>0.0001</td><td>0.97521</td><td>0.00027</td><td><strong>0.98333</strong></td><td>0.00011</td></tr><tr><td> dyu</td><td> dyu</td><td> dyu</td><td><strong>0.23188</strong></td><td>0.000719</td><td>0.5594</td><td>0.00429</td><td>0.22059</td><td>0.00665</td><td>0.17323</td><td>0.00587</td><td>0.05714</td><td>0.00429</td><td><strong>0.6452</strong></td><td>0.00327</td></tr><tr><td> dzo</td><td> dzo</td><td> dzo</td><td><strong>0.90769</strong></td><td>0.00126</td><td>0.81159</td><td>0.00118</td><td>0.90769</td><td>0.00118</td><td>0.90769</td><td>0.00113</td><td>0.81159</td><td>0.00118</td><td><strong>0.81159</strong></td><td>0.00118</td></tr><tr><td> ell</td><td> ell</td><td> ell</td><td>0.97908</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>0.97908</td><td>0.0</td><td>0.97908</td><td>0.0</td><td>0.97908</td><td>1.0</td><td>0.0</td><td>0.0</td></tr><tr><td> eng</td><td> eng</td><td> eng</td><td>0.85294</td><td>0.00205</td><td>0.43123</td><td>0.00075</td><td>0.87218</td><td>0.00161</td><td><strong>0.8855</strong></td><td>0.00134</td><td>0.46586</td><td>0.00075</td><td><strong>0.50435</strong></td><td>0.006</td></tr><tr><td> epo</td><td> epo</td><td> epo</td><td>0.96825</td><td>0.00046</td><td>0.63492</td><td>0.00365</td><td><strong>0.976</strong></td><td>0.00032</td><td>0.976</td><td>0.00031</td><td>0.69767</td><td>0.00365</td><td><strong>0.77419</strong></td><td>0.00182</td></tr><tr><td> est</td><td> est</td><td> est</td><td>0.9375</td><td>0.00091</td><td>0.33803</td><td>0.01261</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.41096</td><td>0.01261</td><td><strong>0.55556</strong></td><td>0.00514</td></tr><tr><td> eus</td><td> eus</td><td> eus</td><td>0.91729</td><td>0.00126</td><td>0.16901</td><td>0.0316</td><td>0.96825</td><td>0.00043</td><td><strong>0.98387</strong></td><td>0.00021</td><td>0.22901</td><td>0.0136</td><td><strong>0.34091</strong></td><td>0.01238</td></tr><tr><td> ewe</td><td> ewe</td><td> ewe</td><td><strong>0.98361</strong></td><td>0.00023</td><td>0.38462</td><td>0.0103</td><td>0.98361</td><td>0.00021</td><td>0.98361</td><td>0.00021</td><td>0.4</td><td>0.3103</td><td><strong>0.43165</strong></td><td>0.00847</td></tr><tr><td> fao</td><td> fao</td><td> fao</td><td><strong>0.98305</strong></td><td>0.0</td><td>0.94309</td><td>0.00027</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.96667</td><td>0.00027</td><td><strong>0.98305</strong></td><td>0.0</td></tr><tr><td> fij</td><td> fij</td><td> fij</td><td><strong>1.0</strong></td><td>0.0</td><td>0.939</td><td>0.00075</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.94737</td><td>0.00075</td><td><strong>0.96923</strong></td><td>0.0075</td></tr><tr><td> fin</td><td> fin</td><td> fin</td><td>0.36311</td><td>0.02522</td><td>0.20064</td><td>0.02694</td><td>0.38769</td><td>0.02136</td><td><strong>0.41311</strong></td><td>0.01844</td><td>0.23909</td><td>0.02694</td><td><strong>0.29717</strong></td><td>0.01597</td></tr><tr><td> fon</td><td> fon</td><td> fon</td><td>0.94118</td><td>0.00046</td><td>0.34627</td><td>0.0117</td><td>0.94915</td><td>0.00032</td><td><strong>0.95726</strong></td><td>0.00021</td><td>0.35692</td><td>0.0217</td><td><strong>0.42804</strong></td><td>0.00825</td></tr><tr><td> fra</td><td> fra</td><td> fra</td><td>0.95238</td><td>0.00068</td><td>0.95161</td><td>0.00027</td><td>0.95935</td><td>0.00043</td><td><strong>0.9661</strong></td><td>0.0001</td><td>0.96721</td><td>0.00027</td><td><strong>0.98333</strong></td><td>5e-05</td></tr><tr><td> fur</td><td> fur</td><td> fur</td><td>0.944</td><td>0.00068</td><td>0.45736</td><td>0.00746</td><td>0.95935</td><td>0.00043</td><td><strong>0.96721</strong></td><td>0.00031</td><td>0.46825</td><td>0.00746</td><td><strong>0.5514</strong></td><td>0.00509</td></tr><tr><td> fuv</td><td> fuv</td><td> fuv</td><td>0.77912</td><td>0.00217</td><td>0.52133</td><td>0.0096</td><td>0.80833</td><td>0.00105</td><td><strong>0.81197</strong></td><td>0.00062</td><td>0.57743</td><td>0.0096</td><td><strong>0.69401</strong></td><td>0.00396</td></tr><tr><td> gaz</td><td> gaz</td><td> gaz</td><td>0.83221</td><td>0.00285</td><td>0.248</td><td>0.02017</td><td><strong>0.88235</strong></td><td>0.0015</td><td>0.83761</td><td>0.00062</td><td>0.27991</td><td>0.02017</td><td><strong>0.36364</strong></td><td>0.01163</td></tr><tr><td> gla</td><td> gla</td><td> gla</td><td>0.94574</td><td>0.00023</td><td>0.57416</td><td>0.00445</td><td>0.95312</td><td>0.00011</td><td><strong>0.96063</strong></td><td>0.0</td><td>0.64516</td><td>0.00445</td><td><strong>0.71429</strong></td><td>0.00225</td></tr><tr><td> gle</td><td> gle</td><td> gle</td><td>0.95</td><td>0.00091</td><td>0.7037</td><td>0.00343</td><td><strong>0.96815</strong></td><td>0.00054</td><td>0.96815</td><td>0.00052</td><td>0.80423</td><td>0.00343</td><td><strong>0.89412</strong></td><td>0.00096</td></tr><tr><td> glg</td><td> glg</td><td> glg</td><td><strong>0.98305</strong></td><td>0.00011</td><td>0.88372</td><td>0.0007</td><td>0.98305</td><td>0.00011</td><td>0.98305</td><td>0.0001</td><td>0.89764</td><td>0.0007</td><td><strong>0.91935</strong></td><td>0.00043</td></tr><tr><td> grn</td><td> grn</td><td> grn</td><td>0.816</td><td>0.00023</td><td>0.23742</td><td>0.01964</td><td><strong>0.82927</strong></td><td>0.0</td><td>0.81967</td><td>0.0</td><td>0.26281</td><td>0.01964</td><td><strong>0.30287</strong></td><td>0.01355</td></tr><tr><td> guj</td><td> guj</td><td> guj</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> hat</td><td> hat</td><td> hat</td><td>0.90706</td><td>0.000285</td><td>0.41368</td><td>0.01835</td><td>0.9313</td><td>0.00193</td><td><strong>0.95312</strong></td><td>0.00124</td><td>0.45149</td><td>0.01835</td><td><strong>0.51489</strong></td><td>0.01216</td></tr><tr><td> hau</td><td> hau</td><td> hau</td><td>0.94488</td><td>0.0024</td><td>0.57508</td><td>0.01427</td><td>0.96</td><td>0.00161</td><td><strong>0.97297</strong></td><td>0.00103</td><td>0.6679</td><td>0.01427</td><td><strong>0.78261</strong></td><td>0.00536</td></tr><tr><td> heb</td><td> heb</td><td> heb</td><td>0.99145</td><td>0.00011</td><td>0.99145</td><td>5e-05</td><td>0.10</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>0.99145</td><td>5e-05</td><td><strong>0.99145</strong></td><td>5e-05</td></tr><tr><td> hin</td><td> hin</td><td> hin</td><td>0.62</td><td>0.00867</td><td>0.6359</td><td>0.00381</td><td>0.62312</td><td>0.00805</td><td><strong>0.62944</strong></td><td>0.00752</td><td>0.6359</td><td>0.00381</td><td><strong>0.63918</strong></td><td>0.00375</td></tr><tr><td> hrv</td><td> hrv</td><td> hrv</td><td>0.60302</td><td>0.00902</td><td>0.52252</td><td>0.00558</td><td>0.62176</td><td>0.00054</td><td><strong>0.69364</strong></td><td>0.00546</td><td>0.57426</td><td>0.00558</td><td><strong>0.62032</strong></td><td>0.0037</td></tr><tr><td> hru</td><td> hru</td><td> hru</td><td>0.82192</td><td>0.00297</td><td>0.56459</td><td>0.00483</td><td>0.84507</td><td>0.00236</td><td><strong>0.89552</strong></td><td>0.00144</td><td>0.71084</td><td>0.00483</td><td><strong>0.81379</strong></td><td>0.00139</td></tr><tr><td> hye</td><td> hye</td><td> hye</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> ibo</td><td> ibo</td><td> ibo</td><td>0.98718</td><td>0.00023</td><td>0.63115</td><td>0.00483</td><td>0.99355</td><td>0.00011</td><td><strong>0.97479</strong></td><td>0.00031</td><td>0.66379</td><td>0.00483</td><td><strong>0.74038</strong></td><td>0.000289</td></tr><tr><td> ilo</td><td> ilo</td><td> ilo</td><td>0.91339</td><td>0.00126</td><td>0.71166</td><td>0.00252</td><td>0.928</td><td>0.00097</td><td><strong>0.95726</strong></td><td>0.00025</td><td>0.8227</td><td>0.00252</td><td><strong>0.92063</strong></td><td>0.00054</td></tr><tr><td> ind</td><td> ind</td><td> ind</td><td>0.72483</td><td>0.00411</td><td>0.68531</td><td>0.00188</td><td>0.76056</td><td>0.00311</td><td><strong>0.78261</strong></td><td>0.00258</td><td>0.71014</td><td>0.00188</td><td><strong>0.72593</strong></td><td>0.00145</td></tr><tr><td>isl</td><td>isl</td><td>isl</td><td>0.9916</td><td>0.00011</td><td>0.9916</td><td>5e-05</td><td>0.9916</td><td>0.00011</td><td><strong>0.9916</strong></td><td>0.0001</td><td>0.9916</td><td>5e-05</td><td><strong>0.9916</strong></td><td>5e-05</td></tr><tr><td> ita</td><td> ita</td><td> ita</td><td>0.7947</td><td>0.00342</td><td>0.67416</td><td>0.00306</td><td>0.83916</td><td>0.00236</td><td><strong>0.86957</strong></td><td>0.00175</td><td>0.73171</td><td>0.00306</td><td><strong>0.78431</strong></td><td>0.00171</td></tr><tr><td> jav</td><td> jav</td><td> jav</td><td><strong>0.97581</strong></td><td>0.00046</td><td>0.41404</td><td>0.00553</td><td>0.97581</td><td>0.00043</td><td>0.97561</td><td>0.00031</td><td>0.46275</td><td>0.00553</td><td><strong>0.50213</strong></td><td>0.00284</td></tr><tr><td> jpn</td><td> jpn</td><td> jpn</td><td>0.72195</td><td>0.01301</td><td>0.64745</td><td>0.00842</td><td>0.7861</td><td>0.00848</td><td><strong>0.79245</strong></td><td>0.00783</td><td>0.71921</td><td>0.00842</td><td><strong>0.77249</strong></td><td>0.0045</td></tr><tr><td> kan</td><td> kan</td><td> kan</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> kat</td><td> kat</td><td> kat</td><td><strong>1.0</strong></td><td>0.0</td><td>0.99394</td><td>5e-05</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>5e-05</td><td>1.0</td><td>0.0</td></tr><tr><td> kaz</td><td> kaz</td><td> kaz</td><td>0.96721</td><td>0.00034</td><td>0.40989</td><td>0.00885</td><td><strong>0.97521</strong></td><td>0.00021</td><td>0.96667</td><td>0.00021</td><td>0.41281</td><td>0.00885</td><td><strong>0.42336</strong></td><td>0.00836</td></tr><tr><td> kbp</td><td> kbp</td><td> kbp</td><td>0.85714</td><td>0.00228</td><td>0.23438</td><td>0.02103</td><td>0.90909</td><td>0.00129</td><td><strong>0.9375</strong></td><td>0.00082</td><td>0.24048</td><td>0.02103</td><td><strong>0.26786</strong></td><td>0.01757</td></tr><tr><td> kea</td><td> kea</td><td> kea</td><td>0.72727</td><td>0.00114</td><td>0.07627</td><td>0.00896</td><td>0.72727</td><td>0.00107</td><td>0.69811</td><td>0.00093</td><td><strong>0.08333</strong></td><td>0.00896</td><td><strong>0.07254</strong></td><td>0.00675</td></tr><tr><td> khk</td><td> khk</td><td> khk</td><td><strong>0.99225</strong></td><td>0.0</td><td>0.5</td><td>0.0</td><td>0.63158</td><td>0.0</td><td>0.33333</td><td>0.0</td><td>0.50593</td><td>0.00681</td><td><strong>0.55172</strong></td><td>0.00552</td></tr><tr><td> khm</td><td> khm</td><td> khm</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> kin</td><td> kin</td><td> kin</td><td>0.76336</td><td>0.0024</td><td>0.53061</td><td>0.00258</td><td>0.81967</td><td>0.00129</td><td><strong>0.8547</strong></td><td>0.00072</td><td>0.56522</td><td>0.00258</td><td><strong>0.64463</strong></td><td>0.00118</td></tr><tr><td> kir</td><td> kir</td><td> kir</td><td>0.94488</td><td>0.0008</td><td>0.35503</td><td>0.0117</td><td>0.95238</td><td>0.00064</td><td><strong>0.96774</strong></td><td>0.00041</td><td>0.35714</td><td>0.0117</td><td><strong>0.39216</strong></td><td>0.00997</td></tr><tr><td> kmb</td><td> kmb</td><td> kmb</td><td><strong>0.99194</strong></td><td>0.00011</td><td>0.82034</td><td>0.00268</td><td>0.99194</td><td>0.00011</td><td>0.99194</td><td>0.0001</td><td>0.86738</td><td>0.00268</td><td><strong>0.92015</strong></td><td>0.00096</td></tr><tr><td> kmr</td><td> kmr</td><td> kmr</td><td><strong>0.66667</strong></td><td>0.00673</td><td>0.61458</td><td>0.00397</td><td>0.66667</td><td>0.00633</td><td>0.66667</td><td>0.00608</td><td>0.63441</td><td>0.00397</td><td><strong>0.64481</strong></td><td>0.00348</td></tr><tr><td> knc</td><td> knc</td><td> knc</td><td>0.97059</td><td>0.00034</td><td>0.5641</td><td>0.00542</td><td><strong>0.97778</strong></td><td>0.00021</td><td>0.97778</td><td>0.00021</td><td>0.63768</td><td>0.00542</td><td><strong>0.76301</strong></td><td>0.00214</td></tr><tr><td> kon</td><td> kon</td><td> kon</td><td>0.40789</td><td>0.0</td><td>0.55172</td><td>0.00816</td><td>0.40789</td><td>0.0</td><td>0.39735</td><td>0.0</td><td>0.56522</td><td>0.00816</td><td><strong>0.56742</strong></td><td>0.00718</td></tr><tr><td> kor</td><td> kor</td><td> kor</td><td>0.94488</td><td>0.0008</td><td>0.83333</td><td>0.00129</td><td>0.96</td><td>0.00054</td><td><strong>0.99174</strong></td><td>0.0001</td><td>0.90909</td><td>0.00129</td><td><strong>0.96774</strong></td><td>0.00021</td></tr><tr><td> lao</td><td> lao</td><td> lao</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> lij</td><td> lij</td><td> lij</td><td>0.49785</td><td>0.01324</td><td>0.43446</td><td>0.00805</td><td>0.53953</td><td>0.01052</td><td><strong>0.64804</strong></td><td>0.00639</td><td>0.46032</td><td>0.00805</td><td><strong>0.53211</strong></td><td>0.00541</td></tr></tbody></table>
<table><caption>Table 47: Comparison of GlotLID vs OpenLID on UDHR benchmark (part 2)</caption><thead><tr><th rowspan="3">iso639-3</th><th rowspan="3">UDHR Code(s)</th><th rowspan="3">OpenLID Code(s)</th><th colspan="2">GlotLID-M</th><th colspan="2">OpenLID</th><th colspan="4">with confidence threshold θ</th><th colspan="2">OpenLID θ=3</th><th colspan="2">OpenLID θ=5</th></tr><tr><th colspan="2">F1↑</th><th colspan="2">F1↑</th><th colspan="2">F1↑</th><th colspan="2">F1↑</th><th colspan="2">F1↑</th><th colspan="2">F1↑</th></tr><tr><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th></tr></thead><tbody><tr><td>lin</td><td>lin</td><td>lin</td><td>0.99145</td><td>0.00023</td><td>0.93173</td><td>0.00091</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.95868</td><td>0.00091</td><td>0.98712</td><td>0.00011</td></tr><tr><td>lit</td><td>lit</td><td>lit</td><td>0.9375</td><td>0.00091</td><td>0.78146</td><td>0.00172</td><td>0.96774</td><td>0.00043</td><td><strong>0.98361</strong></td><td>0.00021</td><td>0.90769</td><td>0.00172</td><td>0.95161</td><td>0.00027</td></tr><tr><td>ltz</td><td>ltz</td><td>ltz</td><td><strong>0.98305</strong></td><td>0.0</td><td>0.87879</td><td>0.00075</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.87879</td><td>0.00075</td><td><strong>0.90625</strong></td><td>0.00054</td></tr><tr><td>lua</td><td>lua</td><td>lua</td><td>0.71186</td><td>0.00183</td><td>0.68263</td><td>0.00268</td><td>0.75</td><td>0.00107</td><td><strong>0.78846</strong></td><td>0.00031</td><td>0.72152</td><td>0.00268</td><td>-0.7619</td><td>0.00166</td></tr><tr><td>lug</td><td>lug</td><td>lug</td><td>0.9589</td><td>0.00068</td><td>0.4</td><td>0.01127</td><td>0.97222</td><td>0.00043</td><td><strong>0.98592</strong></td><td>0.00021</td><td>0.4375</td><td>0.01127</td><td>0.49822</td><td>0.00755</td></tr><tr><td>lus</td><td>lus</td><td>lus</td><td>0.93548</td><td>0.00091</td><td>0.28087</td><td>0.01594</td><td>0.95868</td><td>0.00054</td><td><strong>0.97479</strong></td><td>0.00031</td><td>0.30208</td><td>0.01594</td><td>0.31868</td><td>0.01329</td></tr><tr><td>lvs</td><td>lvs</td><td>lvs</td><td>0.94118</td><td>0.00171</td><td>0.9375</td><td>0.00086</td><td>0.92623</td><td>0.00118</td><td>0.90213</td><td>0.00093</td><td>0.97595</td><td>0.00086</td><td><strong>0.98361</strong></td><td>0.00021</td></tr><tr><td>mag</td><td>mag</td><td>mag</td><td>0.75385</td><td>0.00046</td><td><strong>0.76336</strong></td><td>0.00021</td><td><strong>0.76562</strong></td><td>0.00021</td><td>0.76562</td><td>0.00021</td><td>0.76336</td><td>0.00021</td><td>0.75969</td><td>0.00016</td></tr><tr><td>mai</td><td>mai</td><td>mai</td><td><strong>0.83099</strong></td><td>0.0</td><td><strong>0.81944</strong></td><td>0.00011</td><td>0.83099</td><td>0.0</td><td>0.83099</td><td>0.0</td><td>0.81944</td><td>0.00011</td><td>0.81944</td><td>0.00011</td></tr><tr><td>mai</td><td>mai</td><td>mai</td><td><strong>1.0</strong></td><td>0.0</td><td>0.99595</td><td>5e-05</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.99595</td><td>5e-05</td><td><strong>1.0</strong></td><td>0.0</td></tr><tr><td>mar</td><td>mar</td><td>mar</td><td><strong>0.99174</strong></td><td>0.00011</td><td>0.98361</td><td>0.00011</td><td>0.99174</td><td>0.00011</td><td><strong>0.99174</strong></td><td>0.00011</td><td><strong>0.99174</strong></td><td>0.00011</td><td>0.99174</td><td>5e-05</td></tr><tr><td>min</td><td>min</td><td>min</td><td>0.88235</td><td>0.00171</td><td>0.63492</td><td>0.00365</td><td>0.91603</td><td>0.00107</td><td><strong>0.92187</strong></td><td>0.00082</td><td>0.69767</td><td>0.00365</td><td><strong>0.74534</strong></td><td>0.00214</td></tr><tr><td>mkd</td><td>mkd</td><td>mkd</td><td><strong>0.99174</strong></td><td>0.0</td><td>0.97561</td><td>0.00011</td><td>0.99174</td><td>0.0</td><td><strong>0.99174</strong></td><td>0.00011</td><td>0.97561</td><td>0.00011</td><td><strong>0.78941</strong></td><td>5e-05</td></tr><tr><td>mlt</td><td>mlt</td><td>mlt</td><td>0.77419</td><td>0.00399</td><td>0.59</td><td>0.00435</td><td>0.78947</td><td>0.00343</td><td><strong>0.82759</strong></td><td>0.00258</td><td>0.68208</td><td>0.00435</td><td>0.82517</td><td>0.00129</td></tr><tr><td>mos</td><td>mos</td><td>mos</td><td>0.97015</td><td>0.00046</td><td>0.56769</td><td>0.00531</td><td>0.98485</td><td>0.00021</td><td><strong>0.99237</strong></td><td>0.0001</td><td>0.62201</td><td>0.00531</td><td><strong>0.7027</strong></td><td>0.00295</td></tr><tr><td>mri</td><td>mri</td><td>mri</td><td>0.8227</td><td>0.00023</td><td>0.26608</td><td>0.01663</td><td><strong>0.82857</strong></td><td>0.00011</td><td>0.82857</td><td>0.0001</td><td>0.27523</td><td>0.01663</td><td><strong>0.2864</strong></td><td>0.01489</td></tr><tr><td>mya</td><td>mya</td><td>mya</td><td>0.66292</td><td>0.00673</td><td><strong>0.66667</strong></td><td>0.00311</td><td>0.66292</td><td>0.00633</td><td><strong>0.67045</strong></td><td>0.00587</td><td>0.66667</td><td>0.00311</td><td>0.66667</td><td>0.00311</td></tr><tr><td>nld</td><td>nld</td><td>nld</td><td>0.70238</td><td>0.00571</td><td>0.57843</td><td>0.00461</td><td>0.71084</td><td>0.00515</td><td><strong>0.71515</strong></td><td>0.00484</td><td>0.68208</td><td>0.00461</td><td><strong>0.77124</strong></td><td>0.00188</td></tr><tr><td>nno</td><td>nno</td><td>nno</td><td>0.95868</td><td>0.00034</td><td>0.912</td><td>0.00043</td><td><strong>0.96667</strong></td><td>0.00021</td><td>0.9661</td><td>0.0001</td><td>0.92683</td><td>0.00043</td><td>0.94215</td><td>0.00021</td></tr><tr><td>nob</td><td>nob</td><td>nob</td><td>0.98462</td><td>0.00023</td><td>0.85906</td><td>0.00113</td><td><strong>0.99225</strong></td><td>0.00011</td><td>0.98438</td><td>0.0001</td><td>0.92754</td><td>0.00113</td><td>0.96241</td><td>0.00027</td></tr><tr><td>npi</td><td>npi</td><td>npi</td><td><strong>0.98214</strong></td><td>0.0</td><td>0.97345</td><td>5e-05</td><td>0.575</td><td>0.0</td><td>0.32353</td><td>0.0</td><td>0.97345</td><td>5e-05</td><td>0.97297</td><td>0.0</td></tr><tr><td>nso</td><td>nso</td><td>nso</td><td>0.86957</td><td>0.00205</td><td>0.80537</td><td>0.00156</td><td>0.87591</td><td>0.00182</td><td><strong>0.88235</strong></td><td>0.00165</td><td>0.82759</td><td>0.00156</td><td><strong>0.83916</strong></td><td>0.00123</td></tr><tr><td>nya</td><td>nya</td><td>nya</td><td><strong>0.96414</strong></td><td>0.0103</td><td>0.74462</td><td>0.00445</td><td>0.70015</td><td>0.00604</td><td><strong>0.99588</strong></td><td>0.00484</td><td>0.68208</td><td>0.00209</td><td><strong>0.78947</strong></td><td>0.00171</td></tr><tr><td>oci</td><td>oci</td><td>oci</td><td><strong>0.41101</strong></td><td>0.0</td><td><strong>0.41187</strong></td><td>0.00118</td><td>0.40516</td><td>0.0</td><td>0.38131</td><td>0.0</td><td>0.40773</td><td>0.00118</td><td>0.38838</td><td>0.00059</td></tr><tr><td>pan</td><td>pan</td><td>pan</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td></tr><tr><td>pap</td><td>pap</td><td>pap</td><td>0.79195</td><td>0.00354</td><td>0.35224</td><td>0.01164</td><td>0.83099</td><td>0.00258</td><td><strong>0.86765</strong></td><td>0.00185</td><td>0.41404</td><td>0.01164</td><td><strong>0.5514</strong></td><td>0.00514</td></tr><tr><td>pes</td><td>pes</td><td>pes</td><td><strong>0.65922</strong></td><td>0.00696</td><td>0.62745</td><td>0.00247</td><td>0.63855</td><td>0.0058</td><td>0.98182</td><td>0.0</td><td>0.95575</td><td>0.0038</td><td><strong>0.97297</strong></td><td>5e-05</td></tr><tr><td>plt</td><td>plt</td><td>plt</td><td><strong>0.98182</strong></td><td>0.0</td><td>0.92308</td><td>0.00038</td><td>0.98182</td><td>0.0</td><td><strong>0.81633</strong></td><td>0.00278</td><td>0.68966</td><td>0.00354</td><td><strong>0.76433</strong></td><td>0.00198</td></tr><tr><td>pol</td><td>pol</td><td>pol</td><td>0.74074</td><td>0.00479</td><td>0.64516</td><td>0.00354</td><td>0.76923</td><td>0.00386</td><td><strong>0.81633</strong></td><td>0.00391</td><td>0.63158</td><td>0.00241</td><td><strong>0.76433</strong></td><td>0.00198</td></tr><tr><td>prs</td><td>prs</td><td>prs</td><td>0.86331</td><td>0.00434</td><td>0.70588</td><td>0.00537</td><td>0.87273</td><td>0.000376</td><td><strong>0.89219</strong></td><td>0.00299</td><td>0.73171</td><td>0.00537</td><td><strong>0.7717</strong></td><td>0.0038</td></tr><tr><td> quy</td><td> quy</td><td> quy</td><td>0.70186</td><td>0.00274</td><td>0.33333</td><td>0.00075</td><td>0.0</td><td>0.00258</td><td><strong>0.88406</strong></td><td>0.00247</td><td><strong>0.34483</strong></td><td>0.00075</td><td>0.34483</td><td>0.00059</td></tr><tr><td>ron</td><td>ron</td><td>ron</td><td>0.80992</td><td>0.00514</td><td>0.76078</td><td>0.00317</td><td>0.80833</td><td>0.00472</td><td><strong>0.82906</strong></td><td>0.00391</td><td>0.776</td><td>0.00317</td><td><strong>0.79508</strong></td><td>0.00257</td></tr><tr><td>run</td><td>run</td><td>run</td><td>0.88235</td><td>0.00183</td><td>0.44776</td><td>0.00794</td><td>0.88889</td><td>0.00161</td><td><strong>0.90909</strong></td><td>0.00124</td><td>0.50633</td><td>0.00794</td><td>0.6</td><td>0.00429</td></tr><tr><td>rus</td><td>rus</td><td>rus</td><td>0.43321</td><td>0.01792</td><td>0.37037</td><td>0.01095</td><td>0.47431</td><td>0.01427</td><td><strong>0.51064</strong></td><td>0.01185</td><td>0.37855</td><td>0.01095</td><td><strong>0.41522</strong></td><td>0.00905</td></tr><tr><td> sag</td><td> sag</td><td> sag</td><td><strong>0.81553</strong></td><td>0.0</td><td>0.65806</td><td>0.00231</td><td>0.80392</td><td>0.0</td><td>0.79208</td><td>0.0</td><td>0.74453</td><td>0.00231</td><td><strong>0.81356</strong></td><td>0.00048</td></tr><tr><td> san</td><td> san</td><td> san</td><td><strong>0.66667</strong></td><td>0.0</td><td>0.66376</td><td>5e-05</td><td>0.66667</td><td>0.0</td><td>0.66667</td><td>0.0</td><td>0.66376</td><td>5e-05</td><td>0.66376</td><td>5e-05</td></tr><tr><td> shn</td><td> shn</td><td> shn</td><td><strong>0.99145</strong></td><td>0.0</td><td><strong>0.99145</strong></td><td>0.0</td><td>0.99145</td><td>0.0</td><td>0.99145</td><td>0.0</td><td>0.99145</td><td>0.0</td><td>0.99145</td><td>0.0</td></tr><tr><td> sin</td><td> sin</td><td> sin</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> slk</td><td> slk</td><td> slk</td><td>0.87591</td><td>0.00194</td><td>0.68571</td><td>0.00295</td><td>0.9375</td><td>0.00086</td><td><strong>0.94488</strong></td><td>0.00072</td><td>0.75472</td><td>0.00295</td><td><strong>0.90909</strong></td><td>0.00064</td></tr><tr><td> slv</td><td> slv</td><td> slv</td><td>0.89552</td><td>0.0016</td><td>0.50847</td><td>0.00622</td><td>0.95238</td><td>0.00064</td><td><strong>0.97561</strong></td><td>0.00031</td><td>0.65934</td><td>0.00622</td><td><strong>0.78947</strong></td><td>0.00171</td></tr><tr><td> smo</td><td> smo</td><td> smo</td><td><strong>1.0</strong></td><td>0.0</td><td>0.84564</td><td>0.00123</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>0.85135</td><td>0.00123</td><td>0.875</td><td>0.00096</td></tr><tr><td> sna</td><td> sna</td><td> sna</td><td>0.93846</td><td>0.00091</td><td>0.41781</td><td>0.00912</td><td>0.96036</td><td>0.00054</td><td><strong>0.98387</strong></td><td>0.00021</td><td>0.54955</td><td>0.00912</td><td><strong>0.7673</strong></td><td>0.00019</td></tr><tr><td> som</td><td> som</td><td> som</td><td>0.75817</td><td>0.00422</td><td>0.44106</td><td>0.00789</td><td>0.80556</td><td>0.00301</td><td><strong>0.89231</strong></td><td>0.00144</td><td>0.48333</td><td>0.00789</td><td><strong>0.59184</strong></td><td>0.00429</td></tr><tr><td> sot</td><td> sot</td><td> sot</td><td>0.89333</td><td>0.00011</td><td>0.86667</td><td>0.00043</td><td><strong>0.9916</strong></td><td>0.0</td><td>0.9916</td><td>0.0</td><td>0.87395</td><td>0.00043</td><td><strong>0.88889</strong></td><td>0.00027</td></tr><tr><td> spa</td><td> spa</td><td> spa</td><td>0.72321</td><td>0.00685</td><td>0.69333</td><td>0.00343</td><td>0.75701</td><td>0.00537</td><td><strong>0.78</strong></td><td>0.00402</td><td>0.72558</td><td>0.00343</td><td><strong>0.75362</strong></td><td>0.00246</td></tr><tr><td> src</td><td> src</td><td> src</td><td><strong>0.9916</strong></td><td>0.0</td><td>0.63158</td><td>0.00376</td><td>0.9916</td><td>0.0</td><td>0.9916</td><td>0.0</td><td>0.66667</td><td>0.00376</td><td><strong>0.76433</strong></td><td>0.00198</td></tr><tr><td> srp</td><td> srp</td><td> srp</td><td><strong>0.5124</strong></td><td>0.00685</td><td>0.48133</td><td>0.00338</td><td>0.4958</td><td>0.00633</td><td>0.48945</td><td>0.00608</td><td>0.48333</td><td>0.00338</td><td><strong>0.48536</strong></td><td>0.00327</td></tr><tr><td> ssw</td><td> ssw</td><td> ssw</td><td>0.94891</td><td>0.00068</td><td>0.72626</td><td>0.00258</td><td>0.97015</td><td>0.00032</td><td><strong>0.99237</strong></td><td>0.0</td><td>0.76923</td><td>0.00258</td><td><strong>0.89655</strong></td><td>0.00075</td></tr><tr><td> sun</td><td> sun</td><td> sun</td><td>0.96967</td><td>0.00034</td><td>0.52282</td><td>0.00606</td><td><strong>0.9771</strong></td><td>0.00021</td><td>0.9771</td><td>0.00021</td><td>0.63317</td><td>0.00606</td><td><strong>0.77301</strong></td><td>0.00188</td></tr><tr><td> swe</td><td> swe</td><td> swe</td><td>0.86301</td><td>0.00228</td><td>0.89362</td><td>0.0008</td><td>0.93333</td><td>0.00097</td><td><strong>1.0</strong></td><td>0.0</td><td>0.96183</td><td>0.0008</td><td><strong>0.98437</strong></td><td>0.00011</td></tr><tr><td> swh</td><td> swh</td><td> swh</td><td><strong>0.84956</strong></td><td>0.00046</td><td>0.1868</td><td>0.02694</td><td>0.84685</td><td>0.00302</td><td>0.78</td><td>0.0</td><td>0.22351</td><td>0.02694</td><td><strong>0.29517</strong></td><td>0.01468</td></tr><tr><td> tam</td><td> tam</td><td> tam</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> tat</td><td> tat</td><td> tat</td><td>0.65556</td><td>0.00696</td><td>0.40972</td><td>0.00907</td><td>0.68208</td><td>0.0058</td><td><strong>0.69822</strong></td><td>0.00515</td><td>0.42143</td><td>0.00907</td><td><strong>0.46457</strong></td><td>0.00723</td></tr><tr><td> tel</td><td> tel</td><td> tel</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> tgk</td><td> tgk</td><td> tgk</td><td>0.67429</td><td>0.0065</td><td>0.44106</td><td>0.00783</td><td>0.92913</td><td>0.00097</td><td><strong>0.95082</strong></td><td>0.00052</td><td>0.45312</td><td>0.00783</td><td><strong>0.53211</strong></td><td>0.00541</td></tr><tr><td> tgl</td><td> tgl</td><td> tgl</td><td>0.9403</td><td>0.0008</td><td>0.58879</td><td>0.00467</td><td>0.95455</td><td>0.00054</td><td><strong>0.97674</strong></td><td>0.00021</td><td>0.61165</td><td>0.00467</td><td>0.6738</td><td>0.00321</td></tr><tr><td> tha</td><td> tha</td><td> tha</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> tir</td><td> tir</td><td> tir</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td> tpi</td><td> tpi</td><td> tpi</td><td><strong>0.98361</strong></td><td>0.00011</td><td>0.47431</td><td>0.00708</td><td>0.98361</td><td>0.00011</td><td>0.98361</td><td>0.0001</td><td>0.51724</td><td>0.00708</td><td><strong>0.56338</strong></td><td>0.00493</td></tr><tr><td> tsn</td><td> tsn</td><td> tsn</td><td>0.98361</td><td>0.00023</td><td>0.85106</td><td>0.00113</td><td><strong>0.99174</strong></td><td>0.00011</td><td>0.99174</td><td>0.0001</td><td>0.90909</td><td>0.00113</td><td><strong>0.92308</strong></td><td>0.00054</td></tr><tr><td> tso</td><td> tso</td><td> tso</td><td>0.94158</td><td>0.0016</td><td>0.63205</td><td>0.00875</td><td>0.94158</td><td>0.0015</td><td><strong>0.95139</strong></td><td>0.00113</td><td>0.64965</td><td>0.00875</td><td><strong>0.68293</strong></td><td>0.00696</td></tr><tr><td> tuk</td><td> tuk</td><td> tuk</td><td>0.94821</td><td>0.00148</td><td>0.62564</td><td>0.0008</td><td>0.96748</td><td>0.00086</td><td><strong>0.98347</strong></td><td>0.00041</td><td>0.65591</td><td>0.0008</td><td><strong>0.66667</strong></td><td>0.00016</td></tr><tr><td> tur</td><td> tur</td><td> tur</td><td>0.4918</td><td>0.01415</td><td>0.34384</td><td>0.01229</td><td>0.50209</td><td>0.01277</td><td><strong>0.51502</strong></td><td>0.01164</td><td>0.35928</td><td>0.01229</td><td><strong>0.37975</strong></td><td>0.0105</td></tr><tr><td> twi</td><td> twi</td><td> twi</td><td>0.95349</td><td>0.0137</td><td>0.5234</td><td>0.01202</td><td>0.96094</td><td>0.00107</td><td><strong>0.9685</strong></td><td>0.00082</td><td>0.55034</td><td>0.01202</td><td><strong>0.60891</strong></td><td>0.00847</td></tr><tr><td> tzm</td><td> tzm</td><td> tzm</td><td>0.01754</td><td>0.00593</td><td><strong>0.01653</strong></td><td>0.00317</td><td>0.01754</td><td>0.00558</td><td><strong>0.0177</strong></td><td>0.00525</td><td>0.01653</td><td>0.00317</td><td><strong>0.01653</strong></td><td>0.00316</td></tr><tr><td> uig</td><td> uig</td><td> uig</td><td>0.90295</td><td>0.00114</td><td><strong>0.66667</strong></td><td>0.0</td><td><strong>0.93333</strong></td><td>0.0</td><td>0.89908</td><td>0.0</td><td>0.66667</td><td>0.0</td><td><strong>0.66667</strong></td><td>0.0</td></tr><tr><td> ukr</td><td> ukr</td><td> ukr</td><td>0.98361</td><td>0.00023</td><td>0.96</td><td>0.00027</td><td>0.98361</td><td>0.00021</td><td><strong>0.99174</strong></td><td>0.0001</td><td>0.96</td><td>0.00027</td><td><strong>0.98361</strong></td><td>0.00011</td></tr><tr><td> umb</td><td> umb</td><td> umb</td><td>0.87931</td><td>0.00114</td><td>0.85409</td><td>0.00022</td><td>0.87931</td><td>0.00107</td><td>0.87611</td><td>0.00072</td><td>0.69597</td><td>0.00114</td><td><strong>0.90226</strong></td><td>0.00139</td></tr><tr><td> urd</td><td> urd</td><td> urd</td><td><strong>0.96522</strong></td><td>0.0008</td><td>0.61838</td><td>0.00073</td><td>0.96522</td><td>0.00075</td><td>0.96522</td><td>0.00072</td><td>0.62011</td><td>0.00073</td><td><strong>0.62536</strong></td><td>0.00707</td></tr><tr><td> uzn</td><td> uzn</td><td> uzn</td><td>0.50407</td><td>0.0073</td><td>0.18072</td><td>0.02597</td><td>0.53881</td><td>0.00429</td><td><strong>0.56716</strong></td><td>0.00247</td><td>0.21277</td><td>0.02597</td><td><strong>0.27523</strong></td><td>0.01372</td></tr><tr><td> vec</td><td> vec</td><td> vec</td><td>0.92308</td><td>0.00114</td><td>0.76923</td><td>0.00193</td><td>0.95238</td><td>0.00064</td><td><strong>0.96774</strong></td><td>0.00041</td><td>0.7947</td><td>0.00193</td><td><strong>0.89552</strong></td><td>0.00075</td></tr><tr><td> vie</td><td> vie</td><td> vie</td><td><strong>0.66304</strong></td><td>0.00011</td><td>0.61616</td><td>0.0008</td><td>0.66304</td><td>0.00011</td><td>0.66304</td><td>0.0001</td><td>0.62887</td><td>0.0008</td><td><strong>0.63874</strong></td><td>0.00043</td></tr><tr><td> war</td><td> war</td><td> war</td><td><strong>0.9916</strong></td><td>0.0</td><td>0.90909</td><td>0.00064</td><td>0.9916</td><td>0.0</td><td>0.9916</td><td>0.0</td><td>0.9375</td><td>0.00064</td><td><strong>0.94488</strong></td><td>0.00038</td></tr><tr><td> wol</td><td> wol</td><td> wol</td><td>0.79747</td><td>0.00365</td><td>0.39117</td><td>0.0103</td><td>0.86897</td><td>0.00204</td><td><strong>0.92537</strong></td><td>0.00093</td><td>0.45756</td><td>0.0103</td><td><strong>0.56881</strong></td><td>0.00498</td></tr><tr><td> xho</td><td> xho</td><td> xho</td><td>0.93846</td><td>0.00091</td><td>0.62245</td><td>0.00397</td><td>0.96825</td><td>0.00043</td><td><strong>0.976</strong></td><td>0.00031</td><td>0.69714</td><td>0.00397</td><td><strong>0.78205</strong></td><td>0.00182</td></tr><tr><td> ydd</td><td> ydd</td><td> ydd</td><td><strong>0.99187</strong></td><td>0.0</td><td>0.33895</td><td>0.0</td><td>0.88889</td><td>0.00161</td><td><strong>0.93023</strong></td><td>0.00093</td><td>0.99187</td><td>0.0</td><td><strong>0.99187</strong></td><td>0.0</td></tr><tr><td> yor</td><td> yor</td><td> yor</td><td>0.85106</td><td>0.00024</td><td>0.33895</td><td>0.01256</td><td>0.85106</td><td>0.00024</td><td><strong>0.96408</strong></td><td>0.0</td><td>0.86167</td><td>0.01256</td><td><strong>0.57692</strong></td><td>0.00471</td></tr><tr><td> zho</td><td> zho</td><td> zho</td><td>0.96345</td><td>0.00011</td><td>0.62049</td><td>0.04561</td><td><strong>0.96408</strong></td><td>0.0</td><td>0.96408</td><td>0.0</td><td>0.71366</td><td>0.04561</td><td><strong>0.8037</strong></td><td>0.01645</td></tr><tr><td> zul</td><td> zul</td><td> zul</td><td><strong>0.98305</strong></td><td>0.0</td><td>0.58883</td><td>0.00424</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.61053</td><td>0.00424</td><td><strong>0.65169</strong></td><td>0.00321</td></tr></tbody></table>
<table><caption>Table 48: Comparison of GlotLID vs NLLB on UDHR benchmark (part 1)</caption><thead><tr><th rowspan="2">iso639-3</th><th rowspan="2">UDHR Code(s)</th><th rowspan="2">NLLB Code(s)</th><th colspan="2">GlotLID-M</th><th colspan="2">NLLB</th><th colspan="2">GlotLID-M θ=3</th><th colspan="2">GlotLID-M θ=5</th><th colspan="2">NLLB θ=3</th><th colspan="2">NLLB θ=5</th></tr><tr><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th></tr></thead><tbody><tr><td>abk</td><td>abk</td><td>abk</td><td></td><td></td><td>0.98333</td><td>6e-05</td><td><strong>0.91603</strong></td><td>0.00107</td><td>0.91603</td><td>0.00103</td><td>0.57005</td><td>0.0057</td><td>0.62434</td><td>0.0038</td></tr><tr><td>ace</td><td>ace</td><td>ace</td><td>0.90909</td><td>0.00126</td><td>0.53153</td><td>0.0057</td><td></td><td></td><td></td><td></td><td>0.65193</td><td>0.00375</td><td>0.67045</td><td>0.00314</td></tr><tr><td>ady</td><td>ady</td><td>ady</td><td><strong>0.83495</strong></td><td>0.0</td><td>0.63441</td><td>0.00375</td><td>0.83495</td><td>0.0</td><td>0.83495</td><td>0.0</td><td>0.65193</td><td>0.00375</td><td>0.67045</td><td>0.00314</td></tr><tr><td> afr</td><td> afr</td><td> afr</td><td>0.95238</td><td>0.00068</td><td>0.90769</td><td>0.00062</td><td>0.96774</td><td>0.00043</td><td><strong>0.97561</strong></td><td>0.00031</td><td>0.91473</td><td>0.00062</td><td>0.93651</td><td>0.00039</td></tr><tr><td>aka</td><td>fat/twi</td><td>aka/twi</td><td><strong>1.0</strong></td><td>0.0</td><td>0.60884</td><td>0.01264</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.65209</td><td>0.01264</td><td>0.72032</td><td>0.00743</td></tr><tr><td>als</td><td>als</td><td>als</td><td><strong>0.86131</strong></td><td>0.00205</td><td>0.43066</td><td>0.00867</td><td>0.7377</td><td>0.00182</td><td>0.56863</td><td>0.00134</td><td>0.48163</td><td>0.00867</td><td>0.58416</td><td>0.00457</td></tr><tr><td>alt</td><td>alt</td><td>alt</td><td>0.95495</td><td>0.00034</td><td>0.76259</td><td>0.00173</td><td><strong>0.96364</strong></td><td>0.00021</td><td>0.96364</td><td>0.00021</td><td>0.76259</td><td>0.00173</td><td>0.80303</td><td>0.00132</td></tr><tr><td>amh</td><td>amh</td><td>amh</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>0.88189</strong></td><td>6e-05</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.7156</td><td>6e-05</td><td>0.6</td><td>0.0</td></tr><tr><td>arb</td><td>arb</td><td>arb</td><td><strong>0.98333</strong></td><td>0.00011</td><td>0.60914</td><td>0.00431</td><td>0.92035</td><td>0.00011</td><td>0.8381</td><td>0.0001</td><td>0.76433</td><td>0.00431</td><td>0.88235</td><td>0.00088</td></tr><tr><td>arn</td><td>arn</td><td>arn</td><td>0.93913</td><td>0.00011</td><td>0.75676</td><td>0.00179</td><td><strong>0.94737</strong></td><td>0.0</td><td>0.94737</td><td>0.0</td><td>0.86154</td><td>0.00179</td><td>0.9322</td><td>0.00017</td></tr><tr><td>ast</td><td>ast</td><td>ast</td><td>0.97521</td><td>0.00011</td><td>0.75561</td><td>0.00475</td><td>0.97521</td><td>0.00011</td><td><strong>0.98333</strong></td><td>0.0</td><td>0.76129</td><td>0.00475</td><td>0.86765</td><td>0.00088</td></tr><tr><td>ayr</td><td>ayr</td><td>ayr</td><td><strong>0.99174</strong></td><td>0.00011</td><td>0.69461</td><td>0.00274</td><td>0.91071</td><td>0.00011</td><td>0.84615</td><td>0.0</td><td>0.76821</td><td>0.00274</td><td>0.87218</td><td>0.00083</td></tr><tr><td>azb</td><td>azb</td><td>azb</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>azj</td><td>azj</td><td>azj</td><td><strong>0.74306</strong></td><td>0.00696</td><td>0.42754</td><td>0.00542</td><td>0.15789</td><td>0.00215</td><td>0.03008</td><td>0.00113</td><td>0.45736</td><td>0.00542</td><td>0.4739</td><td>0.00385</td></tr><tr><td>bam</td><td>bam</td><td>bam</td><td>0.49682</td><td>0.00662</td><td>0.20961</td><td>0.01957</td><td>0.5098</td><td>0.0058</td><td><strong>0.55319</strong></td><td>0.00433</td><td>0.22857</td><td>0.01957</td><td>0.27666</td><td>0.01315</td></tr><tr><td>ban</td><td>ban</td><td>ban</td><td>0.97561</td><td>0.00011</td><td>0.7044</td><td>0.00229</td><td><strong>0.98361</strong></td><td>0.0</td><td>0.97521</td><td>0.0</td><td>0.77241</td><td>0.00229</td><td>0.82963</td><td>0.00094</td></tr><tr><td>bel</td><td>bel</td><td>bel</td><td><strong>0.98333</strong></td><td>0.0</td><td>0.80272</td><td>0.00151</td><td>0.98333</td><td>0.0</td><td>0.98333</td><td>0.0</td><td>0.81379</td><td>0.00151</td><td>0.88722</td><td>0.00072</td></tr><tr><td>bem</td><td>bem</td><td>bem</td><td><strong>0.98333</strong></td><td>0.00023</td><td>0.40714</td><td>0.00917</td><td>0.98333</td><td>0.00021</td><td>0.98333</td><td>0.00021</td><td>0.41455</td><td>0.00917</td><td>0.46914</td><td>0.00699</td></tr><tr><td>ben</td><td>ben</td><td>ben</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>0.992</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.992</td><td>0.0</td><td>0.992</td><td>0.0</td></tr><tr><td>bho</td><td>bho</td><td>bho</td><td><strong>0.78519</strong></td><td>0.00034</td><td><strong>0.66116</strong></td><td>0.00011</td><td>0.78519</td><td>0.00032</td><td>0.77273</td><td>0.00021</td><td>0.66116</td><td>0.00011</td><td>0.66116</td><td>0.00011</td></tr><tr><td>bis</td><td>bis</td><td>bis</td><td><strong>1.0</strong></td><td>0.0</td><td>0.71006</td><td>0.00274</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.71856</td><td>0.00274</td><td>0.75949</td><td>0.00209</td></tr><tr><td>bod</td><td>bod</td><td>bod</td><td><strong>0.89091</strong></td><td>0.00011</td><td>0.61224</td><td>0.00425</td><td>0.89091</td><td>0.00011</td><td>0.89091</td><td>0.0001</td><td>0.72727</td><td>0.00425</td><td>0.77922</td><td>0.00187</td></tr><tr><td>bos</td><td>bos</td><td>bos</td><td>0.18103</td><td>0.00139</td><td>0.14857</td><td>0.01141</td><td><strong>0.18605</strong></td><td>0.00805</td><td>0.14607</td><td>0.00464</td><td>0.16456</td><td>0.01141</td><td>0.18028</td><td>0.00781</td></tr><tr><td>bug</td><td>bug</td><td>bug</td><td>0.95312</td><td>0.00057</td><td>0.7439</td><td>0.00229</td><td>0.96063</td><td>0.00043</td><td><strong>0.976</strong></td><td>0.00021</td><td>0.82432</td><td>0.00229</td><td>0.91729</td><td>0.00055</td></tr><tr><td>bul</td><td>bul</td><td>bul</td><td>0.96</td><td>0.00057</td><td>0.95868</td><td>0.00017</td><td>0.90769</td><td>0.00054</td><td><strong>0.97561</strong></td><td>0.00031</td><td>0.95868</td><td>0.00017</td><td>0.97479</td><td>6e-05</td></tr><tr><td>cat</td><td>cat</td><td>cat</td><td>0.93023</td><td>0.00103</td><td>0.49793</td><td>0.00677</td><td>0.95238</td><td>0.00064</td><td><strong>0.96774</strong></td><td>0.00041</td><td>0.63492</td><td>0.00677</td><td>0.81633</td><td>0.00149</td></tr><tr><td>ceb</td><td>ceb</td><td>ceb</td><td>0.96721</td><td>0.00046</td><td>0.57143</td><td>0.00481</td><td>0.9916</td><td>0.00011</td><td><strong>1.0</strong></td><td>0.0</td><td>0.59487</td><td>0.00481</td><td>0.61702</td><td>0.00391</td></tr><tr><td>ces</td><td>ces</td><td>ces</td><td><strong>0.98387</strong></td><td>0.0</td><td>0.79487</td><td>0.00173</td><td>0.98387</td><td>0.0</td><td>0.98387</td><td>0.0</td><td>0.89855</td><td>0.00173</td><td>0.94656</td><td>0.00033</td></tr><tr><td>chv</td><td>chv</td><td>chv</td><td><strong>0.86154</strong></td><td>0.0</td><td>0.8</td><td>0.00028</td><td>0.86154</td><td>0.0</td><td>0.86154</td><td>0.0</td><td>0.82352</td><td>0.0028</td><td>0.83582</td><td>0.00011</td></tr><tr><td>cjk</td><td>cjk</td><td>cjk</td><td><strong>0.92641</strong></td><td>0.00034</td><td>0.56296</td><td>0.00951</td><td>0.92641</td><td>0.00032</td><td>0.92035</td><td>0.0001</td><td>0.57431</td><td>0.00951</td><td>0.6137</td><td>0.00726</td></tr><tr><td>ckb</td><td>ckb</td><td>ckb</td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td><td></td></tr><tr><td>crh</td><td>crh</td><td>crh</td><td>0.97561</td><td>0.00034</td><td>0.9375</td><td>0.00045</td><td><strong>0.98361</strong></td><td>0.00021</td><td>0.98361</td><td>0.00021</td><td>0.96</td><td>0.00045</td><td><strong>1.0</strong></td><td>0.0</td></tr><tr><td>cym</td><td>cym</td><td>cym</td><td><strong>1.0</strong></td><td>0.0</td><td>0.77215</td><td>0.00196</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.82432</td><td>0.00196</td><td>0.87143</td><td>0.00094</td></tr><tr><td>dan</td><td>dan</td><td>dan</td><td>0.85135</td><td>0.00251</td><td>0.87143</td><td>0.00089</td><td>0.91304</td><td>0.00129</td><td><strong>0.98437</strong></td><td>0.00021</td><td>0.96825</td><td>0.00089</td><td>0.96825</td><td>0.00011</td></tr><tr><td>deu</td><td>deu</td><td>deu</td><td><strong>0.98745</strong></td><td>0.00011</td><td>0.64</td><td>0.00755</td><td>0.98745</td><td>0.00011</td><td>0.98745</td><td>0.0001</td><td>0.73846</td><td>0.00755</td><td>0.79208</td><td>0.00347</td></tr><tr><td>duy</td><td>duy</td><td>duy</td><td><strong>0.23188</strong></td><td>0.00719</td><td>0.40167</td><td>0.00721</td><td>0.22059</td><td>0.00666</td><td>0.17323</td><td>0.00587</td><td>0.04396</td><td>0.00721</td><td>0.02581</td><td>0.00517</td></tr><tr><td>dz0</td><td>dz0</td><td>dz0</td><td><strong>0.90769</strong></td><td>0.00126</td><td>0.68132</td><td>0.0</td><td>0.90769</td><td>0.00054</td><td><strong>0.976</strong></td><td>0.00021</td><td>0.68132</td><td>0.0</td><td>0.58824</td><td>0.0</td></tr><tr><td>ell</td><td>ell</td><td>ell</td><td>0.97908</td><td>0.0</td><td><strong>0.98333</strong></td><td>0.0</td><td>0.97908</td><td>0.0</td><td>0.97908</td><td>0.0</td><td>0.97479</td><td>0.0</td><td>0.97479</td><td>0.0</td></tr><tr><td>eng</td><td>eng</td><td>eng</td><td>0.85294</td><td>0.00205</td><td>0.34188</td><td>0.01292</td><td>0.87218</td><td>0.00161</td><td><strong>0.8855</strong></td><td>0.00134</td><td>0.39867</td><td>0.01292</td><td>0.46693</td><td>0.00754</td></tr><tr><td>epo</td><td>epo</td><td>epo</td><td>0.96825</td><td>0.00046</td><td>0.31202</td><td>0.01504</td><td><strong>0.976</strong></td><td>0.00032</td><td>0.976</td><td>0.00031</td><td>0.36858</td><td>0.01504</td><td>0.44203</td><td>0.00847</td></tr><tr><td>est</td><td>est</td><td>est</td><td>0.9375</td><td>0.00091</td><td>0.27778</td><td>0.01745</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.3252</td><td>0.01745</td><td>0.44135</td><td>0.00869</td></tr><tr><td>eus</td><td>eus</td><td>eus</td><td>0.91729</td><td>0.000126</td><td>0.67052</td><td>0.00302</td><td>0.96825</td><td>0.00043</td><td><strong>0.98387</strong></td><td>0.00021</td><td>0.81119</td><td>0.0</td><td>0.01135</td><td>0.00302</td></tr><tr><td>ewe</td><td>ewe</td><td>ewe</td><td><strong>0.98361</strong></td><td>0.0</td><td>0.36137</td><td>0.01135</td><td>0.98361</td><td>0.00021</td><td>0.98361</td><td>0.00021</td><td>0.4</td><td>0.00410</td><td>0.44106</td><td>0.00798</td></tr><tr><td>fao</td><td>fao</td><td>fao</td><td><strong>0.98305</strong></td><td>0.0</td><td>0.64444</td><td>6e-05</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.64444</td><td>6e-05</td><td>0.65169</td><td>0.0</td></tr><tr><td>fij</td><td>fij</td><td>fij</td><td><strong>1.0</strong></td><td>0.0</td><td>0.96825</td><td>0.00011</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.96825</td><td>0.00011</td><td>0.976</td><td>6e-05</td></tr><tr><td>fin</td><td>fin</td><td>fin</td><td>0.36311</td><td>0.02522</td><td>0.2344</td><td>0.02259</td><td>0.38769</td><td>0.002136</td><td><strong>0.41311</strong></td><td>0.01844</td><td>0.27434</td><td>0.02259</td><td>0.33155</td><td>0.0137</td></tr><tr><td>fon</td><td>fon</td><td>fon</td><td>0.94118</td><td>0.00046</td><td>0.40702</td><td>0.00939</td><td>0.94195</td><td>0.00332</td><td><strong>0.95726</strong></td><td>0.00021</td><td>0.41135</td><td>0.00939</td><td>0.48335</td><td>0.00677</td></tr><tr><td>fra</td><td>fra</td><td>fra</td><td>0.95238</td><td>0.00068</td><td>0.58252</td><td>0.00481</td><td>0.95935</td><td>0.00043</td><td><strong>0.9661</strong></td><td>0.00001</td><td>0.6383</td><td>0.00481</td><td>0.68966</td><td>0.00297</td></tr><tr><td>fur</td><td>fur</td><td>fur</td><td>0.944</td><td>0.00068</td><td>0.78146</td><td>0.00179</td><td>0.95935</td><td>0.00043</td><td><strong>0.96721</strong></td><td>0.00031</td><td>0.80822</td><td>0.00179</td><td>0.92187</td><td>0.0005</td></tr><tr><td>fuv</td><td>fuv</td><td>fuv</td><td>0.77912</td><td>0.00217</td><td>0.4793</td><td>0.01208</td><td>0.80833</td><td>0.00107</td><td><strong>0.81197</strong></td><td>0.00062</td><td>0.53528</td><td>0.01208</td><td>0.66066</td><td>0.00495</td></tr><tr><td>gaz</td><td>gaz</td><td>gaz</td><td>0.83221</td><td>0.00285</td><td>0.41892</td><td>0.00962</td><td><strong>0.88235</strong></td><td>0.0015</td><td>0.83761</td><td>0.00062</td><td>0.43357</td><td>0.00962</td><td>0.49206</td><td>0.00704</td></tr><tr><td>gla</td><td>gla</td><td>gla</td><td>0.94574</td><td>0.00023</td><td>0.9375</td><td>0.00011</td><td>0.95312</td><td>0.00011</td><td><strong>0.96063</strong></td><td>0.0</td><td>0.9375</td><td>0.00011</td><td>0.95238</td><td>0.0</td></tr><tr><td>gle</td><td>gle</td><td>gle</td><td>0.95</td><td>0.00091</td><td>0.90909</td><td>0.00078</td><td>0.96815</td><td>0.00054</td><td>0.86185</td><td>0.00052</td><td>0.98684</td><td>0.00078</td><td>0.99338</td><td>0.0</td></tr><tr><td>glg</td><td>glg</td><td>glg</td><td><strong>0.98305</strong></td><td>0.00011</td><td>0.65169</td><td>0.00341</td><td><strong>0.98305</strong></td><td>0.00011</td><td>0.98305</td><td>0.0001</td><td>0.76821</td><td>0.00341</td><td>0.90625</td><td>0.00061</td></tr><tr><td>grn</td><td>grn</td><td>grn</td><td>0.816</td><td>0.0023</td><td>0.28409</td><td>0.01286</td><td><strong>0.82927</strong></td><td>0.0</td><td>0.81967</td><td>0.0</td><td>0.36765</td><td>0.01286</td><td>0.53191</td><td>0.00363</td></tr><tr><td>guj</td><td>guj</td><td>guj</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>hat</td><td>hat</td><td>hat</td><td>0.90706</td><td>0.00285</td><td>0.96786</td><td>0.00598</td><td>0.9313</td><td>0.00193</td><td><strong>0.95312</strong></td><td>0.00124</td><td>0.69971</td><td>0.00598</td><td>0.71856</td><td>0.00506</td></tr><tr><td>hau</td><td>hau</td><td>hau</td><td>0.94488</td><td>0.0024</td><td>0.83256</td><td>0.00397</td><td>0.96</td><td>0.00161</td><td><strong>0.97297</strong></td><td>0.00103</td><td>0.87745</td><td>0.00397</td><td>0.93229</td><td>0.00138</td></tr><tr><td>heb</td><td>heb</td><td>heb</td><td>0.99145</td><td>0.00011</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>hin</td><td>hin</td><td>hin</td><td>0.62</td><td>0.00867</td><td>0.6359</td><td>0.00397</td><td>0.62312</td><td>0.00805</td><td>0.62944</td><td>0.00752</td><td><strong>0.64583</strong></td><td>0.00397</td><td>0.64583</td><td>0.00374</td></tr><tr><td>hrv</td><td>hrv</td><td>hrv</td><td>0.60302</td><td>0.00902</td><td>0.42636</td><td>0.008</td><td>0.62176</td><td>0.00784</td><td><strong>0.69364</strong></td><td>0.00546</td><td>0.51643</td><td>0.008</td><td>0.58511</td><td>0.00402</td></tr><tr><td>hun</td><td>hun</td><td>hun</td><td>0.82192</td><td>0.00297</td><td>0.22814</td><td>0.0227</td><td>0.84507</td><td>0.00236</td><td><strong>0.89552</strong></td><td>0.00144</td><td>0.3183</td><td>0.0227</td><td>0.46332</td><td>0.00765</td></tr><tr><td>hye</td><td>hye</td><td>hye</td><td><strong>1.0</strong></td><td>0.0</td><td>0.97778</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.97778</td><td>0.0</td><td>0.97778</td><td>0.0</td></tr><tr><td>ibo</td><td>ibo</td><td>ibo</td><td>0.98718</td><td>0.00023</td><td>0.50877</td><td>0.0052</td><td>0.99355</td><td>0.00011</td><td><strong>1.0</strong></td><td>0.0</td><td>0.52968</td><td>0.0052</td><td>0.59184</td><td>0.00036</td></tr><tr><td>ilo</td><td>ilo</td><td>ilo</td><td>0.91339</td><td>0.00126</td><td>0.7651</td><td>0.0019</td><td>0.928</td><td>0.00097</td><td><strong>0.97479</strong></td><td>0.00031</td><td>0.83824</td><td>0.0019</td><td>0.93443</td><td>0.00039</td></tr><tr><td>ind</td><td>ind</td><td>ind</td><td>0.72483</td><td>0.00411</td><td>0.397</td><td>0.00867</td><td>0.76056</td><td>0.00311</td><td><strong>0.78261</strong></td><td>0.00058</td><td>0.53807</td><td>0.00867</td><td>0.69799</td><td>0.00209</td></tr><tr><td>isl</td><td>isl</td><td>isl</td><td><strong>0.9916</strong></td><td>0.00011</td><td>0.76129</td><td>0.00207</td><td>0.9916</td><td>0.00011</td><td>0.9916</td><td>0.0001</td><td>0.80272</td><td>0.00207</td><td>0.80272</td><td>0.0016</td></tr><tr><td>ita</td><td>ita</td><td>ita</td><td>0.7947</td><td>0.00342</td><td>0.44195</td><td>0.00822</td><td>0.83916</td><td>0.00236</td><td><strong>0.86957</strong></td><td>0.00175</td><td>0.52444</td><td>0.00822</td><td>0.6178</td><td>0.00391</td></tr><tr><td>jav</td><td>jav</td><td>jav</td><td><strong>0.97581</strong></td><td>0.00046</td><td>0.36646</td><td>0.00783</td><td>0.97581</td><td>0.00043</td><td>0.97561</td><td>0.00031</td><td>0.41696</td><td>0.00783</td><td>0.47012</td><td>0.0038</td></tr><tr><td>jpn</td><td>jpn</td><td>jpn</td><td>0.72195</td><td>0.01301</td><td>0.73</td><td>0.00593</td><td>0.7861</td><td>0.00848</td><td>0.79245</td><td>0.00783</td><td>0.82486</td><td>0.00593</td><td><strong>0.85373</strong></td><td>0.00242</td></tr><tr><td>kal</td><td>kal</td><td>kal</td><td><strong>0.98305</strong></td><td>0.0</td><td>0.76</td><td>0.00185</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.83824</td><td>0.00185</td><td>0.94215</td><td>0.00022</td></tr><tr><td>kan</td><td>kan</td><td>kan</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>kat</td><td>kat</td><td>kat</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>kaz</td><td>kaz</td><td>kaz</td><td>0.96721</td><td>0.00034</td><td>0.42182</td><td>0.00878</td><td><strong>0.97521</strong></td><td>0.00021</td><td>0.96667</td><td>0.00021</td><td>0.42182</td><td>0.00878</td><td>0.42491</td><td>0.00853</td></tr><tr><td>kbp</td><td>kbp</td><td>kbp</td><td>0.85714</td><td>0.00228</td><td>0.27685</td><td>0.01683</td><td>0.90909</td><td>0.00129</td><td><strong>0.9375</strong></td><td>0.00082</td><td>0.28019</td><td>0.01683</td><td>0.30851</td><td>0.0142</td></tr><tr><td>kea</td><td>kea</td><td>kea</td><td><strong>0.72727</strong></td><td>0.00114</td><td>0.85751</td><td>0.00789</td><td>0.72727</td><td>0.00107</td><td>0.69811</td><td>0.00093</td><td>0.09</td><td>0.00789</td><td>0.07527</td><td>0.00655</td></tr><tr><td>khk</td><td>khk</td><td>khk</td><td><strong>0.99225</strong></td><td>0.0</td><td>0.71591</td><td>0.00268</td><td>0.63158</td><td>0.0</td><td>0.33333</td><td>0.0</td><td>0.73256</td><td>0.00268</td><td>0.82895</td><td>0.00132</td></tr><tr><td>khm</td><td>khm</td><td>khm</td><td><strong>1.0</strong></td><td>0.0</td><td>0.96825</td><td>0.00022</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>kin</td><td>kin</td><td>kin</td><td>0.76336</td><td>0.0024</td><td>0.82258</td><td>0.00073</td><td>0.81967</td><td>0.00121</td><td><strong>0.8547</strong></td><td>0.00072</td><td>0.82927</td><td>0.00073</td><td>0.84298</td><td>0.00055</td></tr><tr><td>kir</td><td>kir</td><td>kir</td><td>0.94488</td><td>0.0008</td><td>0.57416</td><td>0.00498</td><td>0.95238</td><td>0.00064</td><td><strong>0.96774</strong></td><td>0.00041</td><td>0.58537</td><td>0.00498</td><td>0.625</td><td>0.00396</td></tr><tr><td>kmb</td><td>kmb</td><td>kmb</td><td><strong>0.99194</strong></td><td>0.00011</td><td>0.82562</td><td>0.00229</td><td>0.99194</td><td>0.00011</td><td>0.99194</td><td>0.0001</td><td>0.85926</td><td>0.00229</td><td>0.928</td><td>0.00055</td></tr><tr><td>kmr</td><td>kmr</td><td>kmr</td><td><strong>0.66667</strong></td><td>0.00067</td><td>0.47773</td><td>0.00721</td><td>0.66667</td><td>0.00633</td><td>0.66667</td><td>0.00608</td><td>0.50862</td><td>0.00721</td><td>0.54378</td><td>0.00545</td></tr><tr><td>knc</td><td>knc</td><td>knc</td><td>0.97059</td><td>0.00034</td><td>0.50187</td><td>0.00744</td><td><strong>0.97778</strong></td><td>0.00021</td><td>0.97778</td><td>0.00021</td><td>0.57021</td><td>0.00744</td><td>0.71277</td><td>0.00297</td></tr><tr><td>kon</td><td>kon</td><td>kon</td><td>0.40789</td><td>0.0</td><td><strong>0.45399</strong></td><td>0.00733</td><td>0.40789</td><td>0.0</td><td>0.39735</td><td>0.0</td><td>0.4486</td><td>0.00733</td><td>0.43226</td><td>0.00671</td></tr><tr><td>kor</td><td>kor</td><td>kor</td><td>0.94488</td><td>0.0008</td><td>0.51064</td><td>0.00643</td><td>0.96</td><td>0.00054</td><td><strong>0.99174</strong></td><td>0.0001</td><td>0.64516</td><td>0.00643</td><td>0.67416</td><td>0.00319</td></tr><tr><td>lao</td><td>lao</td><td>lao</td><td><strong>1.0</strong></td><td>0.0</td><td>0.992</td><td>6e-05</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td><strong>1.0</strong></td><td>6e-05</td><td>1.0</td><td>0.0</td></tr></tbody></table>
<table><caption>Table 49: Comparison of GlotLID vs NLLB on UDHR benchmark (part 2)</caption><thead><tr><th rowspan="2">iso639-3</th><th rowspan="2">UDHR Code(s)</th><th rowspan="2">NLLB Code(s)</th><th colspan="2">GlotLID-M</th><th colspan="2">NLLB</th><th colspan="2">GlotLID-M θ=.3</th><th colspan="2">GlotLID-M θ=.5</th><th colspan="2">NLLB θ=.3</th><th colspan="2">NLLB θ=.5</th></tr><tr><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th><th>F1↑</th><th>FPR↓</th></tr></thead><tbody><tr><td>lij</td><td>lij</td><td>lij</td><td>0.49785</td><td>0.01324</td><td>0.56701</td><td>0.00447</td><td>0.53953</td><td>0.01052</td><td>0.64804</td><td>0.00639</td><td>0.57592</td><td>0.00447</td><td><strong>0.67485</strong></td><td>0.0027</td></tr><tr><td>lin</td><td>lin</td><td>lin</td><td>0.99145</td><td>0.00023</td><td>0.94561</td><td>0.00056</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.96996</td><td>0.00056</td><td>0.98261</td><td>6e-05</td></tr><tr><td>lit</td><td>lit</td><td>lit</td><td>0.9375</td><td>0.00091</td><td>0.68208</td><td>0.00302</td><td>0.96774</td><td>0.00043</td><td><strong>0.98361</strong></td><td>0.00021</td><td>0.74684</td><td>0.00302</td><td>0.90076</td><td>0.00066</td></tr><tr><td>ltz</td><td>ltz</td><td>ltz</td><td><strong>0.98305</strong></td><td>0.0</td><td>0.60733</td><td>0.00408</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.63388</td><td>0.00408</td><td>0.67836</td><td>0.00292</td></tr><tr><td>lua</td><td>lua</td><td>lua</td><td>0.71186</td><td>0.00183</td><td>0.61017</td><td>0.00352</td><td>0.75</td><td>0.00107</td><td><strong>0.78846</strong></td><td>0.00031</td><td>0.63158</td><td>0.00352</td><td>0.69231</td><td>0.00231</td></tr><tr><td>lug</td><td>lug</td><td>lug</td><td>0.9589</td><td>0.00068</td><td>0.37398</td><td>0.01286</td><td>0.97222</td><td>0.00043</td><td><strong>0.98592</strong></td><td>0.00021</td><td>0.39205</td><td>0.01286</td><td>0.42724</td><td>0.01013</td></tr><tr><td>lus</td><td>lus</td><td>lus</td><td>0.93548</td><td>0.00091</td><td>0.33238</td><td>0.01303</td><td>0.95868</td><td>0.00054</td><td><strong>0.97479</strong></td><td>0.00031</td><td>0.33623</td><td>0.01303</td><td>0.34421</td><td>0.01216</td></tr><tr><td>lvs</td><td>lvs</td><td>lvs</td><td>0.94118</td><td>0.00171</td><td>0.95582</td><td>0.00056</td><td>0.92623</td><td>0.00118</td><td>0.90213</td><td>0.00093</td><td>0.97143</td><td>0.00056</td><td><strong>0.98347</strong></td><td>0.00017</td></tr><tr><td>mag</td><td>mag</td><td>mag</td><td>0.75385</td><td>0.00046</td><td>0.61635</td><td>0.00185</td><td><strong>0.76562</strong></td><td>0.00021</td><td>0.76562</td><td>0.00021</td><td>0.62821</td><td>0.00185</td><td>0.66216</td><td>0.00121</td></tr><tr><td>mai</td><td>mai</td><td>mai</td><td><strong>0.83099</strong></td><td>0.0</td><td>0.80537</td><td>0.00034</td><td>0.83099</td><td>0.0</td><td>0.83099</td><td>0.0</td><td>0.80537</td><td>0.00034</td><td>0.81081</td><td>0.00028</td></tr><tr><td>mal</td><td>mal</td><td>mal</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.975</td><td>0.0</td></tr><tr><td>mar</td><td>mar</td><td>mar</td><td>0.99174</td><td>0.00011</td><td>0.91603</td><td>0.00062</td><td>0.99174</td><td>0.00011</td><td>0.99174</td><td>0.00011</td><td><strong>1.0</strong></td><td>0.0</td><td>0.0</td><td>0.0</td></tr><tr><td>min</td><td>min</td><td>min</td><td>0.88235</td><td>0.00171</td><td>0.22857</td><td>6e-05</td><td>0.91603</td><td>0.00107</td><td><strong>0.92187</strong></td><td>0.00082</td><td>0.23188</td><td>6e-05</td><td>0.20588</td><td>0.0</td></tr><tr><td>mkd</td><td>mkd</td><td>mkd</td><td><strong>0.99174</strong></td><td>0.0</td><td><strong>0.99174</strong></td><td>0.0</td><td>0.99174</td><td>0.0</td><td>0.99174</td><td>0.0</td><td>0.99174</td><td>0.0</td><td>0.99174</td><td>0.0</td></tr><tr><td>mlt</td><td>mlt</td><td>mlt</td><td>0.77419</td><td>0.00399</td><td>0.78146</td><td>0.00179</td><td>0.78947</td><td>0.00343</td><td>0.82759</td><td>0.00258</td><td>0.83099</td><td>0.00179</td><td><strong>0.88722</strong></td><td>0.00077</td></tr><tr><td>mos</td><td>mos</td><td>mos</td><td>0.97015</td><td>0.00046</td><td>0.75581</td><td>0.00235</td><td>0.98485</td><td>0.00021</td><td><strong>0.99237</strong></td><td>0.0001</td><td>0.78313</td><td>0.00235</td><td><strong>0.81761</strong></td><td>0.0016</td></tr><tr><td>mri</td><td>mri</td><td>mri</td><td>0.8227</td><td>0.00023</td><td>0.35913</td><td>0.01029</td><td><strong>0.82857</strong></td><td>0.00011</td><td>0.82857</td><td>0.0001</td><td>0.37061</td><td>0.01029</td><td>0.40138</td><td>0.00825</td></tr><tr><td>mya</td><td>mya</td><td>mya</td><td>0.66292</td><td>0.00673</td><td>0.67416</td><td>0.00324</td><td>0.66292</td><td>0.00633</td><td>0.67045</td><td>0.00587</td><td>0.68182</td><td>0.00324</td><td><strong>0.7362</strong></td><td>0.00237</td></tr><tr><td>nav</td><td>nav</td><td>nav</td><td>0.9916</td><td>0.00011</td><td>0.57282</td><td>0.00492</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.58706</td><td>0.00492</td><td>0.65556</td><td>0.00341</td></tr><tr><td>nld</td><td>nld</td><td>nld</td><td>0.70238</td><td>0.00571</td><td>0.59184</td><td>0.00442</td><td>0.71084</td><td>0.00515</td><td><strong>0.71515</strong></td><td>0.00484</td><td>0.65909</td><td>0.00442</td><td>0.6988</td><td>0.0027</td></tr><tr><td>nno</td><td>nno</td><td>nno</td><td>0.95868</td><td>0.00034</td><td>0.8855</td><td>0.00073</td><td>0.96667</td><td>0.00021</td><td>0.9661</td><td>0.0001</td><td>0.95082</td><td>0.00073</td><td><strong>0.97479</strong></td><td>6e-05</td></tr><tr><td>nob</td><td>nob</td><td>nob</td><td>0.98462</td><td>0.00023</td><td>0.96183</td><td>0.00022</td><td><strong>0.99225</strong></td><td>0.00011</td><td>0.98438</td><td>0.0001</td><td>0.98438</td><td>0.00022</td><td>0.98438</td><td>6e-05</td></tr><tr><td>npi</td><td>npi</td><td>npi</td><td><strong>0.98214</strong></td><td>0.0</td><td>0.88189</td><td>0.00078</td><td>0.98214</td><td>0.0</td><td>0.32353</td><td>0.0</td><td>0.96552</td><td>0.00078</td><td>0.97391</td><td>0.00011</td></tr><tr><td>nso</td><td>nso</td><td>nso</td><td>0.86957</td><td>0.00205</td><td>0.86131</td><td>0.00101</td><td>0.87591</td><td>0.00182</td><td>0.88235</td><td>0.00165</td><td>0.86765</td><td>0.00101</td><td><strong>0.91473</strong></td><td>0.00055</td></tr><tr><td>nya</td><td>nya</td><td>nya</td><td>0.96414</td><td>0.00103</td><td>0.79333</td><td>0.00336</td><td>0.97581</td><td>0.00064</td><td><strong>0.99588</strong></td><td>0.0001</td><td>0.83509</td><td>0.00336</td><td>0.91892</td><td>0.00105</td></tr><tr><td>oci</td><td>oci</td><td>oci</td><td>0.41101</td><td>0.0</td><td>0.41688</td><td>0.0104</td><td>0.40516</td><td>0.0</td><td>0.38131</td><td>0.0</td><td><strong>0.45698</strong></td><td>0.0104</td><td>0.4357</td><td>0.00462</td></tr><tr><td>oss</td><td>oss</td><td>oss</td><td>0.50273</td><td>0.00696</td><td>0.71875</td><td>0.00034</td><td>0.50549</td><td>0.00644</td><td><strong>0.50829</strong></td><td>0.00608</td><td>0.74797</td><td>0.00034</td><td><strong>0.7541</strong></td><td>0.0</td></tr><tr><td>pan</td><td>pan</td><td>pan</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>pan</td><td>pan</td><td>pan</td><td>0.79195</td><td>0.00354</td><td>0.65537</td><td>0.00336</td><td>0.83099</td><td>0.00258</td><td><strong>0.86765</strong></td><td>0.00185</td><td>0.7205</td><td>0.00336</td><td>0.8227</td><td>0.00132</td></tr><tr><td>pcm</td><td>pcm</td><td>pcm</td><td><strong>0.71739</strong></td><td>0.0</td><td>0.84112</td><td>0.00017</td><td>0.71739</td><td>0.0</td><td>0.71739</td><td>0.0</td><td><strong>0.84906</strong></td><td>0.00017</td><td>0.84906</td><td>0.00011</td></tr><tr><td>pes</td><td>pes</td><td>pes</td><td><strong>0.65922</strong></td><td>0.00696</td><td>0.64407</td><td>0.00341</td><td>0.63855</td><td>0.0058</td><td>0.54135</td><td>0.00392</td><td><strong>0.65143</strong></td><td>0.00341</td><td>0.65143</td><td>0.00325</td></tr><tr><td>plt</td><td>plt</td><td>plt</td><td><strong>0.98182</strong></td><td>0.0</td><td>0.88525</td><td>0.00067</td><td>0.98182</td><td>0.0</td><td>0.98182</td><td>0.0</td><td>0.90756</td><td>0.00067</td><td>0.93913</td><td>0.00028</td></tr><tr><td>pol</td><td>pol</td><td>pol</td><td>0.74074</td><td>0.00479</td><td>0.41404</td><td>0.00928</td><td>0.76923</td><td>0.00386</td><td><strong>0.81633</strong></td><td>0.00278</td><td>0.4856</td><td>0.00928</td><td><strong>0.60513</strong></td><td>0.00418</td></tr><tr><td>por</td><td>por</td><td>por</td><td>0.86097</td><td>0.00034</td><td>0.73171</td><td>0.00492</td><td><strong>0.87237</strong></td><td>0.00376</td><td><strong>0.98219</strong></td><td>0.00021</td><td>0.84211</td><td>0.00237</td><td>0.97391</td><td>0.0007</td></tr><tr><td>prs</td><td>prs</td><td>prs</td><td>0.0</td><td>0.00274</td><td>0.8824</td><td>0.00022</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td><td>0.0</td></tr><tr><td> quy</td><td> quy</td><td> quy</td><td>0.70115</td><td>0.00593</td><td>0.9147</td><td>0.00654</td><td>0.82993</td><td>0.00268</td><td><strong>0.88406</strong></td><td>0.00165</td><td>0.9992</td><td>0.00654</td><td>0.11018</td><td>0.05233</td></tr><tr><td>roh</td><td>roh</td><td>roh</td><td><strong>0.99268</strong></td><td>0.0</td><td>0.97515</td><td>0.00112</td><td>0.99145</td><td>0.0</td><td>0.98775</td><td>0.0</td><td>0.98095</td><td>0.00112</td><td>0.989</td><td>0.00044</td></tr><tr><td>ron</td><td>ron</td><td>ron</td><td>0.80992</td><td>0.00514</td><td>0.81667</td><td>0.0024</td><td>0.80833</td><td>0.00472</td><td><strong>0.82906</strong></td><td>0.00392</td><td>0.83051</td><td>0.0024</td><td><strong>0.85965</strong></td><td>0.00171</td></tr><tr><td>run</td><td>run</td><td>run</td><td>0.88235</td><td>0.00183</td><td>0.71951</td><td>0.00252</td><td>0.88829</td><td>0.00161</td><td><strong>0.90909</strong></td><td>0.00124</td><td>0.75159</td><td>0.00252</td><td>0.81944</td><td>0.00138</td></tr><tr><td>rus</td><td>rus</td><td>rus</td><td>0.43321</td><td>0.01792</td><td>0.43321</td><td>0.00878</td><td>0.47341</td><td>0.01428</td><td><strong>0.51064</strong></td><td>0.01185</td><td>0.45455</td><td>0.00878</td><td><strong>0.58824</strong></td><td>0.00462</td></tr><tr><td>sag</td><td>sag</td><td>sag</td><td><strong>0.81553</strong></td><td>0.0</td><td>0.21176</td><td>0.00084</td><td>0.80392</td><td>0.0</td><td>0.79208</td><td>0.0</td><td>0.225</td><td>0.0084</td><td>0.23377</td><td>0.00039</td></tr><tr><td>san</td><td>san</td><td>san</td><td>0.66667</td><td>0.0</td><td><strong>0.67521</strong></td><td>0.00017</td><td>0.66667</td><td>0.0</td><td>0.66667</td><td>0.0</td><td>0.67249</td><td>0.00017</td><td>0.67249</td><td>0.0</td></tr><tr><td>shn</td><td>shn</td><td>shn</td><td><strong>0.99145</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>0.99145</td><td>0.0</td><td>0.99145</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>sin</td><td>sin</td><td>sin</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>slk</td><td>slk</td><td>slk</td><td>0.87591</td><td>0.00194</td><td>0.85926</td><td>0.00095</td><td>0.9375</td><td>0.00086</td><td><strong>0.94488</strong></td><td>0.00072</td><td>0.89231</td><td>0.00095</td><td>0.93548</td><td>0.00033</td></tr><tr><td>slv</td><td>slv</td><td>slv</td><td>0.89552</td><td>0.0016</td><td>0.71006</td><td>0.00274</td><td>0.95238</td><td>0.00064</td><td><strong>0.97561</strong></td><td>0.00301</td><td>0.78947</td><td>0.00274</td><td>0.85714</td><td>0.00011</td></tr><tr><td>smo</td><td>smo</td><td>smo</td><td><strong>1.0</strong></td><td>0.0</td><td>0.68182</td><td>0.00296</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>0.70175</td><td>0.00296</td><td>0.76433</td><td>0.00187</td></tr><tr><td>sna</td><td>sna</td><td>sna</td><td>0.93846</td><td>0.00091</td><td>0.46964</td><td>0.00716</td><td>0.96036</td><td>0.00054</td><td><strong>0.98387</strong></td><td>0.00021</td><td>0.57711</td><td>0.00716</td><td><strong>0.96461</strong></td><td>0.00264</td></tr><tr><td>som</td><td>som</td><td>som</td><td>0.75817</td><td>0.00422</td><td>0.54286</td><td>0.00531</td><td>0.80556</td><td>0.00301</td><td><strong>0.89231</strong></td><td>0.00144</td><td>0.61957</td><td>0.00531</td><td>0.7451</td><td>0.00209</td></tr><tr><td>sot</td><td>sot</td><td>sot</td><td>0.98333</td><td>0.00011</td><td>0.69118</td><td>0.00162</td><td><strong>0.9916</strong></td><td>0.0</td><td>0.9916</td><td>0.0</td><td>0.72868</td><td>0.00162</td><td>0.78333</td><td>6e-05</td></tr><tr><td>spa</td><td>spa</td><td>spa</td><td>0.72321</td><td>0.00685</td><td>0.39709</td><td>0.01387</td><td>0.75701</td><td>0.00537</td><td><strong>0.978</strong></td><td>0.00402</td><td>0.43968</td><td>0.01387</td><td><strong>0.51923</strong></td><td>0.00814</td></tr><tr><td>src</td><td>src</td><td>src</td><td><strong>0.9916</strong></td><td>0.0</td><td>0.86567</td><td>0.00089</td><td>0.9916</td><td>0.0</td><td>0.9916</td><td>0.0</td><td>0.95082</td><td>0.00089</td><td>0.97479</td><td>6e-05</td></tr><tr><td>srp</td><td>srp</td><td>srp</td><td><strong>0.5124</strong></td><td>0.00685</td><td>0.48739</td><td>0.00336</td><td>0.4958</td><td>0.00633</td><td>0.48945</td><td>0.00608</td><td>0.48945</td><td>0.00336</td><td><strong>0.49153</strong></td><td>0.00319</td></tr><tr><td>ssw</td><td>ssw</td><td>ssw</td><td>0.94891</td><td>0.00068</td><td>0.80272</td><td>0.00123</td><td>0.97015</td><td>0.00032</td><td><strong>0.99237</strong></td><td>0.0</td><td>0.86131</td><td>0.00123</td><td><strong>0.90769</strong></td><td>0.00028</td></tr><tr><td>sun</td><td>sun</td><td>sun</td><td>0.9697</td><td>0.00034</td><td>0.75294</td><td>0.00229</td><td><strong>0.9771</strong></td><td>0.00021</td><td>0.9771</td><td>0.00021</td><td>0.84211</td><td>0.00229</td><td>0.9078</td><td>0.00066</td></tr><tr><td>swe</td><td>swe</td><td>swe</td><td>0.86301</td><td>0.00228</td><td>0.81579</td><td>0.00151</td><td>0.93333</td><td>0.00097</td><td><strong>1.0</strong></td><td>0.0</td><td>0.95385</td><td>0.00151</td><td><strong>0.98413</strong></td><td>6e-05</td></tr><tr><td>swh</td><td>swh</td><td>swh</td><td><strong>0.84956</strong></td><td>0.00046</td><td>0.24742</td><td>0.00236</td><td>0.84685</td><td>0.00032</td><td>0.78</td><td>0.0</td><td>0.29268</td><td>0.00203</td><td>0.35821</td><td>0.01178</td></tr><tr><td>tah</td><td>tah</td><td>tah</td><td>0.91892</td><td>0.00011</td><td>0.89922</td><td>0.00067</td><td>0.91892</td><td>0.00011</td><td>0.92727</td><td>0.0</td><td>0.92063</td><td>0.00067</td><td><strong>0.98305</strong></td><td>6e-05</td></tr><tr><td>tam</td><td>tam</td><td>tam</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>tat</td><td>tat</td><td>tat</td><td><strong>1.0</strong></td><td>0.00696</td><td>0.46457</td><td>0.00755</td><td>0.68208</td><td>0.0058</td><td><strong>0.69822</strong></td><td>0.00515</td><td>0.46825</td><td>0.00755</td><td><strong>0.48163</strong></td><td>0.00693</td></tr><tr><td>tel</td><td>tel</td><td>tel</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>tgk</td><td>tgk</td><td>tgk</td><td>0.67429</td><td>0.00651</td><td>0.47581</td><td>0.00727</td><td>0.92913</td><td>0.00097</td><td><strong>0.95082</strong></td><td>0.00052</td><td>0.50213</td><td>0.00727</td><td><strong>0.59296</strong></td><td>0.00446</td></tr><tr><td>tgl</td><td>tgl</td><td>tgl</td><td>0.9403</td><td>0.0008</td><td>0.5368</td><td>0.00587</td><td>0.95455</td><td>0.00054</td><td><strong>0.97674</strong></td><td>0.00021</td><td>0.54148</td><td>0.00587</td><td><strong>0.56364</strong></td><td>0.00517</td></tr><tr><td>tha</td><td>tha</td><td>tha</td><td><strong>1.0</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>tar</td><td>tar</td><td>tar</td><td><strong>1.0</strong></td><td>0.0</td><td>0.97561</td><td>0.00017</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>ton</td><td>ton</td><td>ton</td><td><strong>1.0</strong></td><td>0.0</td><td>0.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>ton</td><td>ton</td><td>ton</td><td><strong>1.0</strong></td><td>0.0</td><td>0.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>tpi</td><td>tpi</td><td>tpi</td><td><strong>0.98361</strong></td><td>0.00011</td><td>0.91339</td><td>0.00045</td><td>0.98361</td><td>0.00011</td><td>0.98361</td><td>0.0001</td><td>0.94309</td><td>0.00045</td><td>0.95868</td><td>0.000011</td></tr><tr><td>tsn</td><td>tsn</td><td>tsn</td><td><strong>0.98361</strong></td><td>0.00023</td><td>0.79452</td><td>0.00157</td><td>0.99174</td><td>0.00011</td><td>0.99174</td><td>0.0001</td><td>0.85926</td><td>0.00157</td><td>0.89922</td><td>0.00061</td></tr><tr><td>tso</td><td>tso</td><td>tso</td><td>0.94158</td><td>0.0016</td><td>0.64073</td><td>0.00878</td><td>0.94158</td><td>0.0015</td><td><strong>0.95139</strong></td><td>0.00113</td><td>0.66986</td><td>0.00087</td><td><strong>0.70886</strong></td><td>0.00633</td></tr><tr><td>tuk</td><td>tuk</td><td>tuk</td><td>0.94821</td><td>0.00148</td><td>0.65574</td><td>0.00022</td><td>0.96748</td><td>0.00086</td><td>0.98347</td><td>0.00041</td><td>0.65574</td><td>0.00022</td><td>0.65574</td><td>0.00022</td></tr><tr><td>tur</td><td>tur</td><td>tur</td><td>0.4918</td><td>0.01415</td><td>0.3299</td><td>0.01365</td><td>0.50209</td><td>0.01277</td><td><strong>0.51502</strong></td><td>0.01164</td><td>0.37037</td><td>0.01365</td><td>0.39604</td><td>0.01007</td></tr><tr><td>tzm</td><td>tzm</td><td>tzm</td><td>0.01754</td><td>0.00593</td><td><strong>0.01653</strong></td><td>0.0033</td><td>0.01754</td><td>0.00558</td><td><strong>0.0177</strong></td><td>0.00525</td><td>0.01653</td><td>0.0033</td><td>0.01653</td><td>0.00325</td></tr><tr><td>uig</td><td>uig</td><td>uig</td><td>0.90295</td><td>0.00114</td><td>0.66667</td><td>0.0</td><td><strong>0.93333</strong></td><td>0.0</td><td>0.89908</td><td>0.0</td><td>0.66667</td><td>0.0</td><td>0.66667</td><td>0.0</td></tr><tr><td>ukr</td><td>ukr</td><td>ukr</td><td>0.98361</td><td>0.00023</td><td>0.91339</td><td>0.0005</td><td>0.98361</td><td>0.00021</td><td><strong>0.99174</strong></td><td>0.0001</td><td>0.94309</td><td>0.0005</td><td>0.97479</td><td>6e-05</td></tr><tr><td>umb</td><td>umb</td><td>umb</td><td>0.87931</td><td>0.00114</td><td>0.89313</td><td>0.0014</td><td>0.87931</td><td>0.00107</td><td>0.87611</td><td>0.00072</td><td>0.91051</td><td>0.0014</td><td><strong>0.94737</strong></td><td>0.00055</td></tr><tr><td>urd</td><td>urd</td><td>urd</td><td><strong>0.96522</strong></td><td>0.0</td><td>0.61838</td><td>0.00076</td><td>0.96522</td><td>0.00021</td><td>0.96522</td><td>0.00072</td><td>0.84121</td><td>0.00229</td><td>0.9078</td><td>0.00071</td></tr><tr><td>uzn</td><td>uzn</td><td>uzn</td><td>0.50407</td><td>0.00073</td><td>0.28365</td><td>0.01325</td><td>0.53881</td><td>0.00429</td><td>0.56716</td><td>0.00247</td><td>0.33908</td><td>0.01325</td><td>0.41404</td><td>0.00583</td></tr><tr><td>vec</td><td>vec</td><td>vec</td><td>0.92308</td><td>0.00114</td><td>0.85714</td><td>0.00112</td><td>0.95238</td><td>0.00064</td><td><strong>0.96774</strong></td><td>0.00041</td><td>0.87591</td><td>0.00112</td><td>0.90909</td><td>0.00066</td></tr><tr><td>vie</td><td>vie</td><td>vie</td><td><strong>0.66304</strong></td><td>0.00011</td><td>0.45675</td><td>0.00565</td><td>0.66304</td><td>0.00011</td><td>0.66304</td><td>0.0001</td><td>0.56621</td><td>0.00565</td><td>0.61307</td><td>0.00088</td></tr><tr><td>war</td><td>war</td><td>war</td><td><strong>0.9916</strong></td><td>0.0</td><td>0.75159</td><td>0.00213</td><td>0.9916</td><td>0.0</td><td>0.9916</td><td>0.0</td><td>0.78146</td><td>0.00213</td><td><strong>0.81379</strong></td><td>0.00143</td></tr><tr><td>wol</td><td>wol</td><td>wol</td><td>0.79747</td><td>0.00365</td><td>0.23985</td><td>0.02192</td><td>0.86897</td><td>0.00204</td><td><strong>0.92537</strong></td><td>0.00093</td><td>0.2684</td><td>0.02192</td><td><strong>0.33973</strong></td><td>0.01321</td></tr><tr><td>xho</td><td>xho</td><td>xho</td><td>0.93846</td><td>0.00091</td><td>0.64835</td><td>0.00347</td><td>0.96825</td><td>0.00043</td><td><strong>0.976</strong></td><td>0.00031</td><td>0.68605</td><td>0.00347</td><td><strong>0.74214</strong></td><td>0.00215</td></tr><tr><td>ydd</td><td>ydd</td><td>ydd</td><td><strong>0.99187</strong></td><td>0.0</td><td><strong>1.0</strong></td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td><td>1.0</td><td>0.0</td></tr><tr><td>yor</td><td>yor</td><td>yor</td><td>0.85106</td><td>0.0024</td><td>0.44697</td><td>0.00811</td><td>0.88889</td><td>0.00161</td><td><strong>0.93023</strong></td><td>0.00093</td><td>0.50213</td><td>0.00811</td><td><strong>0.63784</strong></td><td>0.00363</td></tr><tr><td>zho</td><td>zho</td><td>zho</td><td>0.96345</td><td>0.00011</td><td>0.54715</td><td>0.00559</td><td><strong>0.96408</strong></td><td>0.0</td><td>0.96408</td><td>0.0</td><td>0.64193</td><td>0.00559</td><td><strong>0.56574</strong></td><td>0.02179</td></tr><tr><td>zul</td><td>zul</td><td>zul</td><td><strong>0.98305</strong></td><td>0.0</td><td>0.59487</td><td>0.00431</td><td>0.98305</td><td>0.0</td><td>0.98305</td><td>0.0</td><td>0.61702</td><td>0.00431</td><td><strong>0.64088</strong></td><td>0.00347</td></tr></tbody></table>