sonoisa
/

sentence-bert-base-ja-en-mean-tokens

Feature Extraction sentence-transformers PyTorch Japanese bert sentence-bert sentence-similarity Inference Endpoints

Model card Files Files and versions Community

sonoisa commited on May 8, 2022

Commit

51931e7

•

1 Parent(s): c5fb5a9

Update README.md

Files changed (1) hide show

README.md +1 -0

README.md CHANGED Viewed

@@ -11,6 +11,7 @@ tags:
 This is a Japanese+English sentence-BERT model.
 日本語+英語用Sentence-BERTモデルです。
 事前学習済みモデルとして[cl-tohoku/bert-base-japanese-whole-word-masking](https://huggingface.co/cl-tohoku/bert-base-japanese-whole-word-masking)を利用しました。
 推論の実行にはfugashiとipadicが必要です（pip install fugashi ipadic）。

 This is a Japanese+English sentence-BERT model.
 日本語+英語用Sentence-BERTモデルです。
+[日本語のみバージョン](https://huggingface.co/sonoisa/sentence-bert-base-ja-mean-tokens-v2)と比べて、手元の非公開データセットでは日本語の精度が0.8pt低く、英語STSbenchmarkでは精度が8.3pt高い（Cosine-Similarity Spearmanが79.11%）結果が得られました。
 事前学習済みモデルとして[cl-tohoku/bert-base-japanese-whole-word-masking](https://huggingface.co/cl-tohoku/bert-base-japanese-whole-word-masking)を利用しました。
 推論の実行にはfugashiとipadicが必要です（pip install fugashi ipadic）。