hotchpotch
/

ruri-base-dummy-fast-tokenizer-for-tei

Sentence Similarity

feature-extraction

Model card Files Files and versions Community

hotchpotch commited on Sep 30

Commit

d5f2771

•

1 Parent(s): c8fb7cc

Update README.md

Files changed (1) hide show

README.md +1 -1

README.md CHANGED Viewed

@@ -16,7 +16,7 @@ pipeline_tag: sentence-similarity
 dummy の tokenizer.json を用意することで、とりあえず TEI を起動させ、推論時には手元のPython環境で tokenizer した token_ids を送ります。
-詳しくは、[text-embeddings-inference で日本語トークナイザーモデルの推論をする](https://secon.dev/entry/2024/09/30/160000/)
 ---

 dummy の tokenizer.json を用意することで、とりあえず TEI を起動させ、推論時には手元のPython環境で tokenizer した token_ids を送ります。
+詳しくは、[text-embeddings-inference で日本語トークナイザーモデルの推論をする](https://secon.dev/entry/2024/09/30/160000/)を参照ください。
 ---