Model: littlejohn-ai/bge-m3-spa-law-qa
Author: littlejohn-ai
Pipeline: sentence-similarity
Library: sentence-transformers
Tags: sentence-transformers, safetensors, xlm-roberta, sentence-similarity, feature-extraction, generated_from_trainer, dataset_size:21352, loss:MatryoshkaLoss, loss:MultipleNegativesRankingLoss, es, arxiv:1908.10084, arxiv:2205.13147, arxiv:1705.00652, arxiv:2509.09467, base_model:BAAI/bge-m3, base_model:finetune:BAAI/bge-m3, license:apache-2.0, model-index, text-embeddings-inference, endpoints_compatible, region:us
Base models (finetune): id: BAAI/bge-m3
Card metadata: base_model: BAAI/bge-m3
language: es
library_name: sentence-transformers
license: apache-2.0
metrics: cosine_accuracy@1, cosine_accuracy@3, cosine_accuracy@5, cosine_accuracy@10, cosine_precision@1, cosine_precision@3, cosine_precision@5, cosine_precision@10, cosine_recall@1, cosine_recall@3, cosine_recall@5, cosine_recall@10, cosine_ndcg@10, cosine_mrr@10, cosine_map@100
pipeline_tag: sentence-similarity
tags: sentence-transformers, sentence-similarity, feature-extraction, generated_from_trainer, dataset_size:21352, loss:MatryoshkaLoss, loss:MultipleNegativesRankingLoss
widget: source_sentence: La Estrategia Nacional de Redes Ultrarrápidas tiene como objetivo impulsar el despliegue de redes de acceso ultrarrápido a la banda ancha, tanto fijo como móvil, de cara a lograr su universalización, así como fomentar su adopción por ciudadanos, empresas y administraciones, para garantizar la cohesión social y territorial.
sentences: ¿Cuál es el objetivo principal de la exoneración de deudas?, ¿Qué se entiende por especies invasoras?, ¿Cuál es el objetivo de la Estrategia Nacional de Redes Ultrarrápidas?, source_sentence: La Ley del Presupuesto de la Comunidad Autónoma de Andalucía podrá actualizar la cuantía de las sanciones contenidas en la presente norma.
sentences: ¿Qué ley se refiere a la actualización de la cuantía de las sanciones?, ¿Qué se requiere para la concesión de las licencias y permisos de primera ocupación?, ¿Cuál es el objetivo del Plan Estratégico sobre Trastornos Adictivos?, source_sentence: Art. 154. La celebración de tratados por los que se atribuya a una organización o institución internacionales el ejercicio de competencias derivadas de la Constitución requerirá la previa aprobación por las Cortes de una Ley Orgánica de autorización, que se tramitará conforme a lo establecido en el presente Reglamento para las leyes de este carácter.
sentences: ¿Cuál es el importe destinado a la financiación de las necesidades correspondientes al transporte regular de viajeros de las distintas Islas Canarias?, ¿Cuál es el propósito de la Disposición final tercera?, ¿Cuál es el procedimiento para la celebración de tratados internacionales?, source_sentence: Disposición final tercera. Entrada en vigor. El presente real decreto entrará en vigor el día siguiente al de su publicación en el «Boletín Oficial del Estado».
sentences: ¿Quién puede concluir contratos para la adquisición de bienes o derechos?, ¿Qué es el régimen de recursos del Consejo General de los Colegios Oficiales de Ingenieros Agrónomos?, ¿Cuál es el propósito de la Disposición final tercera?, source_sentence: El plazo máximo para resolver y notificar la resolución expresa que ponga fin al procedimiento será de nueve meses, a contar desde la fecha de inicio del procedimiento administrativo sancionador, que se corresponde con la fecha del acuerdo de incoación.
sentences: ¿Cuál es el plazo para la resolución del procedimiento sancionador en el caso de infracciones graves o muy graves?, ¿Qué establece el Real Decreto 521/2020?, ¿Cuál es el objetivo de la cooperación española para el desarrollo sostenible en relación con la igualdad de género?
model-index: name: BGE large Legal Spanish
results: task: type: information-retrieval
name: Information Retrieval
dataset: name: dim 1024
type: dim_1024
metrics: type: cosine_accuracy@1
value: 0.6257901390644753
name: Cosine Accuracy@1
verified: no, type: cosine_accuracy@3
value: 0.7450484618626212
name: Cosine Accuracy@3
verified: no, type: cosine_accuracy@5
value: 0.7833965444584914
name: Cosine Accuracy@5
verified: no, type: cosine_accuracy@10
value: 0.8314369995785925
name: Cosine Accuracy@10
verified: no, type: cosine_precision@1
value: 0.6257901390644753
name: Cosine Precision@1
verified: no, type: cosine_precision@3
value: 0.24834948728754036
name: Cosine Precision@3
verified: no, type: cosine_precision@5
value: 0.15667930889169826
name: Cosine Precision@5
verified: no, type: cosine_precision@10
value: 0.08314369995785924
name: Cosine Precision@10
verified: no, type: cosine_recall@1
value: 0.6257901390644753
name: Cosine Recall@1
verified: no, type: cosine_recall@3
value: 0.7450484618626212
name: Cosine Recall@3
verified: no, type: cosine_recall@5
value: 0.7833965444584914
name: Cosine Recall@5
verified: no, type: cosine_recall@10
value: 0.8314369995785925
name: Cosine Recall@10
verified: no, type: cosine_ndcg@10
value: 0.7275988588052974
name: Cosine Ndcg@10
verified: no, type: cosine_mrr@10
value: 0.6944890935725317
name: Cosine Mrr@10
verified: no, type: cosine_map@100
value: 0.69913132313913
name: Cosine Map@100
verified: no, task: type: information-retrieval
name: Information Retrieval
dataset: name: dim 768
type: dim_768
metrics: type: cosine_accuracy@1
value: 0.6211546565528866
name: Cosine Accuracy@1
verified: no, type: cosine_accuracy@3
value: 0.7488411293721028
name: Cosine Accuracy@3
verified: no, type: cosine_accuracy@5
value: 0.7855035819637589
name: Cosine Accuracy@5
verified: no, type: cosine_accuracy@10
value: 0.8297513695743785
name: Cosine Accuracy@10
verified: no, type: cosine_precision@1
value: 0.6211546565528866
name: Cosine Precision@1
verified: no, type: cosine_precision@3
value: 0.2496137097907009
name: Cosine Precision@3
verified: no, type: cosine_precision@5
value: 0.15710071639275178
name: Cosine Precision@5
verified: no, type: cosine_precision@10
value: 0.08297513695743783
name: Cosine Precision@10
verified: no, type: cosine_recall@1
value: 0.6211546565528866
name: Cosine Recall@1
verified: no, type: cosine_recall@3
value: 0.7488411293721028
name: Cosine Recall@3
verified: no, type: cosine_recall@5
value: 0.7855035819637589
name: Cosine Recall@5
verified: no, type: cosine_recall@10
value: 0.8297513695743785
name: Cosine Recall@10
verified: no, type: cosine_ndcg@10
value: 0.7262608157638797
name: Cosine Ndcg@10
verified: no, type: cosine_mrr@10
value: 0.693076709543207
name: Cosine Mrr@10
verified: no, type: cosine_map@100
value: 0.6977729019489064
name: Cosine Map@100
verified: no, task: type: information-retrieval
name: Information Retrieval
dataset: name: dim 512
type: dim_512
metrics: type: cosine_accuracy@1
value: 0.6186262115465655
name: Cosine Accuracy@1
verified: no, type: cosine_accuracy@3
value: 0.7416772018541931
name: Cosine Accuracy@3
verified: no, type: cosine_accuracy@5
value: 0.7812895069532237
name: Cosine Accuracy@5
verified: no, type: cosine_accuracy@10
value: 0.8284871470712178
name: Cosine Accuracy@10
verified: no, type: cosine_precision@1
value: 0.6186262115465655
name: Cosine Precision@1
verified: no, type: cosine_precision@3
value: 0.24722573395139766
name: Cosine Precision@3
verified: no, type: cosine_precision@5
value: 0.15625790139064477
name: Cosine Precision@5
verified: no, type: cosine_precision@10
value: 0.08284871470712177
name: Cosine Precision@10
verified: no, type: cosine_recall@1
value: 0.6186262115465655
name: Cosine Recall@1
verified: no, type: cosine_recall@3
value: 0.7416772018541931
name: Cosine Recall@3
verified: no, type: cosine_recall@5
value: 0.7812895069532237
name: Cosine Recall@5
verified: no, type: cosine_recall@10
value: 0.8284871470712178
name: Cosine Recall@10
verified: no, type: cosine_ndcg@10
value: 0.7230517414838968
name: Cosine Ndcg@10
verified: no, type: cosine_mrr@10
value: 0.6894082903564569
name: Cosine Mrr@10
verified: no, type: cosine_map@100
value: 0.6938850125806117
name: Cosine Map@100
verified: no, task: type: information-retrieval
name: Information Retrieval
dataset: name: dim 256
type: dim_256
metrics: type: cosine_accuracy@1
value: 0.6076696165191741
name: Cosine Accuracy@1
verified: no, type: cosine_accuracy@3
value: 0.7378845343447114
name: Cosine Accuracy@3
verified: no, type: cosine_accuracy@5
value: 0.7741255794353139
name: Cosine Accuracy@5
verified: no, type: cosine_accuracy@10
value: 0.8183733670459334
name: Cosine Accuracy@10
verified: no, type: cosine_precision@1
value: 0.6076696165191741
name: Cosine Precision@1
verified: no, type: cosine_precision@3
value: 0.2459615114482371
name: Cosine Precision@3
verified: no, type: cosine_precision@5
value: 0.15482511588706277
name: Cosine Precision@5
verified: no, type: cosine_precision@10
value: 0.08183733670459334
name: Cosine Precision@10
verified: no, type: cosine_recall@1
value: 0.6076696165191741
name: Cosine Recall@1
verified: no, type: cosine_recall@3
value: 0.7378845343447114
name: Cosine Recall@3
verified: no, type: cosine_recall@5
value: 0.7741255794353139
name: Cosine Recall@5
verified: no, type: cosine_recall@10
value: 0.8183733670459334
name: Cosine Recall@10
verified: no, type: cosine_ndcg@10
value: 0.7129994645749397
name: Cosine Ndcg@10
verified: no, type: cosine_mrr@10
value: 0.6792476872754997
name: Cosine Mrr@10
verified: no, type: cosine_map@100
value: 0.6839884095309201
name: Cosine Map@100
verified: no, task: type: information-retrieval
name: Information Retrieval
dataset: name: dim 128
type: dim_128
metrics: type: cosine_accuracy@1
value: 0.5920775389801939
name: Cosine Accuracy@1
verified: no, type: cosine_accuracy@3
value: 0.7100716392751791
name: Cosine Accuracy@3
verified: no, type: cosine_accuracy@5
value: 0.7496839443742098
name: Cosine Accuracy@5
verified: no, type: cosine_accuracy@10
value: 0.8019384745048462
name: Cosine Accuracy@10
verified: no, type: cosine_precision@1
value: 0.5920775389801939
name: Cosine Precision@1
verified: no, type: cosine_precision@3
value: 0.23669054642505968
name: Cosine Precision@3
verified: no, type: cosine_precision@5
value: 0.14993678887484196
name: Cosine Precision@5
verified: no, type: cosine_precision@10
value: 0.0801938474504846
name: Cosine Precision@10
verified: no, type: cosine_recall@1
value: 0.5920775389801939
name: Cosine Recall@1
verified: no, type: cosine_recall@3
value: 0.7100716392751791
name: Cosine Recall@3
verified: no, type: cosine_recall@5
value: 0.7496839443742098
name: Cosine Recall@5
verified: no, type: cosine_recall@10
value: 0.8019384745048462
name: Cosine Recall@10
verified: no, type: cosine_ndcg@10
value: 0.6949442438058356
name: Cosine Ndcg@10
verified: no, type: cosine_mrr@10
value: 0.6609599395313674
name: Cosine Mrr@10
verified: no, type: cosine_map@100
value: 0.6660375960675697
name: Cosine Map@100
verified: no, task: type: information-retrieval
name: Information Retrieval
dataset: name: dim 64
type: dim_64
metrics: type: cosine_accuracy@1
value: 0.5478297513695743
name: Cosine Accuracy@1
verified: no, type: cosine_accuracy@3
value: 0.6696165191740413
name: Cosine Accuracy@3
verified: no, type: cosine_accuracy@5
value: 0.7218710493046776
name: Cosine Accuracy@5
verified: no, type: cosine_accuracy@10
value: 0.7707543194268858
name: Cosine Accuracy@10
verified: no, type: cosine_precision@1
value: 0.5478297513695743
name: Cosine Precision@1
verified: no, type: cosine_precision@3
value: 0.2232055063913471
name: Cosine Precision@3
verified: no, type: cosine_precision@5
value: 0.14437420986093552
name: Cosine Precision@5
verified: no, type: cosine_precision@10
value: 0.07707543194268857
name: Cosine Precision@10
verified: no, type: cosine_recall@1
value: 0.5478297513695743
name: Cosine Recall@1
verified: no, type: cosine_recall@3
value: 0.6696165191740413
name: Cosine Recall@3
verified: no, type: cosine_recall@5
value: 0.7218710493046776
name: Cosine Recall@5
verified: no, type: cosine_recall@10
value: 0.7707543194268858
name: Cosine Recall@10
verified: no, type: cosine_ndcg@10
value: 0.6562208551738911
name: Cosine Ndcg@10
verified: no, type: cosine_mrr@10
value: 0.6198663536210937
name: Cosine Mrr@10
verified: no, type: cosine_map@100
value: 0.6253208234320395
name: Cosine Map@100
verified: no
Likes: 18 | All-time downloads: 1647706
Created: 2024-07-22 11:58:47