Add new CrossEncoder model

Browse files

Files changed (7) hide show

.gitattributes +1 -0
README.md +400 -0
config.json +51 -0
model.safetensors +3 -0
special_tokens_map.json +51 -0
tokenizer.json +3 -0
tokenizer_config.json +55 -0

.gitattributes CHANGED Viewed

@@ -33,3 +33,4 @@ saved_model/**/* filter=lfs diff=lfs merge=lfs -text
 *.zip filter=lfs diff=lfs merge=lfs -text
 *.zst filter=lfs diff=lfs merge=lfs -text
 *tfevents* filter=lfs diff=lfs merge=lfs -text

 *.zip filter=lfs diff=lfs merge=lfs -text
 *.zst filter=lfs diff=lfs merge=lfs -text
 *tfevents* filter=lfs diff=lfs merge=lfs -text
+tokenizer.json filter=lfs diff=lfs merge=lfs -text

README.md ADDED Viewed

	@@ -0,0 +1,400 @@

+---
+tags:
+- sentence-transformers
+- cross-encoder
+- reranker
+- generated_from_trainer
+- dataset_size:189534
+- loss:BinaryCrossEntropyLoss
+base_model: jinaai/jina-reranker-v2-base-multilingual
+pipeline_tag: text-ranking
+library_name: sentence-transformers
+metrics:
+- map
+- mrr@10
+- ndcg@10
+model-index:
+- name: CrossEncoder based on jinaai/jina-reranker-v2-base-multilingual
+  results:
+  - task:
+      type: cross-encoder-reranking
+      name: Cross Encoder Reranking
+    dataset:
+      name: jina reranker v2 base multilingual binary 50 bopv
+      type: jina-reranker-v2-base-multilingual-binary_50_bopv
+    metrics:
+    - type: map
+      value: 0.0082
+      name: Map
+    - type: mrr@10
+      value: 0.0082
+      name: Mrr@10
+    - type: ndcg@10
+      value: 0.0082
+      name: Ndcg@10
+---
+# CrossEncoder based on jinaai/jina-reranker-v2-base-multilingual
+This is a [Cross Encoder](https://www.sbert.net/docs/cross_encoder/usage/usage.html) model finetuned from [jinaai/jina-reranker-v2-base-multilingual](https://huggingface.co/jinaai/jina-reranker-v2-base-multilingual) using the [sentence-transformers](https://www.SBERT.net) library. It computes scores for pairs of texts, which can be used for text reranking and semantic search.
+## Model Details
+### Model Description
+- **Model Type:** Cross Encoder
+- **Base model:** [jinaai/jina-reranker-v2-base-multilingual](https://huggingface.co/jinaai/jina-reranker-v2-base-multilingual) <!-- at revision eed787badf7784e1a25c0eaa428627c8cbef511e -->
+- **Maximum Sequence Length:** 1024 tokens
+- **Number of Output Labels:** 1 label
+<!-- - **Training Dataset:** Unknown -->
+<!-- - **Language:** Unknown -->
+<!-- - **License:** Unknown -->
+### Model Sources
+- **Documentation:** [Sentence Transformers Documentation](https://sbert.net)
+- **Documentation:** [Cross Encoder Documentation](https://www.sbert.net/docs/cross_encoder/usage/usage.html)
+- **Repository:** [Sentence Transformers on GitHub](https://github.com/UKPLab/sentence-transformers)
+- **Hugging Face:** [Cross Encoders on Hugging Face](https://huggingface.co/models?library=sentence-transformers&other=cross-encoder)
+## Usage
+### Direct Usage (Sentence Transformers)
+First install the Sentence Transformers library:
+```bash
+pip install -U sentence-transformers
+```
+Then you can load this model and run inference.
+```python
+from sentence_transformers import CrossEncoder
+# Download from the 🤗 Hub
+model = CrossEncoder("cuadron11/jina-reranker-v2-base-multilingual-binary_50_bopv")
+# Get scores for pairs of texts
+pairs = [
+    ['Zein dira Arratiako Zulaibar Lanbide Ikastegiak 2022-2023 ikasturtean eskaintzen dituen heziketa-zikloak?', '«Arratiako Zulaibar Lanbide Ikastegia» ikastetxe pribatuaren ordezkariak hasarazitako espedientea aztertu da, zeinean eskatzen baitu baimena alda dakiola Lanbide Heziketako heziketa-ziklo berri bat emateko.\nEspediente horren izapideak araudiak ezarritako prozedura jarraituz egin dira; gainera, indarrean dauden arauek eskatzen dituzten agiriak erantsi zaizkio eta arlo horretan eskumena duten erakundeek egin diote txostena.\nArau hauek ikusi dira: apirilaren 3ko 332/1992 Errege Dekretua, araubide orokorreko unibertsitateaz kanpoko irakaskuntzak eskaintzeko baimenak ikastetxe pribatuei emateari buruzkoa (apirilaren 9ko BOE), apirilaren 3ko 332/1992 Errege Dekretua aldatzen duen otsailaren 12ko 131/2020 Errege Dekretua (martxoaren 12ko BOE); 1147/2011 Errege Dekretua, uztailaren 29koa (uztailaren 30eko BOE), hezkuntza-sistemako lanbide-heziketaren antolamendu orokorra ezartzen duena; azaroaren 4ko 1581/2011 Errege Dekretua (abenduaren 15eko BOE), zeinaren bidez Automatizazioa eta Robotika Industriala goi-mailako teknikariaren titulua ezartzen den eta haren gutxieneko irakaskuntzak finkatzen diren eta azaroaren 27ko 254/2012 Dekretua, (otsailaren 25eko EHAA), zeinaren bidez ezartzen den aipaturiko tituluari dagokion curriculuma; uztailaren 13ko 1074/2012 Errege Dekretua (abuztuaren 15eko BOE), zeinaren bidez Gizarteratzea goi-mailako teknikariaren titulua ezartzen den eta haren gutxieneko irakaskuntzak finkatzen diren eta apirilaren 15eko 63/2014 Dekretua, (maiatzaren 23ko EHAA), zeinaren bidez Euskal Autonomia Erkidegoan ezartzen den aipaturiko tituluari dagokion curriculuma eta gai horretan aplikatu beharreko gainerako legeak. Horiek horrela, honako hau\nEBAZTEN DUT\n:\n1. artikulua\nOndoren deskribatzen den ikastetxe pribatuaren baimena aldatzen da 2022-2023 ikasturterako:\nKode zenbakia: 48003990 eta 014723.\nIzen generikoa: Lanbide Heziketako Ikastetxe Pribatu Integratua.'],
+    ['Zein dira Arratiako Zulaibar Lanbide Ikastegiak 2022-2023 ikasturtean eskaintzen dituen heziketa-zikloak?', 'Adingabeen Erantzukizun Penala arautzen duen urtarrilaren 12ko 5/2000 Lege Organikoan xedatutakoaren arabera, Euskal Autonomia Erkidegoari dagokio, bere lurralde-eremuan, adingabeen epaitegiek beren epai irmoetan ezarritako neurriak betearaztea. Horretarako, zerbitzu, erakunde eta programa egokiak sortu, zuzendu, antolatu eta kudeatuko ditu, hartara bermatzeko lege horretan aurreikusitako neurriak behar bezala betearazten direla.\nLege horren 45.3 artikuluan aurreikusten denez, Euskal Autonomia Erkidegoak lankidetza-hitzarmenak edo -akordioak egin ahal izango ditu irabazi-asmorik gabeko erakunde pribatuekin, bere eskumenekoak diren neurriak betearazteko, zuzenean gainbegiratuta. Dena dela, horrek ez du esan nahi betearazpen horren ondoriozko titulartasuna eta erantzukizuna lagako direnik.\nLehendakariaren irailaren 6ko 18/2020 Dekretuak (Euskal Autonomia Erkidegoaren Administrazioko sailak sortu, ezabatu eta aldatzen dituenak eta horien egitekoak eta jardun-arloak finkatzen dituenak) 13.1 artikuluan ezarritakoaren arabera, Berdintasun, Justizia eta Gizarte Politiketako Sailari honako eginkizun hauek dagozkio, besteak beste: Botere Judizialarekiko harremanak zaintzea; Justizia Administrazioaren jardunerako baliabideak jartzea; eta adingabe arau-hausleen arloko eskumenak baliatzea, adingabea babesteko eskumena duten gainerako organo eta administrazioekin lankidetzan.'],
+    ['Zein dira Arratiako Zulaibar Lanbide Ikastegiak 2022-2023 ikasturtean eskaintzen dituen heziketa-zikloak?', 'Diru-laguntzen programa honen kudeaketan aplikagarria izango den diru-laguntzen erregimen juridikoa honako xedapen hauetan dago jasota: azaroaren 11ko 1/1997 Legegintzako Dekretuak onartutako Euskadiko Ogasun Nagusiaren Antolarauei buruzko Legearen Testu Bategineko VI. Tituluan eta VII. Tituluko III. Kapituluan eta abenduaren 17ko 698/1991 Dekretuan, azken horrek arautu baitzuen Euskal Autonomia Erkidegoaren Aurrekontu Orokorren kargurako diru-laguntzen bermeen eta itzulketen araubide orokorra eta bertan ezarri baitziren horien kudeaketan parte hartzen duten erakunde laguntzaileen eskakizunak, araubidea eta betebeharrak.\nHirugarrena. Lanbide-Euskal Enplegu Zerbitzuko zuzendari nagusiari agintzea erabaki honen berri jakinarazi dezan Euskal Herriko Agintaritzaren Aldizkarian.\n(Ikus .PDF)'],
+    ['Zein dira Arratiako Zulaibar Lanbide Ikastegiak 2022-2023 ikasturtean eskaintzen dituen heziketa-zikloak?', 'Laguntzen guztizko bolumenak ez du gaindituko aipatu zenbatekoa edo, indarreko legeriaz bat aurrekontu-aldaketak onartzen badira, zenbateko hori eguneratzetik ateratzen dena. Eguneratzerik izango balitz, horren berri argitara eman beharko litzateke EHAAn, Lanbide-Euskal Enplegu Zerbitzuko zuzendari nagusiaren ebazpen bidez eman ere.\nBigarrena. Diru-laguntza horien kudeaketari buruzko alderdi hauen gaineko informazioa ematea (alderdi horietan eragina izango du Euskal Autonomia Erkidegoko diru-laguntzen antolakuntzakoeta erregimen juridikoko araudiak zuzenean aplikatzeak):\nEbazpen honetan aipatzen diren diru-laguntzak jasotzeko eskabideak eredu ofizialean aurkeztu beharko dira. Deialdi honen eranskinean ageri da eredu hori, eta honako toki hauetan ere eskuratu ahal izango da: http://www.lanbide.net web-orrian; Lanbide-Euskal Enplegu Zerbitzuaren zerbitzu zentraletan (Jose Atxotegi kalea 1, 01009 Vitoria-Gasteiz); eta Lanbide-Euskal Enplegu Zerbitzuaren lurraldeetako enplegu-bulegoetan.\nHorretaz gain, eskaerak Herri Administrazioen Araubide Juridikoaren eta Administrazio Prozedura Erkidearen 30/1992 Legearen 38.4 artikuluan aurreikusitako moduetako edozeinetan aurkeztu ahal izango dira.\nLanbide-Euskal Enplegu Zerbitzuaren Lan Aktibazio Zuzendaritzak hartuko du bere gain eskabideak kudeatzeko eta izapidetzeko ardura, eta Lanbide erakunde autonomoko zuzendari nagusiak izango du ebazteko eskumena.\nEbazteko, gehienez sei hilabeteko epea izango da, diru-laguntza jasotzeko eskaera aurkezten den egunaz geroztik, eta epe hori igarotakoan ebazpenik eman ez bada, eskaera administrazio-isiltasunaren bidez baietsi dela hartuko da kontuan.\nZuzendari nagusiaren ebazpenak amaiera ematen dio administrazio-bideari, eta, beraren aurka, berraztertze-errekurtsoa aurkeztu ahal izango zaio organo horri, hilabeteko epean, ebazpena jakinarazi eta biharamunetik aurrera; bestela, zuzenean, administrazioarekiko auzi-errekurtsoa aurkez daiteke, Gasteizko Administrazioarekiko Auzietako Epaitegian, bi hilabeteko epean, ebazpena jakinarazi eta biharamunetik aurrera.'],
+    ['Zein dira Arratiako Zulaibar Lanbide Ikastegiak 2022-2023 ikasturtean eskaintzen dituen heziketa-zikloak?', 'Lan eta Gizarte Segurantza Ministerioaren 1994ko apirilaren 13ko Aginduak indarraldi mugagabea dauka. Bestalde, laguntza horiek emateko prozeduran, ez da lehiaketaren teknika erabiltzen. Esleitutako aurrekontu-kreditua, edo haren eguneratzetik sortzen dena, izango da laguntzak emateko muga, berariaz hala ezarrita baitago aginduaren lehenengo xedapen iragankorrean.\nHori dela-eta, diru-laguntzak emateko prozeduran errespetatu behar den publikotasun-printzipioa betez, eta Euskadiko Ogasun Nagusiaren Antolarauei buruzko Legearen Testu Bategina onartzen duen azaroaren 11ko 1/1997 Legegintzako Dekretuaren 49. artikuluaren 1. eta 2. paragrafoetan xedatutakoarekin bat etorriz, jakinarazi egin behar da zein den aipatutako aginduan aurreikusitako laguntzak finantzatzeko esleitutako kredituen zenbateko osoa, bai eta zenbateko hori eguneratzetik sor litekeen zenbatekoa ere.\nBestalde, diru-laguntza horiek kudeatzen dituen Administrazioa aldatu dela kontuan hartuta, publikotasunaren eta segurtasun juridikoaren printzipioak errespetatzeko, komeni da laguntzenonuradun izan daitezkeenei informazioa ematea, diru-laguntzen prozedurarekin eta aplikatu beharrekoerregimen juridikoarekin zerikusia duten alderdi jakin batzuei buruz.\nHorregatik guztiagatik, Lanbide-Euskal Enplegu Zerbitzuko Administrazio Kontseiluak, 2013ko apirilaren 22ko bilkuran proposamena aztertu ondoren, honako erabaki hau hartu du,\nERABAKIA\nLehenengoa. 500.000 euroko diru-baliabideak esleitzea, 3211-Enplegua programaren kargura, 1994ko apirilaren 13ko Aginduan aurreikusitako laguntzak finantzatzeko. Izan ere, aipatu aginduak arautu zuen Gizarte Segurantzako kuoten ordainketan oinarritutako diru-laguntzak ematea ekainaren 19ko 1044/1985 Errege Dekretuaren 1. artikuluan ezarritako eskubidea baliatzen dutenei, betiere Errege Dekretu horren 4.2 artikuluanezarritakoari jarraikiz.'],
+]
+scores = model.predict(pairs)
+print(scores.shape)
+# (5,)
+# Or rank different texts based on similarity to a single text
+ranks = model.rank(
+    'Zein dira Arratiako Zulaibar Lanbide Ikastegiak 2022-2023 ikasturtean eskaintzen dituen heziketa-zikloak?',
+    [
+        '«Arratiako Zulaibar Lanbide Ikastegia» ikastetxe pribatuaren ordezkariak hasarazitako espedientea aztertu da, zeinean eskatzen baitu baimena alda dakiola Lanbide Heziketako heziketa-ziklo berri bat emateko.\nEspediente horren izapideak araudiak ezarritako prozedura jarraituz egin dira; gainera, indarrean dauden arauek eskatzen dituzten agiriak erantsi zaizkio eta arlo horretan eskumena duten erakundeek egin diote txostena.\nArau hauek ikusi dira: apirilaren 3ko 332/1992 Errege Dekretua, araubide orokorreko unibertsitateaz kanpoko irakaskuntzak eskaintzeko baimenak ikastetxe pribatuei emateari buruzkoa (apirilaren 9ko BOE), apirilaren 3ko 332/1992 Errege Dekretua aldatzen duen otsailaren 12ko 131/2020 Errege Dekretua (martxoaren 12ko BOE); 1147/2011 Errege Dekretua, uztailaren 29koa (uztailaren 30eko BOE), hezkuntza-sistemako lanbide-heziketaren antolamendu orokorra ezartzen duena; azaroaren 4ko 1581/2011 Errege Dekretua (abenduaren 15eko BOE), zeinaren bidez Automatizazioa eta Robotika Industriala goi-mailako teknikariaren titulua ezartzen den eta haren gutxieneko irakaskuntzak finkatzen diren eta azaroaren 27ko 254/2012 Dekretua, (otsailaren 25eko EHAA), zeinaren bidez ezartzen den aipaturiko tituluari dagokion curriculuma; uztailaren 13ko 1074/2012 Errege Dekretua (abuztuaren 15eko BOE), zeinaren bidez Gizarteratzea goi-mailako teknikariaren titulua ezartzen den eta haren gutxieneko irakaskuntzak finkatzen diren eta apirilaren 15eko 63/2014 Dekretua, (maiatzaren 23ko EHAA), zeinaren bidez Euskal Autonomia Erkidegoan ezartzen den aipaturiko tituluari dagokion curriculuma eta gai horretan aplikatu beharreko gainerako legeak. Horiek horrela, honako hau\nEBAZTEN DUT\n:\n1. artikulua\nOndoren deskribatzen den ikastetxe pribatuaren baimena aldatzen da 2022-2023 ikasturterako:\nKode zenbakia: 48003990 eta 014723.\nIzen generikoa: Lanbide Heziketako Ikastetxe Pribatu Integratua.',
+        'Adingabeen Erantzukizun Penala arautzen duen urtarrilaren 12ko 5/2000 Lege Organikoan xedatutakoaren arabera, Euskal Autonomia Erkidegoari dagokio, bere lurralde-eremuan, adingabeen epaitegiek beren epai irmoetan ezarritako neurriak betearaztea. Horretarako, zerbitzu, erakunde eta programa egokiak sortu, zuzendu, antolatu eta kudeatuko ditu, hartara bermatzeko lege horretan aurreikusitako neurriak behar bezala betearazten direla.\nLege horren 45.3 artikuluan aurreikusten denez, Euskal Autonomia Erkidegoak lankidetza-hitzarmenak edo -akordioak egin ahal izango ditu irabazi-asmorik gabeko erakunde pribatuekin, bere eskumenekoak diren neurriak betearazteko, zuzenean gainbegiratuta. Dena dela, horrek ez du esan nahi betearazpen horren ondoriozko titulartasuna eta erantzukizuna lagako direnik.\nLehendakariaren irailaren 6ko 18/2020 Dekretuak (Euskal Autonomia Erkidegoaren Administrazioko sailak sortu, ezabatu eta aldatzen dituenak eta horien egitekoak eta jardun-arloak finkatzen dituenak) 13.1 artikuluan ezarritakoaren arabera, Berdintasun, Justizia eta Gizarte Politiketako Sailari honako eginkizun hauek dagozkio, besteak beste: Botere Judizialarekiko harremanak zaintzea; Justizia Administrazioaren jardunerako baliabideak jartzea; eta adingabe arau-hausleen arloko eskumenak baliatzea, adingabea babesteko eskumena duten gainerako organo eta administrazioekin lankidetzan.',
+        'Diru-laguntzen programa honen kudeaketan aplikagarria izango den diru-laguntzen erregimen juridikoa honako xedapen hauetan dago jasota: azaroaren 11ko 1/1997 Legegintzako Dekretuak onartutako Euskadiko Ogasun Nagusiaren Antolarauei buruzko Legearen Testu Bategineko VI. Tituluan eta VII. Tituluko III. Kapituluan eta abenduaren 17ko 698/1991 Dekretuan, azken horrek arautu baitzuen Euskal Autonomia Erkidegoaren Aurrekontu Orokorren kargurako diru-laguntzen bermeen eta itzulketen araubide orokorra eta bertan ezarri baitziren horien kudeaketan parte hartzen duten erakunde laguntzaileen eskakizunak, araubidea eta betebeharrak.\nHirugarrena. Lanbide-Euskal Enplegu Zerbitzuko zuzendari nagusiari agintzea erabaki honen berri jakinarazi dezan Euskal Herriko Agintaritzaren Aldizkarian.\n(Ikus .PDF)',
+        'Laguntzen guztizko bolumenak ez du gaindituko aipatu zenbatekoa edo, indarreko legeriaz bat aurrekontu-aldaketak onartzen badira, zenbateko hori eguneratzetik ateratzen dena. Eguneratzerik izango balitz, horren berri argitara eman beharko litzateke EHAAn, Lanbide-Euskal Enplegu Zerbitzuko zuzendari nagusiaren ebazpen bidez eman ere.\nBigarrena. Diru-laguntza horien kudeaketari buruzko alderdi hauen gaineko informazioa ematea (alderdi horietan eragina izango du Euskal Autonomia Erkidegoko diru-laguntzen antolakuntzakoeta erregimen juridikoko araudiak zuzenean aplikatzeak):\nEbazpen honetan aipatzen diren diru-laguntzak jasotzeko eskabideak eredu ofizialean aurkeztu beharko dira. Deialdi honen eranskinean ageri da eredu hori, eta honako toki hauetan ere eskuratu ahal izango da: http://www.lanbide.net web-orrian; Lanbide-Euskal Enplegu Zerbitzuaren zerbitzu zentraletan (Jose Atxotegi kalea 1, 01009 Vitoria-Gasteiz); eta Lanbide-Euskal Enplegu Zerbitzuaren lurraldeetako enplegu-bulegoetan.\nHorretaz gain, eskaerak Herri Administrazioen Araubide Juridikoaren eta Administrazio Prozedura Erkidearen 30/1992 Legearen 38.4 artikuluan aurreikusitako moduetako edozeinetan aurkeztu ahal izango dira.\nLanbide-Euskal Enplegu Zerbitzuaren Lan Aktibazio Zuzendaritzak hartuko du bere gain eskabideak kudeatzeko eta izapidetzeko ardura, eta Lanbide erakunde autonomoko zuzendari nagusiak izango du ebazteko eskumena.\nEbazteko, gehienez sei hilabeteko epea izango da, diru-laguntza jasotzeko eskaera aurkezten den egunaz geroztik, eta epe hori igarotakoan ebazpenik eman ez bada, eskaera administrazio-isiltasunaren bidez baietsi dela hartuko da kontuan.\nZuzendari nagusiaren ebazpenak amaiera ematen dio administrazio-bideari, eta, beraren aurka, berraztertze-errekurtsoa aurkeztu ahal izango zaio organo horri, hilabeteko epean, ebazpena jakinarazi eta biharamunetik aurrera; bestela, zuzenean, administrazioarekiko auzi-errekurtsoa aurkez daiteke, Gasteizko Administrazioarekiko Auzietako Epaitegian, bi hilabeteko epean, ebazpena jakinarazi eta biharamunetik aurrera.',
+        'Lan eta Gizarte Segurantza Ministerioaren 1994ko apirilaren 13ko Aginduak indarraldi mugagabea dauka. Bestalde, laguntza horiek emateko prozeduran, ez da lehiaketaren teknika erabiltzen. Esleitutako aurrekontu-kreditua, edo haren eguneratzetik sortzen dena, izango da laguntzak emateko muga, berariaz hala ezarrita baitago aginduaren lehenengo xedapen iragankorrean.\nHori dela-eta, diru-laguntzak emateko prozeduran errespetatu behar den publikotasun-printzipioa betez, eta Euskadiko Ogasun Nagusiaren Antolarauei buruzko Legearen Testu Bategina onartzen duen azaroaren 11ko 1/1997 Legegintzako Dekretuaren 49. artikuluaren 1. eta 2. paragrafoetan xedatutakoarekin bat etorriz, jakinarazi egin behar da zein den aipatutako aginduan aurreikusitako laguntzak finantzatzeko esleitutako kredituen zenbateko osoa, bai eta zenbateko hori eguneratzetik sor litekeen zenbatekoa ere.\nBestalde, diru-laguntza horiek kudeatzen dituen Administrazioa aldatu dela kontuan hartuta, publikotasunaren eta segurtasun juridikoaren printzipioak errespetatzeko, komeni da laguntzenonuradun izan daitezkeenei informazioa ematea, diru-laguntzen prozedurarekin eta aplikatu beharrekoerregimen juridikoarekin zerikusia duten alderdi jakin batzuei buruz.\nHorregatik guztiagatik, Lanbide-Euskal Enplegu Zerbitzuko Administrazio Kontseiluak, 2013ko apirilaren 22ko bilkuran proposamena aztertu ondoren, honako erabaki hau hartu du,\nERABAKIA\nLehenengoa. 500.000 euroko diru-baliabideak esleitzea, 3211-Enplegua programaren kargura, 1994ko apirilaren 13ko Aginduan aurreikusitako laguntzak finantzatzeko. Izan ere, aipatu aginduak arautu zuen Gizarte Segurantzako kuoten ordainketan oinarritutako diru-laguntzak ematea ekainaren 19ko 1044/1985 Errege Dekretuaren 1. artikuluan ezarritako eskubidea baliatzen dutenei, betiere Errege Dekretu horren 4.2 artikuluanezarritakoari jarraikiz.',
+    ]
+)
+# [{'corpus_id': ..., 'score': ...}, {'corpus_id': ..., 'score': ...}, ...]
+```
+<!--
+### Direct Usage (Transformers)
+<details><summary>Click to see the direct usage in Transformers</summary>
+</details>
+-->
+<!--
+### Downstream Usage (Sentence Transformers)
+You can finetune this model on your own dataset.
+<details><summary>Click to expand</summary>
+</details>
+-->
+<!--
+### Out-of-Scope Use
+*List how the model may foreseeably be misused and address what users ought not to do with the model.*
+-->
+## Evaluation
+### Metrics
+#### Cross Encoder Reranking
+* Dataset: `jina-reranker-v2-base-multilingual-binary_50_bopv`
+* Evaluated with [<code>CrossEncoderRerankingEvaluator</code>](https://sbert.net/docs/package_reference/cross_encoder/evaluation.html#sentence_transformers.cross_encoder.evaluation.CrossEncoderRerankingEvaluator) with these parameters:
+  ```json
+  {
+      "at_k": 10,
+      "always_rerank_positives": false
+  }
+  ```
+| Metric      | Value                |
+|:------------|:---------------------|
+| map         | 0.0082 (+0.0067)     |
+| mrr@10      | 0.0082 (+0.0070)     |
+| **ndcg@10** | **0.0082 (+0.0066)** |
+<!--
+## Bias, Risks and Limitations
+*What are the known or foreseeable issues stemming from this model? You could also flag here known failure cases or weaknesses of the model.*
+-->
+<!--
+### Recommendations
+*What are recommendations with respect to the foreseeable issues? For example, filtering explicit content.*
+-->
+## Training Details
+### Training Dataset
+#### Unnamed Dataset
+* Size: 189,534 training samples
+* Columns: <code>query</code>, <code>answer</code>, and <code>label</code>
+* Approximate statistics based on the first 1000 samples:
+  |         | query                                                                                            | answer                                                                                             | label                                          |
+  |:--------|:-------------------------------------------------------------------------------------------------|:---------------------------------------------------------------------------------------------------|:-----------------------------------------------|
+  | type    | string                                                                                           | string                                                                                             | int                                            |
+  | details | <ul><li>min: 30 characters</li><li>mean: 114.25 characters</li><li>max: 219 characters</li></ul> | <ul><li>min: 460 characters</li><li>mean: 1607.2 characters</li><li>max: 2183 characters</li></ul> | <ul><li>0: ~98.00%</li><li>1: ~2.00%</li></ul> |
+* Samples:
+  | query                                                                                                                  | answer                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         | label          |
+  |:-----------------------------------------------------------------------------------------------------------------------|:---------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|:---------------|
+  | <code>Zein dira Arratiako Zulaibar Lanbide Ikastegiak 2022-2023 ikasturtean eskaintzen dituen heziketa-zikloak?</code> | <code>«Arratiako Zulaibar Lanbide Ikastegia» ikastetxe pribatuaren ordezkariak hasarazitako espedientea aztertu da, zeinean eskatzen baitu baimena alda dakiola Lanbide Heziketako heziketa-ziklo berri bat emateko.<br>Espediente horren izapideak araudiak ezarritako prozedura jarraituz egin dira; gainera, indarrean dauden arauek eskatzen dituzten agiriak erantsi zaizkio eta arlo horretan eskumena duten erakundeek egin diote txostena.<br>Arau hauek ikusi dira: apirilaren 3ko 332/1992 Errege Dekretua, araubide orokorreko unibertsitateaz kanpoko irakaskuntzak eskaintzeko baimenak ikastetxe pribatuei emateari buruzkoa (apirilaren 9ko BOE), apirilaren 3ko 332/1992 Errege Dekretua aldatzen duen otsailaren 12ko 131/2020 Errege Dekretua (martxoaren 12ko BOE); 1147/2011 Errege Dekretua, uztailaren 29koa (uztailaren 30eko BOE), hezkuntza-sistemako lanbide-heziketaren antolamendu orokorra ezartzen duena; azaroaren 4ko 1581/2011 Errege Dekretua (abenduaren 15eko BOE), zeinaren bidez Automatizazioa eta Robotika I...</code> | <code>1</code> |
+  | <code>Zein dira Arratiako Zulaibar Lanbide Ikastegiak 2022-2023 ikasturtean eskaintzen dituen heziketa-zikloak?</code> | <code>Adingabeen Erantzukizun Penala arautzen duen urtarrilaren 12ko 5/2000 Lege Organikoan xedatutakoaren arabera, Euskal Autonomia Erkidegoari dagokio, bere lurralde-eremuan, adingabeen epaitegiek beren epai irmoetan ezarritako neurriak betearaztea. Horretarako, zerbitzu, erakunde eta programa egokiak sortu, zuzendu, antolatu eta kudeatuko ditu, hartara bermatzeko lege horretan aurreikusitako neurriak behar bezala betearazten direla.<br>Lege horren 45.3 artikuluan aurreikusten denez, Euskal Autonomia Erkidegoak lankidetza-hitzarmenak edo -akordioak egin ahal izango ditu irabazi-asmorik gabeko erakunde pribatuekin, bere eskumenekoak diren neurriak betearazteko, zuzenean gainbegiratuta. Dena dela, horrek ez du esan nahi betearazpen horren ondoriozko titulartasuna eta erantzukizuna lagako direnik.<br>Lehendakariaren irailaren 6ko 18/2020 Dekretuak (Euskal Autonomia Erkidegoaren Administrazioko sailak sortu, ezabatu eta aldatzen dituenak eta horien egitekoak eta jardun-arloak finkatzen dituenak) 13....</code> | <code>0</code> |
+  | <code>Zein dira Arratiako Zulaibar Lanbide Ikastegiak 2022-2023 ikasturtean eskaintzen dituen heziketa-zikloak?</code> | <code>Diru-laguntzen programa honen kudeaketan aplikagarria izango den diru-laguntzen erregimen juridikoa honako xedapen hauetan dago jasota: azaroaren 11ko 1/1997 Legegintzako Dekretuak onartutako Euskadiko Ogasun Nagusiaren Antolarauei buruzko Legearen Testu Bategineko VI. Tituluan eta VII. Tituluko III. Kapituluan eta abenduaren 17ko 698/1991 Dekretuan, azken horrek arautu baitzuen Euskal Autonomia Erkidegoaren Aurrekontu Orokorren kargurako diru-laguntzen bermeen eta itzulketen araubide orokorra eta bertan ezarri baitziren horien kudeaketan parte hartzen duten erakunde laguntzaileen eskakizunak, araubidea eta betebeharrak.<br>Hirugarrena. Lanbide-Euskal Enplegu Zerbitzuko zuzendari nagusiari agintzea erabaki honen berri jakinarazi dezan Euskal Herriko Agintaritzaren Aldizkarian.<br>(Ikus .PDF)</code>                                                                                                                                                                                                                | <code>0</code> |
+* Loss: [<code>BinaryCrossEntropyLoss</code>](https://sbert.net/docs/package_reference/cross_encoder/losses.html#binarycrossentropyloss) with these parameters:
+  ```json
+  {
+      "activation_fn": "torch.nn.modules.linear.Identity",
+      "pos_weight": null
+  }
+  ```
+### Training Hyperparameters
+#### Non-Default Hyperparameters
+- `eval_strategy`: steps
+- `per_device_train_batch_size`: 32
+- `per_device_eval_batch_size`: 32
+- `learning_rate`: 2e-05
+- `warmup_ratio`: 0.1
+- `load_best_model_at_end`: True
+- `batch_sampler`: no_duplicates
+#### All Hyperparameters
+<details><summary>Click to expand</summary>
+- `overwrite_output_dir`: False
+- `do_predict`: False
+- `eval_strategy`: steps
+- `prediction_loss_only`: True
+- `per_device_train_batch_size`: 32
+- `per_device_eval_batch_size`: 32
+- `per_gpu_train_batch_size`: None
+- `per_gpu_eval_batch_size`: None
+- `gradient_accumulation_steps`: 1
+- `eval_accumulation_steps`: None
+- `torch_empty_cache_steps`: None
+- `learning_rate`: 2e-05
+- `weight_decay`: 0.0
+- `adam_beta1`: 0.9
+- `adam_beta2`: 0.999
+- `adam_epsilon`: 1e-08
+- `max_grad_norm`: 1.0
+- `num_train_epochs`: 3
+- `max_steps`: -1
+- `lr_scheduler_type`: linear
+- `lr_scheduler_kwargs`: {}
+- `warmup_ratio`: 0.1
+- `warmup_steps`: 0
+- `log_level`: passive
+- `log_level_replica`: warning
+- `log_on_each_node`: True
+- `logging_nan_inf_filter`: True
+- `save_safetensors`: True
+- `save_on_each_node`: False
+- `save_only_model`: False
+- `restore_callback_states_from_checkpoint`: False
+- `no_cuda`: False
+- `use_cpu`: False
+- `use_mps_device`: False
+- `seed`: 42
+- `data_seed`: None
+- `jit_mode_eval`: False
+- `use_ipex`: False
+- `bf16`: False
+- `fp16`: False
+- `fp16_opt_level`: O1
+- `half_precision_backend`: auto
+- `bf16_full_eval`: False
+- `fp16_full_eval`: False
+- `tf32`: None
+- `local_rank`: 0
+- `ddp_backend`: None
+- `tpu_num_cores`: None
+- `tpu_metrics_debug`: False
+- `debug`: []
+- `dataloader_drop_last`: False
+- `dataloader_num_workers`: 0
+- `dataloader_prefetch_factor`: None
+- `past_index`: -1
+- `disable_tqdm`: False
+- `remove_unused_columns`: True
+- `label_names`: None
+- `load_best_model_at_end`: True
+- `ignore_data_skip`: False
+- `fsdp`: []
+- `fsdp_min_num_params`: 0
+- `fsdp_config`: {'min_num_params': 0, 'xla': False, 'xla_fsdp_v2': False, 'xla_fsdp_grad_ckpt': False}
+- `fsdp_transformer_layer_cls_to_wrap`: None
+- `accelerator_config`: {'split_batches': False, 'dispatch_batches': None, 'even_batches': True, 'use_seedable_sampler': True, 'non_blocking': False, 'gradient_accumulation_kwargs': None}
+- `deepspeed`: None
+- `label_smoothing_factor`: 0.0
+- `optim`: adamw_torch
+- `optim_args`: None
+- `adafactor`: False
+- `group_by_length`: False
+- `length_column_name`: length
+- `ddp_find_unused_parameters`: None
+- `ddp_bucket_cap_mb`: None
+- `ddp_broadcast_buffers`: False
+- `dataloader_pin_memory`: True
+- `dataloader_persistent_workers`: False
+- `skip_memory_metrics`: True
+- `use_legacy_prediction_loop`: False
+- `push_to_hub`: False
+- `resume_from_checkpoint`: None
+- `hub_model_id`: None
+- `hub_strategy`: every_save
+- `hub_private_repo`: None
+- `hub_always_push`: False
+- `gradient_checkpointing`: False
+- `gradient_checkpointing_kwargs`: None
+- `include_inputs_for_metrics`: False
+- `include_for_metrics`: []
+- `eval_do_concat_batches`: True
+- `fp16_backend`: auto
+- `push_to_hub_model_id`: None
+- `push_to_hub_organization`: None
+- `mp_parameters`:
+- `auto_find_batch_size`: False
+- `full_determinism`: False
+- `torchdynamo`: None
+- `ray_scope`: last
+- `ddp_timeout`: 1800
+- `torch_compile`: False
+- `torch_compile_backend`: None
+- `torch_compile_mode`: None
+- `include_tokens_per_second`: False
+- `include_num_input_tokens_seen`: False
+- `neftune_noise_alpha`: None
+- `optim_target_modules`: None
+- `batch_eval_metrics`: False
+- `eval_on_start`: False
+- `use_liger_kernel`: False
+- `eval_use_gather_object`: False
+- `average_tokens_across_devices`: False
+- `prompts`: None
+- `batch_sampler`: no_duplicates
+- `multi_dataset_batch_sampler`: proportional
+- `router_mapping`: {}
+- `learning_rate_mapping`: {}
+</details>
+### Training Logs
+| Epoch      | Step    | Training Loss | jina-reranker-v2-base-multilingual-binary_50_bopv_ndcg@10 |
+|:----------:|:-------:|:-------------:|:---------------------------------------------------------:|
+| **0.0844** | **500** | **0.0945**    | **0.0082 (+0.0066)**                                      |
+| 0.1688     | 1000    | 0.0386        | 0.0079 (+0.0062)                                          |
+| 0.2533     | 1500    | 0.034         | 0.0082 (+0.0066)                                          |
+| 0.3377     | 2000    | 0.0159        | 0.0082 (+0.0066)                                          |
+| 0.4221     | 2500    | 0.0129        | 0.0082 (+0.0066)                                          |
+| 0.5065     | 3000    | 0.0113        | 0.0082 (+0.0066)                                          |
+| 0.5909     | 3500    | 0.01          | 0.0082 (+0.0066)                                          |
+| 0.6753     | 4000    | 0.0089        | 0.0082 (+0.0066)                                          |
+| 0.7598     | 4500    | 0.0087        | 0.0082 (+0.0066)                                          |
+| 0.8442     | 5000    | 0.0095        | 0.0082 (+0.0066)                                          |
+| 0.9286     | 5500    | 0.0087        | 0.0082 (+0.0066)                                          |
+| 1.0130     | 6000    | 0.007         | 0.0082 (+0.0066)                                          |
+| 1.0974     | 6500    | 0.0087        | 0.0082 (+0.0066)                                          |
+| 1.1818     | 7000    | 0.0065        | 0.0082 (+0.0066)                                          |
+| 1.2663     | 7500    | 0.0095        | 0.0082 (+0.0066)                                          |
+| 1.3507     | 8000    | 0.0063        | 0.0082 (+0.0066)                                          |
+| 1.4351     | 8500    | 0.0082        | 0.0082 (+0.0066)                                          |
+| 1.5195     | 9000    | 0.0071        | 0.0082 (+0.0066)                                          |
+| 1.6039     | 9500    | 0.0073        | 0.0082 (+0.0066)                                          |
+| 1.6883     | 10000   | 0.0069        | 0.0082 (+0.0066)                                          |
+| 1.7728     | 10500   | 0.0064        | 0.0082 (+0.0066)                                          |
+| 1.8572     | 11000   | 0.0082        | 0.0082 (+0.0066)                                          |
+| 1.9416     | 11500   | 0.0078        | 0.0082 (+0.0066)                                          |
+| 2.0260     | 12000   | 0.0063        | 0.0082 (+0.0066)                                          |
+| 2.1104     | 12500   | 0.0068        | 0.0082 (+0.0066)                                          |
+| 2.1948     | 13000   | 0.0073        | 0.0082 (+0.0066)                                          |
+| 2.2793     | 13500   | 0.0094        | 0.0082 (+0.0066)                                          |
+| 2.3637     | 14000   | 0.0065        | 0.0082 (+0.0066)                                          |
+| 2.4481     | 14500   | 0.0064        | 0.0082 (+0.0066)                                          |
+| 2.5325     | 15000   | 0.0067        | 0.0082 (+0.0066)                                          |
+| 2.6169     | 15500   | 0.0067        | 0.0082 (+0.0066)                                          |
+| 2.7013     | 16000   | 0.0075        | 0.0082 (+0.0066)                                          |
+| 2.7858     | 16500   | 0.0101        | 0.0082 (+0.0066)                                          |
+| 2.8702     | 17000   | 0.0053        | 0.0082 (+0.0066)                                          |
+| 2.9546     | 17500   | 0.005         | 0.0082 (+0.0066)                                          |
+* The bold row denotes the saved checkpoint.
+### Framework Versions
+- Python: 3.9.7
+- Sentence Transformers: 5.0.0
+- Transformers: 4.52.4
+- PyTorch: 2.5.1+cu124
+- Accelerate: 1.5.2
+- Datasets: 4.0.0
+- Tokenizers: 0.21.0
+## Citation
+### BibTeX
+#### Sentence Transformers
+```bibtex
+@inproceedings{reimers-2019-sentence-bert,
+    title = "Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks",
+    author = "Reimers, Nils and Gurevych, Iryna",
+    booktitle = "Proceedings of the 2019 Conference on Empirical Methods in Natural Language Processing",
+    month = "11",
+    year = "2019",
+    publisher = "Association for Computational Linguistics",
+    url = "https://arxiv.org/abs/1908.10084",
+}
+```
+<!--
+## Glossary
+*Clearly define terms in order to be accessible across audiences.*
+-->
+<!--
+## Model Card Authors
+*Lists the people who create the model card, providing recognition and accountability for the detailed work that goes into its construction.*
+-->
+<!--
+## Model Card Contact
+*Provides a way for people who have updates to the Model Card, suggestions, or questions, to contact the Model Card authors.*
+-->

config.json ADDED Viewed

	@@ -0,0 +1,51 @@

+{
+  "architectures": [
+    "XLMRobertaForSequenceClassification"
+  ],
+  "attention_probs_dropout_prob": 0.1,
+  "auto_map": {
+    "AutoConfig": "jinaai/jina-reranker-v2-base-multilingual--configuration_xlm_roberta.XLMRobertaFlashConfig",
+    "AutoModel": "jinaai/jina-reranker-v2-base-multilingual--modeling_xlm_roberta.XLMRobertaModel",
+    "AutoModelForSequenceClassification": "jinaai/jina-reranker-v2-base-multilingual--modeling_xlm_roberta.XLMRobertaForSequenceClassification"
+  },
+  "bos_token_id": 0,
+  "classifier_dropout": null,
+  "emb_pooler": null,
+  "eos_token_id": 2,
+  "hidden_act": "gelu",
+  "hidden_dropout_prob": 0.1,
+  "hidden_size": 768,
+  "id2label": {
+    "0": "LABEL_0"
+  },
+  "initializer_range": 0.02,
+  "intermediate_size": 3072,
+  "label2id": {
+    "LABEL_0": 0
+  },
+  "layer_norm_eps": 1e-05,
+  "load_trained_adapters": false,
+  "lora_adaptations": null,
+  "lora_alpha": 1,
+  "lora_dropout_p": 0.0,
+  "lora_main_params_trainable": false,
+  "lora_rank": 4,
+  "matryoshka_dimensions": null,
+  "max_position_embeddings": 1026,
+  "num_attention_heads": 12,
+  "num_hidden_layers": 12,
+  "output_past": true,
+  "pad_token_id": 1,
+  "position_embedding_type": "absolute",
+  "sentence_transformers": {
+    "activation_fn": "torch.nn.modules.activation.Sigmoid",
+    "version": "5.0.0"
+  },
+  "torch_dtype": "bfloat16",
+  "transformers_version": "4.52.4",
+  "truncate_dim": null,
+  "type_vocab_size": 1,
+  "use_cache": false,
+  "use_flash_attn": true,
+  "vocab_size": 250002
+}

model.safetensors ADDED Viewed

	@@ -0,0 +1,3 @@

+version https://git-lfs.github.com/spec/v1
+oid sha256:6b9c2d5492d970a5a83482fe21421d68a7787b638cf885d7f00752f76c49f926
+size 556892306

special_tokens_map.json ADDED Viewed

	@@ -0,0 +1,51 @@

+{
+  "bos_token": {
+    "content": "<s>",
+    "lstrip": false,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  },
+  "cls_token": {
+    "content": "<s>",
+    "lstrip": false,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  },
+  "eos_token": {
+    "content": "</s>",
+    "lstrip": false,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  },
+  "mask_token": {
+    "content": "<mask>",
+    "lstrip": true,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  },
+  "pad_token": {
+    "content": "<pad>",
+    "lstrip": false,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  },
+  "sep_token": {
+    "content": "</s>",
+    "lstrip": false,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  },
+  "unk_token": {
+    "content": "<unk>",
+    "lstrip": false,
+    "normalized": false,
+    "rstrip": false,
+    "single_word": false
+  }
+}

tokenizer.json ADDED Viewed

	@@ -0,0 +1,3 @@

+version https://git-lfs.github.com/spec/v1
+oid sha256:e802fe5337779428818439760a1e6161ed36ceed72d4ebcbda9c139a2108fc99
+size 17082988

tokenizer_config.json ADDED Viewed

	@@ -0,0 +1,55 @@

+{
+  "added_tokens_decoder": {
+    "0": {
+      "content": "<s>",
+      "lstrip": false,
+      "normalized": false,
+      "rstrip": false,
+      "single_word": false,
+      "special": true
+    },
+    "1": {
+      "content": "<pad>",
+      "lstrip": false,
+      "normalized": false,
+      "rstrip": false,
+      "single_word": false,
+      "special": true
+    },
+    "2": {
+      "content": "</s>",
+      "lstrip": false,
+      "normalized": false,
+      "rstrip": false,
+      "single_word": false,
+      "special": true
+    },
+    "3": {
+      "content": "<unk>",
+      "lstrip": false,
+      "normalized": false,
+      "rstrip": false,
+      "single_word": false,
+      "special": true
+    },
+    "250001": {
+      "content": "<mask>",
+      "lstrip": true,
+      "normalized": false,
+      "rstrip": false,
+      "single_word": false,
+      "special": true
+    }
+  },
+  "bos_token": "<s>",
+  "clean_up_tokenization_spaces": true,
+  "cls_token": "<s>",
+  "eos_token": "</s>",
+  "extra_special_tokens": {},
+  "mask_token": "<mask>",
+  "model_max_length": 1024,
+  "pad_token": "<pad>",
+  "sep_token": "</s>",
+  "tokenizer_class": "XLMRobertaTokenizerFast",
+  "unk_token": "<unk>"
+}