Hugging Face's logo

gmunkhtur
/
finetuned_tdb_paraphrase-multilingual_mpnet_try3

Sentence Similarity
sentence-transformers
Safetensors
xlm-roberta
feature-extraction
Generated from Trainer
dataset_size:7379
loss:MatryoshkaLoss
loss:MultipleNegativesRankingLoss
Eval Results
text-embeddings-inference
Inference Endpoints
Model card Files Community
finetuned_tdb_paraphrase-multilingual_mpnet_try3 / README.md
gmunkhtur's picture
gmunkhtur
Add new SentenceTransformer model
a235367 verified
preview code
|
raw
history blame contribute delete
50.3 kB
metadata
tags:
  - sentence-transformers
  - sentence-similarity
  - feature-extraction
  - generated_from_trainer
  - dataset_size:7379
  - loss:MatryoshkaLoss
  - loss:MultipleNegativesRankingLoss
base_model: sentence-transformers/paraphrase-multilingual-mpnet-base-v2
widget:
  - source_sentence: >-
      ТДБ Онлайн үйлчилгээгээр данс нээхээс гадна өөр ямар нэмэлт боломжуудтай
      вэ?
    sentences:
      - >
        *-Зээлийн бодит өртөг(жилийн): төгрөг 16.43%

        Тавигдах шаардлага

        18 нас хүрсэн, Монгол улсын иргэн байх

        Ажил олгогч байгууллагадаа 1 жилээс доошгүй хугацаанд ажилласан байх

        Хувиараа бизнес эрхлэгчид 1 жил болон түүнээс дээш хугацаанд үйл
        ажиллагаа явуулсан байх

        Банк, банк бус санхүүгийн байгууллагад анхаарал хандуулах болон чанаргүй
        зээлийн үлдэгдэлгүй байх

        |№|Хамтран ажиллагч байгууллагууд|Хамтран ажиллагч
        байгууллагууд|Холбоос|

        |---|---|---|---|

        |1|Image|ХАЙБРИД ХАУС ХХК|https://www.facebook.com/HybridHouseLLC/|

        |2|Image|Түшигт ХОТ Хаус
        ХХК|https://www.facebook.com/profile.php?id=61550511661989|

        |3|Image|Эрдэнэс Түмэн Хаус
        ХХК|https://www.facebook.com/tumenhouse?mibextid=ZbWKwL|

        |4|Image|Five seasons
        villa|https://www.facebook.com/profile.php?id=100092997522130&mibextid=LQQJ4d|

        |5|Image|Zebra
        Haus|https://www.facebook.com/zebrahausmongolia?mibextid=LQQJ4d|

        |6|Image|Зуслангийн байшин констракшн
        ХХК|https://www.facebook.com/Z.BAISHIN?mibextid=LQQJ4d|

        Энэ хэсэгт зээлийн бодит өртөг, тавигдах шаардлага, хамтран ажиллагч
        байгууллагуудын тухай мэдээлэл багтсан.
      - >
        # Үл хөдлөх эд хөрөнгийн зээл


        Бизнес эрхлэн явуулах зориулалттай барилга, барилгын тодорхой хэсэг
        талбай худалдан авах, эсвэл шинээр барих, өргөтгөл хийх болон
        засварлахад зориулагдсэн зээлийг бид танд санал болгож байна.

        Энэ хэсэгт үл хөдлөх эд хөрөнгийн зээлийн зорилгыг тодорхойлсон байна.
      - >
        ТиДиБи Онлайн үйлчилгээгээр данс нээх, хадгаламж барьцаалсан зээл авах,
        картын пин код авах, гүйлгээний загвар үүсгэх, төлбөрөө урьдчилан
        захиалах, QR кодоор баталгаажсан дансны тодорхойлолт болон хуулга авах,
        зээлийн хүсэлт илгээх, маргаантай гүйлгээний хүсэлт илгээх зэрэг нэмэлт
        боломжуудтай. Гүйлгээ амжилттай хийгдсэн даруй цахим хаягт мэдэгдэл
        ирнэ.


        Онлайн багцын жилийн хураамжгүй. Онлайн плас багц мөн хураамжгүй бол
        Онлайн премиум+ОТР багцын жилийн хураамж 5,000 төгрөг. Онлайн багцаар
        өөрийн нэр дээрх данс хооронд гүйлгээ хийхэд шимтгэлгүй, банк дотор
        болон бусад банкны данс хооронд шилжүүлэг хийхэд 100 төгрөгийн
        шимтгэлтэй.


        Үйлчилгээнд бүртгүүлэхийн тулд хүчин төгөлдөр иргэний үнэмлэх эсвэл
        гадаад паспортын хамт өөрт ойр байрлах салбарт хандах боломжтой ба
        бүртгүүлэх хүсэлтийг урьдчилан бөглөж очих боломжтой. ТиДиБи онлайн
        аппликейшн болон веб хувилбарын гарын авлагыг холбоосоор орж үзэх
        боломжтой.

        Энэ хэсэгт ТиДиБи Онлайн үйлчилгээний нэмэлт боломжууд, хураамж,
        бүртгүүлэхэд шаардлагатай зүйлсийг тайлбарласан.
  - source_sentence: KEB HANA BANK-ны SWIFT код нь юу вэ?
    sentences:
      - "\\*20,000₮ -с дээш худалдан авалт бүрд буцаан олголттой бөгөөд сард олгох буцаан олголтын дээд хэмжээ 200,000₮  \n\\*\\*3,000,000₮ -с дээш худалдан авалт бүрд буцаан олголттой\n\n**Нэмэлт боломжууд:**\n\n* VISA international байгууллагаас улирал тутамд зарлагдаж буй хөнгөлөлтийн талаарх дэлгэрэнгүй мэдээллийг\_[ЭНД](https://www.visa.mn/mn_MN/pay-with-visa/visa-offers-and-perks.html)дарж авна уу.\n\n\n## Шимтгэлийн харьцуулалт\n| **Бүтээгдэхүүн** | | **Энгийн нөхцөл** | **Багцын нөхцөл** |\n| --- | --- | --- | --- |\n| **Бритто Эйнштейн карт** | Картын хураамж | 22,000₮ (4 жил) | Хураамжгүй |\n| Карт хүргэлт | 3,000₮ | Хураамжгүй |\n| АТМ-с бэлэн мөнгө авахад | 3,185₮ | Шимтгэлгүй |\n| АТМ-р шилжүүлэг хийхэд | 100₮ | Шимтгэлгүй |\n| **Ти Ди Би Онлайн үйлчилгээ** | Гүйлгээний шимтгэл | 10,690₮\\* | Шимтгэлгүй |\n| ATM-с QR кодоор бэлэн мөнгө авах шимтгэл | 100₮ | Шимтгэлгүй |\n| **Жилд төлөх нийт шимтэл, хураамж** | | **22,575₮** | **8,000₮** |\n\n*\\*Харилцагчдын дундаж хэрэглээгээр тооцов*\nЭнэ хэсэгт Эйнштейн залуусын багцын буцаан олголтын нөхцөл, VISA-ийн хөнгөлөлт, шимтгэлийн харьцуулалтыг харуулсан.\n"
      - >
        * 5,000 төгрөг, түүнтэй тэнцэх бусад валют



        Монголын Худалдаа Хөгжлийн Банк байгууллагуудад зориулсан энгийн
        хугацаатай хадгаламжийн үйлчилгээг санал болгож байна. Энэхүү хадгаламж
        нь байгууллагын мөнгөн хөрөнгийг өсгөх, хамгийн өндөр өгөөжтэй байхад
        чиглэгдсэн. Хадгаламжийн хугацаа, валютаас хамаарч хүүний нөхцөл өөр өөр
        байх бөгөөд төгрөг, ам.доллар, юань, евро гэсэн валютуудаар хадгаламж
        нээлгэх боломжтой.


        Төгрөгийн хугацаатай хадгаламжийн хувьд 1 сараас 24 сар хүртэл
        хугацаатай байх ба хүү нь 8.0%-12.8% байна. Ам.долларын хадгаламж 3
        сараас 12 сар хүртэл хугацаатай, хүү нь 2.0%-3.2% байна. Юанийн
        хадгаламж 3 сараас 12 сар хүртэл хугацаатай, хүү нь 1.2%-1.8% байна.
        Еврогийн хадгаламж 3 сараас 12 сар хүртэл хугацаатай, хүү нь 1.2%-1.7%
        байна. Валют бүрийн дансны доод үлдэгдэл харилцан адилгүй байна.

        Хадгаламжийн данс хаах шимтгэл болон хадгаламжийн ерөнхий мэдээлэл.
      - >
        # Корреспондент банк


        ## Корреспондент банкны жагсаалт


        - Ам.доллар
          | № | Улс | Банкны нэр | Байршил | SWIFT код |
          | --- | --- | --- | --- | --- |
          | 1 | U.S. | THE BANK OF NEW YORK MELLON | NEW YORK, UNITED STATES | IRVTUS3N |
          | 2 | FR | NATIXIS | PARIS, FRANCE | NATXFRPPXXX |
          | 3 | KR | KEB HANA BANK | SEOUL, KOREA | KOEXKRSE |
          | 4 | KOOKMIN BANK | SEOUL, KOREA | CZNBKRSE |
          | 5 | SHINHAN BANK | SEOUL, KOREA | SHBKKRSE |
          | 6 | WOORI BANK | SEOUL, KOREA | HVBKKRSE |
          | 7 | CN | INDUSTRIAL AND COMMERCIAL BANK OF CHINA | ERLIANHAOTE, CHINA | ICBKCNBJNMA |
          | 8 | BANK OF CHINA LIMTED (HONG KONG) | HONG KONG, CHINA | BKCHHKHH |
          | 9 | BANK OF INNER MONGOLIA | HOHHOT, CHINA | HSSYCNBH010 |
          | 10 | SG | OCBC BANK | SINGAPORE | OCBCSGSG |
          | 11 | DBS BANK LIMITED | SINGAPORE | DBSSSGSG |
          | 12 | DE | COMMERZBANK AG | FRANKFURT, GERMANY | COBADEFF |
          | 13 | TH | KASIKORNBANK PUBLIC COMPANY LIMITED | BANGKOK, THAILAND | KASITHBK |
        ХХБ-ны корреспондент банкуудын жагсаалт, тэр дундаа ам.долларын данстай
        банкуудын мэдээлэл.
  - source_sentence: Зээлийн хэмжээ хамгийн ихдээ хэдэн төгрөг хүртэл байж болох вэ?
    sentences:
      - >
        Та картаа ПОС терминалд 5 см орчим ойртуулахад гүйлгээ хийгдэнэ.


        Терминалын тохиргоо буюу гүйлгээ хийгдэж буй улсын журам, зохицуулалтаас
        хамаарч өндөр дүнтэй гүйлгээг картын ПИН кодоор баталгаажуулна.


        Дараах логонуудтай дэлхийн аль ч улсын ПОС терминалд payWave гүйлгээ
        хийх боломжтой.


        payWave унших боломжгүй үйлчилгээний байгууллагад payWave картын EMV чип
        болон соронзон туузыг ашиглан гүйлгээ хийх боломжтой.


        Олон улс руу зорчихын өмнө

        Картын хүчинтэй хугацаагаа шалгаж, хугацаа дуусах гэж буй бол банкинд
        хандаж, шинээр захиална уу.


        Кредит карт болон зээлийн эрхтэй карттай бол зээл төлөгдөж дуусах
        хугацаа, зээлийн лимитийн хугацаа болон картын дуусах хугацаагаа
        нягтлаарай.


        Банкны www.tdbm.mn цахим хуудасны “Мэдээллийн аюулгүй байдлын зөвлөмж”
        хэсгээс картын эрсдэлээс сэргийлэх зөвлөмжүүдтэй сайтар танилцана уу.


        Гарч болзошгүй эрсдэлээс сэргийлж картдаа хамтран эзэмшигч, эсвэл
        итгэмжлэгдсэн хүний мэдээллээ банканд бүртгүүлэх боломжтой.

        PayWave картаар төлбөр хийх, олон улс руу зорчихоос өмнө анхаарах зүйлс.
      - >
        # Тээврийн санхүүжилтийн зээлийн эрх


        Бид танд Тээвэр зуучлагч компани, Гаалийн байгууллагууд болон Импортлогч
        байгууллагын хоорондын төлбөр, тооцоог санхүүжүүлэх бүтээгдэхүүнийг
        санал болгож байна.


        Үйлчилгээний нөхцөл

        | **Шугамын зээлийн нөхцөл** | |

        | --- | --- |

        | Зээлийн хэмжээ | 500,000,000 (таван зуун сая) төгрөг хүртэл |

        | Зээлийн хугацаа | 12 сар хүртэл |

        | Зээлийн хүү | 20.4% хүртэл |

        | Эргэн төлөлтийн нөхцөл | Нэхэмжлэлийн эсрэг олголтын бүрийн эргэн
        төлөлт 30-75 хоног |

        | Ашиглаагүй зээлийн үлдэгдэлд бодогдох хүү | 0% |

        | Үндсэн барьцаа хөрөнгө | Бараа материалын үлдэгдэл болон Ложистикийн
        компани дээрх Замд яваа бараа материал байна. |


        | **Төлбөрийн баталгаа гаргуулах тохиолдолд баталгааны нөхцөл** | |

        | --- | --- |

        | Баталгааны эрсдэлийн шимтгэл | 6% |


        Тавигдах шаардлага


        **Зээлдэгчид тавигдах шаардлага**

        Энэ хэсэгт "Тээврийн санхүүжилтийн зээлийн эрх"-ийн үйлчилгээний нөхцөл
        болон зээлдэгчид тавигдах шаардлагыг тайлбарласан байна.
      - "| Давуу тал                                                                                                                           |\n| ----------------------------------------------------------------------------------------------------------------------------------- |\n| ОУ-ын үнэт цаасны төвлөрсөн хадгаламжийн төвүүдтэй бодит цагийн горимоор холбогдон үнэт цаасны төлбөр тооцоо, хадгалалтыг гүйцэтгэх |\n| Татварын тооцоолол, суутгал, татварын чөлөөлөлт, сертификат                                                                         |\n| Төлбөр тооцоог баталгаажуулан зөрүүг шалган мэдээллэх                                                                               |\n| Харилцагчийг үнэт цаасны төлбөр тооцооны\_ процесс,\_ \_компанийн үйл ажиллагаанд оролцох талаарх зөвлөмжөөр хангах                    |\n| Харилцагчийн хадгалуулж буй үнэт цаасны үлдэгдэл, үнэлгээ, хуулгыг TDB Online-р харах боломжтой                                     |\nЭнэ хэсэг нь кастодиан үйлчилгээний давуу талуудыг жагсаасан хэсэг юм.\n"
  - source_sentence: >-
      FATCA-ийн ямар маягтын талаарх мэдээлэл ХХБ-ны МУТС-тэй тэмцэх хүрээнд
      багтдаг вэ?
    sentences:
      - "Wolfsberg Questionnaire\n\nВольфсберг групп нь дэлхийн арван гурван банкны нэгдэл бөгөөд санхүүгийн гэмт хэргийн эрсдэлийн менежментийн тогтолцоо, удирдамжийг боловсруулах, тэр дундаа харилцагчаа таних, мөнгө угаах, терроризмыг санхүүжүүлэхтэй тэмцэх бодлогыг боловсруулахад чиглэдэг.  \nДоорх линк дээр даран та бүхэн банкны Волфсберг группийн Корреспондент (хамтын ажиллагаатай) банкны асуулгатай танилцах боломжтой ба асуулгаас банкны Мөнгө угаах болон терроризмыг санхүүжүүлэхтэй тэмцэх хөтөлбөрийн талаар ерөнхий мэдээлэлтэй танилцах боломжтой.\_[**Энд дарна уу**](https://www.tdbm.mn/sites/default/files/2024-11/TDBM%202024.09.09%20CBDDQ%20v1.4%20sign.pdf)\n\nW-8BEN-E FORM\nХХБ-ны МУТС-тэй тэмцэх хүрээнд Вольфсберг Группийн асуулга болон FATCA-ийн W-8BEN-E маягтын талаарх мэдээлэл.\n"
      - >
        # Байгууллагын хадгаламжийн сертификат

        Танд өндөр хүүтэй, бусдад шилжүүлэх, худалдах зэргээр чөлөөтэй хөрвөх
        чадвартай бүтээгдэхүүнийг санал болгож байна.


        Үйлчилгээний нөхцөл

        ### **Төгрөгийн сертификат**


        | **Сертификатын хугацаа** | **3 сар** | **6 сар** | **12 сар** |

        | --- | --- | --- | --- |

        | Жилийн хүү | 9.6% | 10.6% | 12.5% |


        **\***Гэрээний хугацаанд орлого зарлагын гүйлгээ хийхгүй, хугацаа цуцлах
        боломжгүй.  

        \*\*3-24 сарын хугацаатай хадгаламжийн хувьд санхүүгийн тогтвортой
        харилцаа үүсгэсэн харилцагчдад хадгаламж шинээр нээх болон хадгаламжийн
        хугацаа сунгах тохиолдолд банкны холбогдох газар, нэгжийн зөвшөөрлөөр
        (Улаанбаатарт 50 сая (50 мянган ам.доллар), Орон нутагт 20 сая (20
        мянган ам. доллар) түүнээс дээш үлдэгдлийн хувьд) хадгаламжийн нийтэд
        зарласан хүүн дээр 0.0%-3.0% хүртэл хүүний урамшууллыг олгож болно.

        Байгууллагын хадгаламжийн сертификатын тухай ерөнхий мэдээлэл, төгрөгийн
        сертификатын нөхцөл.
      - >
        Зээл авахын тулд зээлийн өргөдөл, иргэний үнэмлэх, ажил олгогчийн
        тодорхойлолт, хөдөлмөрийн гэрээ, орлогыг баталгаажуулах баримт бичиг,
        зээлийн гэрээ, худалдах, худалдан авах гэрээ эсвэл ажил гүйцэтгэх гэрээ,
        барьцаанд тавих хөрөнгийн гэрчилгээ, газар эзэмших эсвэл газар өмчлөлийн
        гэрчилгээ, газрын кадастрын зураг, барилга ажлын төсөв, эрчим хүчний
        хэмнэлттэй хувийн сууц болохыг тодорхойлсон дүгнэлт зэрэг бичиг баримтыг
        бүрдүүлэх шаардлагатай. Түүнчлэн, оршин суугаа хаягийн тодорхойлолт,
        гэрлэлтийн гэрчилгээний хуулбар эсвэл гэрлэсэн эсэх лавлагаа, нийгмийн
        даатгалын шимтгэл төлөлтийн талаарх тодорхойлолт, зээлийн барьцаанд
        тавигдсан эсэх талаарх үл хөдлөх хөрөнгийн лавлагааг бүрдүүлэх
        шаардлагатай. Эдгээр бичиг баримтыг Төрийн үйлчилгээний цахим системээс
        авах боломжтой.

        Зээл авахад бүрдүүлэх бичиг баримтуудын жагсаалт.
  - source_sentence: >-
      Үй олноор хөнөөх зэвсэг дэлгэрүүлэхийг санхүүжүүлэх нь юунд хохирол
      учруулдаг вэ?
    sentences:
      - "*\nХарилцагч та онлайн банк үйлчилгээгээр энэхүү картыг захиалсан нөхцөлд картын худалдаалах үнээс 20% -ийн хөнгөлөлт эдлэх боломжтой.\n*20,000₮ -с дээш худалдан авалт бүрд буцаан олголттой бөгөөд сард олгох буцаан олголтын дээд хэмжээ 200,000₮\nEmart -н хувьд\_:\n** 20,000₮ -с дээш худалдан авалт бүрд буцаан олголттой бөгөөд сард олгох буцаан олголтын дээд хэмжээ 200,000₮, нэг харилцагчид олгох өдрийн лимит 10,000₮\nНэмэлт боломжууд:\nVISA international байгууллагаас улирал тутамд зарлагдаж буй хөнгөлөлтийн талаарх  мэдээллийг\nЭНД\nдарж авна уу.\nТа өөрийн захиалсан картаа шуудангийн Карт хүргэлтийн үйлчилгээгээр дамжуулан хүссэн хаягаараа үнэгүй хүргүүлэн авах боломжтой.\nВалютын төрөл:USD\n|Хүү шимтгэл|Хүү шимтгэл|Олон улсын ВИЗА классик карт|Олон улсын ВИЗА классик карт|\n|USD|USD|\n|Картын хугацаа|Картын хугацаа|4 жил|4 жил|\n|Худалдаалах үнэ|Салбараар захиалах|25,000 ₮|25,000 ₮|\n|TDB Online -р захиалах|20,000 ₮|20,000 ₮|\n|Хүргэлт|Хүргэлт|Үнэгүй|Үнэгүй|\nБритто классик картын хүү, шимтгэлийн нөхцөл, USD валютын төрлийн мэдээлэл.\n"
      - >
        Үй олноор хөнөөх зэвсэг дэлгэрүүлэхийг санхүүжүүлэх гэдэг нь Монгол
        Улсын хууль тогтоомж, олон улсын гэрээгээр хориглосон цөмийн, химийн,
        биологийн эсвэл үйл олноор хөнөөх бүх төрлийн зэвсгийг үйлдвэрлэх,
        ашиглах, худалдах, худалдан авахад санхүүгийн дэмжлэг үзүүлэхийг хэлнэ.
        Үй олноор хөнөөх зэвсэг дэлгэрүүлэхийг санхүүжүүлэх нь олон улсын энх
        тайван, аюулгүй байдал, хүний амь нас, амьдрах орчинд асар их хохирол
        учруулдаг учраас энэ төрлийн гэмт хэргийг санхүүжүүлж болзошгүй мөнгөн
        хөрөнгийн шилжилт хөдөлгөөнийг илрүүлж, таслан зогсоох нь банкны хувьд
        маш чухал юм.


        **САНХҮҮГИЙН ГЭМТ ХЭРЭГ ГЭЖ ЮУ ВЭ?**

        Энэ хэсэгт үй олноор хөнөөх зэвсэг дэлгэрүүлэхийг санхүүжүүлэх гэж юу
        болох, мөн санхүүгийн гэмт хэргийн тухай тодорхойлолтыг оруулсан байна.
      - >
        Тус банк нь Forbes Mongolia Women’s Summit 2022 форумд ерөнхий ивээн
        тэтгэгчээр ажиллаж, Шотланд улсын Эдинбургийн их сургуулийн оюутнуудтай
        хамтран "Ногоон" банк болох талаар судалгаа хийсэн. Visa
        International-тай хамтран ОУ-ын виза карт руу мөнгөн гуйвуулга илгээх
        Visa Direct болон Visa B2B үйлчилгээнүүдийг Монгол Улсын зах зээлд
        анхлан нэвтрүүлсэн. Britto Cup - 2022 хөл бөмбөгийн аварга шалгаруулах
        тэмцээнийг зохион байгуулж, Britto Эйнштэйн картыг зах зээлд
        нэвтрүүлсэн.


        ХХБ нь Мооdу’s агентлагаас B2, Standard & Poor’s агентлагаас B+
        зэрэглэлтэй бөгөөд хэтийн төлөв нь тогтвортой үнэлгээтэй. Ногоон зээлийн
        хөтөлбөртөө ОУ-н эдийн засгийн хамтын ажиллагааны банк (IВEC)-с 10 сая
        ам.долларын санхүүжилт татаж, Visa International байгууллагатай хамтын
        ажиллагаа эхэлсний 20 жилийн ойг тэмдэглэсэн. ОХУ-н тэргүүний банк болох
        Газпромбанктай "Хамтын ажиллагааны гэрээ” байгуулж, "Climate 30+ Ногоон
        Сэргэлтийн Хөтөлбөр”-ийг санаачлан хэрэгжүүлж байна.

        ХХБ-ны 2022 оны үйл ажиллагаа, хамтын ажиллагаа, зээлжих зэрэглэл,
        ногоон хөтөлбөрүүдийн тухай.
pipeline_tag: sentence-similarity
library_name: sentence-transformers
metrics:
  - cosine_accuracy@1
  - cosine_accuracy@3
  - cosine_accuracy@5
  - cosine_accuracy@10
  - cosine_precision@1
  - cosine_precision@3
  - cosine_precision@5
  - cosine_precision@10
  - cosine_recall@1
  - cosine_recall@3
  - cosine_recall@5
  - cosine_recall@10
  - cosine_ndcg@10
  - cosine_mrr@10
  - cosine_map@100
model-index:
  - name: >-
      SentenceTransformer based on
      sentence-transformers/paraphrase-multilingual-mpnet-base-v2
    results:
      - task:
          type: information-retrieval
          name: Information Retrieval
        dataset:
          name: Unknown
          type: unknown
        metrics:
          - type: cosine_accuracy@1
            value: 0.45907859078590785
            name: Cosine Accuracy@1
          - type: cosine_accuracy@3
            value: 0.7002710027100271
            name: Cosine Accuracy@3
          - type: cosine_accuracy@5
            value: 0.775609756097561
            name: Cosine Accuracy@5
          - type: cosine_accuracy@10
            value: 0.8617886178861789
            name: Cosine Accuracy@10
          - type: cosine_precision@1
            value: 0.45907859078590785
            name: Cosine Precision@1
          - type: cosine_precision@3
            value: 0.23342366757000904
            name: Cosine Precision@3
          - type: cosine_precision@5
            value: 0.1551219512195122
            name: Cosine Precision@5
          - type: cosine_precision@10
            value: 0.08617886178861789
            name: Cosine Precision@10
          - type: cosine_recall@1
            value: 0.45907859078590785
            name: Cosine Recall@1
          - type: cosine_recall@3
            value: 0.7002710027100271
            name: Cosine Recall@3
          - type: cosine_recall@5
            value: 0.775609756097561
            name: Cosine Recall@5
          - type: cosine_recall@10
            value: 0.8617886178861789
            name: Cosine Recall@10
          - type: cosine_ndcg@10
            value: 0.6597744884485732
            name: Cosine Ndcg@10
          - type: cosine_mrr@10
            value: 0.5951965845055283
            name: Cosine Mrr@10
          - type: cosine_map@100
            value: 0.6006873415410988
            name: Cosine Map@100

SentenceTransformer based on sentence-transformers/paraphrase-multilingual-mpnet-base-v2

This is a sentence-transformers model finetuned from sentence-transformers/paraphrase-multilingual-mpnet-base-v2. It maps sentences & paragraphs to a 768-dimensional dense vector space and can be used for semantic textual similarity, semantic search, paraphrase mining, text classification, clustering, and more.

Model Details

Model Description

Model Sources

Full Model Architecture 

SentenceTransformer(
  (0): Transformer({'max_seq_length': 128, 'do_lower_case': False}) with Transformer model: XLMRobertaModel 
  (1): Pooling({'word_embedding_dimension': 768, 'pooling_mode_cls_token': False, 'pooling_mode_mean_tokens': True, 'pooling_mode_max_tokens': False, 'pooling_mode_mean_sqrt_len_tokens': False, 'pooling_mode_weightedmean_tokens': False, 'pooling_mode_lasttoken': False, 'include_prompt': True})
)

Usage

Direct Usage (Sentence Transformers)

First install the Sentence Transformers library:

pip install -U sentence-transformers

Then you can load this model and run inference.

from sentence_transformers import SentenceTransformer

# Download from the 🤗 Hub
model = SentenceTransformer("gmunkhtur/finetuned_tdb_paraphrase-multilingual_mpnet_try3")
# Run inference
sentences = [
    'Үй олноор хөнөөх зэвсэг дэлгэрүүлэхийг санхүүжүүлэх нь юунд хохирол учруулдаг вэ?',
    'Үй олноор хөнөөх зэвсэг дэлгэрүүлэхийг санхүүжүүлэх гэдэг нь Монгол Улсын хууль тогтоомж, олон улсын гэрээгээр хориглосон цөмийн, химийн, биологийн эсвэл үйл олноор хөнөөх бүх төрлийн зэвсгийг үйлдвэрлэх, ашиглах, худалдах, худалдан авахад санхүүгийн дэмжлэг үзүүлэхийг хэлнэ. Үй олноор хөнөөх зэвсэг дэлгэрүүлэхийг санхүүжүүлэх нь олон улсын энх тайван, аюулгүй байдал, хүний амь нас, амьдрах орчинд асар их хохирол учруулдаг учраас энэ төрлийн гэмт хэргийг санхүүжүүлж болзошгүй мөнгөн хөрөнгийн шилжилт хөдөлгөөнийг илрүүлж, таслан зогсоох нь банкны хувьд маш чухал юм.\n\n**САНХҮҮГИЙН ГЭМТ ХЭРЭГ ГЭЖ ЮУ ВЭ?**\nЭнэ хэсэгт үй олноор хөнөөх зэвсэг дэлгэрүүлэхийг санхүүжүүлэх гэж юу болох, мөн санхүүгийн гэмт хэргийн тухай тодорхойлолтыг оруулсан байна.\n',
    'Тус банк нь Forbes Mongolia Women’s Summit 2022 форумд ерөнхий ивээн тэтгэгчээр ажиллаж, Шотланд улсын Эдинбургийн их сургуулийн оюутнуудтай хамтран "Ногоон" банк болох талаар судалгаа хийсэн. Visa International-тай хамтран ОУ-ын виза карт руу мөнгөн гуйвуулга илгээх Visa Direct болон Visa B2B үйлчилгээнүүдийг Монгол Улсын зах зээлд анхлан нэвтрүүлсэн. Britto Cup - 2022 хөл бөмбөгийн аварга шалгаруулах тэмцээнийг зохион байгуулж, Britto Эйнштэйн картыг зах зээлд нэвтрүүлсэн.\n\nХХБ нь Мооdу’s агентлагаас B2, Standard & Poor’s агентлагаас B+ зэрэглэлтэй бөгөөд хэтийн төлөв нь тогтвортой үнэлгээтэй. Ногоон зээлийн хөтөлбөртөө ОУ-н эдийн засгийн хамтын ажиллагааны банк (IВEC)-с 10 сая ам.долларын санхүүжилт татаж, Visa International байгууллагатай хамтын ажиллагаа эхэлсний 20 жилийн ойг тэмдэглэсэн. ОХУ-н тэргүүний банк болох Газпромбанктай "Хамтын ажиллагааны гэрээ” байгуулж, "Climate 30+ Ногоон Сэргэлтийн Хөтөлбөр”-ийг санаачлан хэрэгжүүлж байна.\nХХБ-ны 2022 оны үйл ажиллагаа, хамтын ажиллагаа, зээлжих зэрэглэл, ногоон хөтөлбөрүүдийн тухай.\n',
]
embeddings = model.encode(sentences)
print(embeddings.shape)
# [3, 768]

# Get the similarity scores for the embeddings
similarities = model.similarity(embeddings, embeddings)
print(similarities.shape)
# [3, 3]

Evaluation

Metrics

Information Retrieval

Metric Value
cosine_accuracy@1 0.4591
cosine_accuracy@3 0.7003
cosine_accuracy@5 0.7756
cosine_accuracy@10 0.8618
cosine_precision@1 0.4591
cosine_precision@3 0.2334
cosine_precision@5 0.1551
cosine_precision@10 0.0862
cosine_recall@1 0.4591
cosine_recall@3 0.7003
cosine_recall@5 0.7756
cosine_recall@10 0.8618
cosine_ndcg@10 0.6598
cosine_mrr@10 0.5952
cosine_map@100 0.6007

Training Details

Training Dataset

Unnamed Dataset

  • Size: 7,379 training samples
  • Columns: anchor and positive
  • Approximate statistics based on the first 1000 samples:
    anchor positive
    type string string
    details
    • min: 8 tokens
    • mean: 22.09 tokens
    • max: 94 tokens
    • min: 31 tokens
    • mean: 125.54 tokens
    • max: 128 tokens
  • Samples:
    anchor positive
    Жуниор багц хэдэн насны хүүхдэд зориулагдсан бэ? 20,000₮ -с дээш худалдан авалт бүрд буцаан олголттой бөгөөд сард олгох буцаан олголтын дээд хэмжээ 200,000₮

    Нэмэлт боломжууд:

    * VISA international байгууллагаас улирал тутамд зарлагдаж буй хөнгөлөлтийн талаарх дэлгэрэнгүй мэдээллийг ЭНДдарж авна уу.
    ### Жуниор багц 13-18 нас

    Дараах байгууллагуудын ХХБ-ны пос төхөөрөмж дээр уншуулснаар буцаан олголт эдлэх боломжтой.
    Кидс багцын хөнгөлөлт урамшууллын жагсаалтын дараа Жуниор багцын хөнгөлөлт урамшуулал эхэлж байна.
    Байгууллагын багцуудын давуу талуудад шимтгэл хураамж төлөхгүй байх зэрэг ордог уу? Монголын Худалдаа Хөгжлийн Банк байгууллагуудад зориулж төлбөр тооцооны үйлчилгээг багцалсан дөрвөн төрлийн багц бүтээгдэхүүн санал болгож байна. Эдгээр багцууд нь санхүүгийн хэрэгцээт үйлчилгээг нэг дор авах, байгууллагын хэрэглээнд тохирсон төрлийг сонгох, санхүүгийн гүйлгээнд зарцуулах цагийг хэмнэх, шимтгэл хураамж төлөхгүй байх зэрэг давуу талуудтай. Мөн санхүүгийн бүртгэл тооцоог хялбаршуулах, цахим банк руу шилжих, гүйлгээг цахимаар зайнаас шийдэх, цахим үйлчилгээг хөнгөлөлттэй нөхцөлөөр авах, санхүүгийн зөвлөх үйлчилгээ авах боломжуудыг олгодог.
    Энэ хэсэгт байгууллагын багц бүтээгдэхүүний гол санаа, давуу талуудыг тодорхойлсон.
    Хүүхдийн багц гэж юу вэ? # Хүүхдийн багц
    Таны хүүхдийн санхүүгийн хэрэгцээнд тохирсон үйлчилгээг нэг дор багтаасан
    Хүүхдийн санхүүгийн багцын тухай ерөнхий танилцуулга.
  • Loss: MatryoshkaLoss with these parameters:
    {
    "loss": "MultipleNegativesRankingLoss",
    "matryoshka_dims": [
        768,
        512,
        256,
        128,
        64
    ],
    "matryoshka_weights": [
        1,
        1,
        1,
        1,
        1
    ],
    "n_dims_per_step": -1
}

Training Hyperparameters

Non-Default Hyperparameters

  • eval_strategy: steps
  • per_device_train_batch_size: 64
  • per_device_eval_batch_size: 32
  • gradient_accumulation_steps: 2
  • learning_rate: 1e-05
  • weight_decay: 0.01
  • num_train_epochs: 10
  • lr_scheduler_type: cosine
  • warmup_ratio: 0.1
  • fp16: True
  • batch_sampler: no_duplicates

All Hyperparameters

Click to expand
  • overwrite_output_dir: False
  • do_predict: False
  • eval_strategy: steps
  • prediction_loss_only: True
  • per_device_train_batch_size: 64
  • per_device_eval_batch_size: 32
  • per_gpu_train_batch_size: None
  • per_gpu_eval_batch_size: None
  • gradient_accumulation_steps: 2
  • eval_accumulation_steps: None
  • torch_empty_cache_steps: None
  • learning_rate: 1e-05
  • weight_decay: 0.01
  • adam_beta1: 0.9
  • adam_beta2: 0.999
  • adam_epsilon: 1e-08
  • max_grad_norm: 1.0
  • num_train_epochs: 10
  • max_steps: -1
  • lr_scheduler_type: cosine
  • lr_scheduler_kwargs: {}
  • warmup_ratio: 0.1
  • warmup_steps: 0
  • log_level: passive
  • log_level_replica: warning
  • log_on_each_node: True
  • logging_nan_inf_filter: True
  • save_safetensors: True
  • save_on_each_node: False
  • save_only_model: False
  • restore_callback_states_from_checkpoint: False
  • no_cuda: False
  • use_cpu: False
  • use_mps_device: False
  • seed: 42
  • data_seed: None
  • jit_mode_eval: False
  • use_ipex: False
  • bf16: False
  • fp16: True
  • fp16_opt_level: O1
  • half_precision_backend: auto
  • bf16_full_eval: False
  • fp16_full_eval: False
  • tf32: None
  • local_rank: 0
  • ddp_backend: None
  • tpu_num_cores: None
  • tpu_metrics_debug: False
  • debug: []
  • dataloader_drop_last: False
  • dataloader_num_workers: 0
  • dataloader_prefetch_factor: None
  • past_index: -1
  • disable_tqdm: False
  • remove_unused_columns: True
  • label_names: None
  • load_best_model_at_end: False
  • ignore_data_skip: False
  • fsdp: []
  • fsdp_min_num_params: 0
  • fsdp_config: {'min_num_params': 0, 'xla': False, 'xla_fsdp_v2': False, 'xla_fsdp_grad_ckpt': False}
  • fsdp_transformer_layer_cls_to_wrap: None
  • accelerator_config: {'split_batches': False, 'dispatch_batches': None, 'even_batches': True, 'use_seedable_sampler': True, 'non_blocking': False, 'gradient_accumulation_kwargs': None}
  • deepspeed: None
  • label_smoothing_factor: 0.0
  • optim: adamw_torch
  • optim_args: None
  • adafactor: False
  • group_by_length: False
  • length_column_name: length
  • ddp_find_unused_parameters: None
  • ddp_bucket_cap_mb: None
  • ddp_broadcast_buffers: False
  • dataloader_pin_memory: True
  • dataloader_persistent_workers: False
  • skip_memory_metrics: True
  • use_legacy_prediction_loop: False
  • push_to_hub: False
  • resume_from_checkpoint: None
  • hub_model_id: None
  • hub_strategy: every_save
  • hub_private_repo: None
  • hub_always_push: False
  • gradient_checkpointing: False
  • gradient_checkpointing_kwargs: None
  • include_inputs_for_metrics: False
  • include_for_metrics: []
  • eval_do_concat_batches: True
  • fp16_backend: auto
  • push_to_hub_model_id: None
  • push_to_hub_organization: None
  • mp_parameters:
  • auto_find_batch_size: False
  • full_determinism: False
  • torchdynamo: None
  • ray_scope: last
  • ddp_timeout: 1800
  • torch_compile: False
  • torch_compile_backend: None
  • torch_compile_mode: None
  • dispatch_batches: None
  • split_batches: None
  • include_tokens_per_second: False
  • include_num_input_tokens_seen: False
  • neftune_noise_alpha: None
  • optim_target_modules: None
  • batch_eval_metrics: False
  • eval_on_start: False
  • use_liger_kernel: False
  • eval_use_gather_object: False
  • average_tokens_across_devices: False
  • prompts: None
  • batch_sampler: no_duplicates
  • multi_dataset_batch_sampler: proportional

Training Logs

Epoch Step Training Loss cosine_ndcg@10
0.4329 100 - 0.4187
0.8658 200 - 0.4814
1.0 231 - 0.5086
1.2987 300 - 0.5223
1.7316 400 - 0.5439
2.0 462 - 0.5555
2.1645 500 4.7137 0.5531
2.5974 600 - 0.5666
3.0 693 - 0.5786
3.0303 700 - 0.5810
3.4632 800 - 0.5904
3.8961 900 - 0.5941
4.0 924 - 0.5938
4.3290 1000 1.5026 0.5938
4.7619 1100 - 0.5963
0.4329 100 - 0.5980
0.8658 200 - 0.5982
1.0 231 - 0.5994
1.2987 300 - 0.5897
1.7316 400 - 0.5858
2.0 462 - 0.5887
2.1645 500 0.6971 0.5843
2.5974 600 - 0.6008
3.0 693 - 0.5975
3.0303 700 - 0.5990
3.4632 800 - 0.6168
3.8961 900 - 0.6176
4.0 924 - 0.6187
4.3290 1000 0.6318 0.6141
4.7619 1100 - 0.6184
5.0 1155 - 0.6190
5.1948 1200 - 0.6232
5.6277 1300 - 0.6247
6.0 1386 - 0.6257
6.0606 1400 - 0.6246
6.4935 1500 0.7033 0.6297
6.9264 1600 - 0.6359
7.0 1617 - 0.6365
7.3593 1700 - 0.6341
7.7922 1800 - 0.6359
8.0 1848 - 0.6338
8.2251 1900 - 0.6353
8.6580 2000 0.5515 0.6397
9.0 2079 - 0.6416
9.0909 2100 - 0.6411
9.5238 2200 - 0.6436
9.9567 2300 - 0.6442
10.0 2310 - 0.6442
0.8621 50 - 0.6451
1.7241 100 1.3741 0.6502
0.8621 50 - 0.6491
1.7241 100 1.0699 0.6516
2.5862 150 - 0.6518
3.4483 200 1.1568 0.6518
4.3103 250 - 0.6543
5.1724 300 1.1392 0.6569
6.0345 350 - 0.6590
6.8966 400 0.9656 0.6582
7.7586 450 - 0.6576
8.6207 500 0.9698 0.6582
9.4828 550 - 0.6598

Framework Versions

  • Python: 3.11.11
  • Sentence Transformers: 3.4.1
  • Transformers: 4.48.3
  • PyTorch: 2.5.1+cu124
  • Accelerate: 1.3.0
  • Datasets: 3.3.1
  • Tokenizers: 0.21.0

Citation

BibTeX

Sentence Transformers 

@inproceedings{reimers-2019-sentence-bert,
    title = "Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks",
    author = "Reimers, Nils and Gurevych, Iryna",
    booktitle = "Proceedings of the 2019 Conference on Empirical Methods in Natural Language Processing",
    month = "11",
    year = "2019",
    publisher = "Association for Computational Linguistics",
    url = "https://arxiv.org/abs/1908.10084",
}

MatryoshkaLoss 

@misc{kusupati2024matryoshka,
    title={Matryoshka Representation Learning},
    author={Aditya Kusupati and Gantavya Bhatt and Aniket Rege and Matthew Wallingford and Aditya Sinha and Vivek Ramanujan and William Howard-Snyder and Kaifeng Chen and Sham Kakade and Prateek Jain and Ali Farhadi},
    year={2024},
    eprint={2205.13147},
    archivePrefix={arXiv},
    primaryClass={cs.LG}
}

MultipleNegativesRankingLoss 

@misc{henderson2017efficient,
    title={Efficient Natural Language Response Suggestion for Smart Reply},
    author={Matthew Henderson and Rami Al-Rfou and Brian Strope and Yun-hsuan Sung and Laszlo Lukacs and Ruiqi Guo and Sanjiv Kumar and Balint Miklos and Ray Kurzweil},
    year={2017},
    eprint={1705.00652},
    archivePrefix={arXiv},
    primaryClass={cs.CL}
}