mmarco-mMiniLMv2-L12-H384-v1-bk-quyche

CrossEncoder based on cross-encoder/mmarco-mMiniLMv2-L12-H384-v1

This is a Cross Encoder model finetuned from cross-encoder/mmarco-mMiniLMv2-L12-H384-v1 using the sentence-transformers library. It computes scores for pairs of texts, which can be used for text reranking and semantic search.

Model Details

Model Description

• Model Type: Cross Encoder
• Base model: cross-encoder/mmarco-mMiniLMv2-L12-H384-v1 <!-- at revision 1427fd652930e4ba29e8149678df786c240d8825 -->
• Maximum Sequence Length: 512 tokens
• Number of Output Labels: 1 label

<!-- - **Training Dataset:** Unknown --> <!-- - **Language:** Unknown --> <!-- - **License:** Unknown -->

Model Sources

• Documentation: Sentence Transformers Documentation
• Documentation: Cross Encoder Documentation
• Repository: Sentence Transformers on GitHub
• Hugging Face: Cross Encoders on Hugging Face

Usage

Direct Usage (Sentence Transformers)

First install the Sentence Transformers library:

pip install -U sentence-transformers

Then you can load this model and run inference.

from sentence_transformers import CrossEncoder

# Download from the 🤗 Hub
model = CrossEncoder("ntAnh-dev/mmarco-mMiniLMv2-L12-H384-v1-bk-quyche")
# Get scores for pairs of texts
pairs = [
    ['Quy định, quy chế về học tập thì sinh viên xem ở trang nào?', 'Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội\nChương III NỘI DUNG CÔNG TÁC SINH VIÊN\nĐiều 8. Quản lý thông tin sinh viên\n2. Hồ sơ quản lý quá trình học tập, rèn luyện của sinh viên gồm:\na) Kết quả học tập (điểm quá trình, điểm kết thúc học phần, kết quả thi hoặc bảo\nvệ đồ án tốt nghiệp/khoá luận tốt nghiệp) và kết quả rèn luyện (điểm rèn luyện theo\nhọc kỳ, năm học, khoá học);\nb) Kết quả các hoạt động xã hội đã tham gia trong từng học kỳ, năm học;\nc) Hình thức khen thưởng (nếu có) mà sinh viên đạt được trong học tập, nghiên\ncứu khoa học, hoạt động phong trào, đoàn thể;\nd) Hình thức kỷ luật (nếu có);\nđ) Thông tin thay đổi (nếu có) do chuyển chương trình đào tạo, chuyển ngành\nhọc, chuyển trường, nghỉ học có thời hạn, thôi học, tốt nghiệp;\ne) Địa chỉ nơi cư trú;\ng) Tình trạng đóng học phí;\nh) Thông tin về việc tham gia bảo hiểm y tế;\ni) Thông tin kết quả khám sức khỏe cho sinh viên do Đại học tổ chức;\nk) Các học bổng đã được nhận.\n'],
    ['Quy định, quy chế về học tập thì sinh viên xem ở trang nào?', 'Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội\nChương I NHỮNG QUY ĐỊNH CHUNG\nĐiều 3. Vị trí của sinh viên trong Đại học Bách khoa Hà Nội\nSinh viên là trung tâm các hoạt động giáo dục, đào tạo, nghiên cứu, khoa học\ncông nghệ, đổi mới sáng tạo và khởi nghiệp tại Đại học Bách khoa Hà Nội, được hỗ\ntrợ và tạo điều kiện tốt nhất về vật chất, tinh thần để phát triển toàn diện cả về đạo đức,\ntri thức, phẩm chất, năng lực, tầm nhìn, kỹ năng và sức khỏe để phục vụ xã hội và đất\nnước.\nĐiều 4. Từ viết tắt\n1. Đại học: Đại học Bách khoa Hà Nội;\n2. Đơn vị quản ngành: Trường/Khoa quản ngành;\n3. NCKH: nghiên cứu khoa học;\n4. QLLSV: quản lý lớp sinh viên.\nChương II TRÁCH NHIỆM VÀ QUYỀN LỢI CỦA SINH VIÊN\nĐiều 5. Trách nhiệm của sinh viên\n1. Chấp hành nghiêm chủ trương, đường lối của Đảng, chính sách pháp luật của\nNhà nước và các quy định của Đại học.\n2. Học tập, rèn luyện theo chương trình, kế hoạch của Đại học; chủ động, tích\ncực tự học tập, NCKH và rèn luyện đạo đức, lối sống.\n'],
    ['Quy định, quy chế về học tập thì sinh viên xem ở trang nào?', 'Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội\nChương IV ĐÁNH GIÁ KẾT QUẢ RÈN LUYỆN SINH VIÊN\nĐiều 22. Nội dung, tiêu chí và thời gian đánh giá\n1. Nội dung đánh giá gồm:\na) Ý thức tham gia học tập;\nb) Ý thức chấp hành nội quy, quy chế, quy định của Đại học;\nc) Ý thức tham gia các hoạt động chính trị, xã hội, văn hoá, văn nghệ, thể thao,\nphòng chống tội phạm và các tệ nạn xã hội;\nd) Ý thức công dân trong quan hệ với cộng đồng;\nđ) Ý thức và kết quả tham gia công tác cán bộ lớp, các đoàn thể, tổ chức khác\ntrong Đại học hoặc các thành tích đặc biệt trong học tập và rèn luyện.\n2. Kết quả rèn luyện của sinh viên được đánh giá theo học kỳ, năm học và khóa học.\n3. Tiêu chí và thang, khung điểm đánh giá: hằng năm Giám đốc đại học ban hành\nquy định chi tiết về tiêu chí và thang, khung điểm cho từng nội dung đánh giá.\nĐiều 23. Quy trình đánh giá\n1. Các đơn vị liên quan được phân cấp tổ chức hoạt động công bố công khai kế\nhoạch tổ chức các hoạt động cho sinh viên trên cổng thông tin sinh viên hoặc các kênh\nthông tin chính thống khác của Đại học để sinh viên đăng ký tham gia.\n2. Sinh viên đăng ký tham gia hoạt động theo nguyện vọng cá nhân và cung cấp\nminh chứng tham gia hoạt động lên hệ thống phần mềm đánh giá điểm rèn luyện sinh\nviên; cán bộ phụ trách hoạt động xác nhận minh chứng của sinh viên.\n3. Sinh viên thực hiện tự đánh giá kết quả rèn luyện theo kế hoạch của Đại học.\n4. Cán bộ QLLSV căn cứ vào các minh chứng kết quả tham gia hoạt động của\nsinh viên trên hệ thống và kết quả tự đánh giá của sinh viên để đánh giá điểm rèn luyện\ncho sinh viên theo quy định.\n'],
    ['Quy định, quy chế về học tập thì sinh viên xem ở trang nào?', 'Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội\nChương II TRÁCH NHIỆM VÀ QUYỀN LỢI CỦA SINH VIÊN\nĐiều 5. Trách nhiệm của sinh viên\n3. Thực hiện quy tắc văn hóa giao tiếp trong nhà trường và môi trường mạng.\n4. Thực hiện đầy đủ việc khám sức khỏe đầu khóa, khám sức khỏe định kỳ trong\nthời gian học tập theo quy định.\n5. Đóng học phí, bảo hiểm y tế và các khoản phí khác đầy đủ, đúng quy định của\nĐại học.\n6. Khai báo và cập nhật đầy đủ, đúng thời hạn các thông tin cá nhân trên cổng\nthông tin điện tử dành cho sinh viên trong quá trình học tập tại Đại học.\n7. Xây dựng, gìn giữ, bảo vệ và phát huy truyền thống, danh tiếng của Đại học.\n8. Tôn trọng nhà giáo, cán bộ quản lý, viên chức, người lao động và các sinh viên\nkhác của Đại học.\n9. Đoàn kết, giúp đỡ lẫn nhau trong quá trình học tập, rèn luyện; thực hiện nếp\nsống văn hóa học đường.\n10. Tham gia đầy đủ các hoạt động xã hội, tình nguyện vì cộng đồng phù hợp với\nkhả năng theo yêu cầu của Đại học hoặc đơn vị quản ngành.\n'],
    ['Quy định, quy chế về học tập thì sinh viên xem ở trang nào?', 'Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội\nChương III NỘI DUNG CÔNG TÁC SINH VIÊN\nĐiều 8. Quản lý thông tin sinh viên\n7. Quản lý thông tin sinh viên nội, ngoại trú theo quy định hiện hành của Bộ Giáo\ndục và Đào tạo và quy định của Đại học.\n8. Thực hiện việc chia sẻ quyền khai thác dữ liệu theo đúng quy định hiện hành\ncủa pháp luật và của Đại học.\nChương III NỘI DUNG CÔNG TÁC SINH VIÊN\nĐiều 9. Tổ chức lớp sinh viên\nLớp sinh viên được lập và gọi tên theo chương trình đào tạo  và khóa học. Đại\ndiện cho lớp sinh viên là ban cán sự lớp gồm lớp trưởng và tối đa 2 lớp phó. Mỗi lớp\nsinh viên được quản lý bởi cán bộ QLLSV.\nChương III NỘI DUNG CÔNG TÁC SINH VIÊN\nĐiều 10. Tổ chức các hoạt động giáo dục, tuyên truyền\n1. Giáo dục chính trị tư tưởng\na) Giáo dục, tuyên truyền để sinh viên nắm vững và thực hiện đúng chủ trương,\nđường lối của Đảng, chính sách pháp luật của Nhà nước;\nb) Phối hợp với Đoàn Thanh niên Cộng sản Hồ Chí Minh, Hội Sinh viên và các\ntổ chức chính trị - xã hội khác có liên quan trong các hoạt động rèn luyện của sinh\nviên; tạo môi trường thuận lợi để sinh viên rèn luyện phấn đấu.\n'],
]
scores = model.predict(pairs)
print(scores.shape)
# (5,)

# Or rank different texts based on similarity to a single text
ranks = model.rank(
    'Quy định, quy chế về học tập thì sinh viên xem ở trang nào?',
    [
        'Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội\nChương III NỘI DUNG CÔNG TÁC SINH VIÊN\nĐiều 8. Quản lý thông tin sinh viên\n2. Hồ sơ quản lý quá trình học tập, rèn luyện của sinh viên gồm:\na) Kết quả học tập (điểm quá trình, điểm kết thúc học phần, kết quả thi hoặc bảo\nvệ đồ án tốt nghiệp/khoá luận tốt nghiệp) và kết quả rèn luyện (điểm rèn luyện theo\nhọc kỳ, năm học, khoá học);\nb) Kết quả các hoạt động xã hội đã tham gia trong từng học kỳ, năm học;\nc) Hình thức khen thưởng (nếu có) mà sinh viên đạt được trong học tập, nghiên\ncứu khoa học, hoạt động phong trào, đoàn thể;\nd) Hình thức kỷ luật (nếu có);\nđ) Thông tin thay đổi (nếu có) do chuyển chương trình đào tạo, chuyển ngành\nhọc, chuyển trường, nghỉ học có thời hạn, thôi học, tốt nghiệp;\ne) Địa chỉ nơi cư trú;\ng) Tình trạng đóng học phí;\nh) Thông tin về việc tham gia bảo hiểm y tế;\ni) Thông tin kết quả khám sức khỏe cho sinh viên do Đại học tổ chức;\nk) Các học bổng đã được nhận.\n',
        'Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội\nChương I NHỮNG QUY ĐỊNH CHUNG\nĐiều 3. Vị trí của sinh viên trong Đại học Bách khoa Hà Nội\nSinh viên là trung tâm các hoạt động giáo dục, đào tạo, nghiên cứu, khoa học\ncông nghệ, đổi mới sáng tạo và khởi nghiệp tại Đại học Bách khoa Hà Nội, được hỗ\ntrợ và tạo điều kiện tốt nhất về vật chất, tinh thần để phát triển toàn diện cả về đạo đức,\ntri thức, phẩm chất, năng lực, tầm nhìn, kỹ năng và sức khỏe để phục vụ xã hội và đất\nnước.\nĐiều 4. Từ viết tắt\n1. Đại học: Đại học Bách khoa Hà Nội;\n2. Đơn vị quản ngành: Trường/Khoa quản ngành;\n3. NCKH: nghiên cứu khoa học;\n4. QLLSV: quản lý lớp sinh viên.\nChương II TRÁCH NHIỆM VÀ QUYỀN LỢI CỦA SINH VIÊN\nĐiều 5. Trách nhiệm của sinh viên\n1. Chấp hành nghiêm chủ trương, đường lối của Đảng, chính sách pháp luật của\nNhà nước và các quy định của Đại học.\n2. Học tập, rèn luyện theo chương trình, kế hoạch của Đại học; chủ động, tích\ncực tự học tập, NCKH và rèn luyện đạo đức, lối sống.\n',
        'Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội\nChương IV ĐÁNH GIÁ KẾT QUẢ RÈN LUYỆN SINH VIÊN\nĐiều 22. Nội dung, tiêu chí và thời gian đánh giá\n1. Nội dung đánh giá gồm:\na) Ý thức tham gia học tập;\nb) Ý thức chấp hành nội quy, quy chế, quy định của Đại học;\nc) Ý thức tham gia các hoạt động chính trị, xã hội, văn hoá, văn nghệ, thể thao,\nphòng chống tội phạm và các tệ nạn xã hội;\nd) Ý thức công dân trong quan hệ với cộng đồng;\nđ) Ý thức và kết quả tham gia công tác cán bộ lớp, các đoàn thể, tổ chức khác\ntrong Đại học hoặc các thành tích đặc biệt trong học tập và rèn luyện.\n2. Kết quả rèn luyện của sinh viên được đánh giá theo học kỳ, năm học và khóa học.\n3. Tiêu chí và thang, khung điểm đánh giá: hằng năm Giám đốc đại học ban hành\nquy định chi tiết về tiêu chí và thang, khung điểm cho từng nội dung đánh giá.\nĐiều 23. Quy trình đánh giá\n1. Các đơn vị liên quan được phân cấp tổ chức hoạt động công bố công khai kế\nhoạch tổ chức các hoạt động cho sinh viên trên cổng thông tin sinh viên hoặc các kênh\nthông tin chính thống khác của Đại học để sinh viên đăng ký tham gia.\n2. Sinh viên đăng ký tham gia hoạt động theo nguyện vọng cá nhân và cung cấp\nminh chứng tham gia hoạt động lên hệ thống phần mềm đánh giá điểm rèn luyện sinh\nviên; cán bộ phụ trách hoạt động xác nhận minh chứng của sinh viên.\n3. Sinh viên thực hiện tự đánh giá kết quả rèn luyện theo kế hoạch của Đại học.\n4. Cán bộ QLLSV căn cứ vào các minh chứng kết quả tham gia hoạt động của\nsinh viên trên hệ thống và kết quả tự đánh giá của sinh viên để đánh giá điểm rèn luyện\ncho sinh viên theo quy định.\n',
        'Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội\nChương II TRÁCH NHIỆM VÀ QUYỀN LỢI CỦA SINH VIÊN\nĐiều 5. Trách nhiệm của sinh viên\n3. Thực hiện quy tắc văn hóa giao tiếp trong nhà trường và môi trường mạng.\n4. Thực hiện đầy đủ việc khám sức khỏe đầu khóa, khám sức khỏe định kỳ trong\nthời gian học tập theo quy định.\n5. Đóng học phí, bảo hiểm y tế và các khoản phí khác đầy đủ, đúng quy định của\nĐại học.\n6. Khai báo và cập nhật đầy đủ, đúng thời hạn các thông tin cá nhân trên cổng\nthông tin điện tử dành cho sinh viên trong quá trình học tập tại Đại học.\n7. Xây dựng, gìn giữ, bảo vệ và phát huy truyền thống, danh tiếng của Đại học.\n8. Tôn trọng nhà giáo, cán bộ quản lý, viên chức, người lao động và các sinh viên\nkhác của Đại học.\n9. Đoàn kết, giúp đỡ lẫn nhau trong quá trình học tập, rèn luyện; thực hiện nếp\nsống văn hóa học đường.\n10. Tham gia đầy đủ các hoạt động xã hội, tình nguyện vì cộng đồng phù hợp với\nkhả năng theo yêu cầu của Đại học hoặc đơn vị quản ngành.\n',
        'Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội\nChương III NỘI DUNG CÔNG TÁC SINH VIÊN\nĐiều 8. Quản lý thông tin sinh viên\n7. Quản lý thông tin sinh viên nội, ngoại trú theo quy định hiện hành của Bộ Giáo\ndục và Đào tạo và quy định của Đại học.\n8. Thực hiện việc chia sẻ quyền khai thác dữ liệu theo đúng quy định hiện hành\ncủa pháp luật và của Đại học.\nChương III NỘI DUNG CÔNG TÁC SINH VIÊN\nĐiều 9. Tổ chức lớp sinh viên\nLớp sinh viên được lập và gọi tên theo chương trình đào tạo  và khóa học. Đại\ndiện cho lớp sinh viên là ban cán sự lớp gồm lớp trưởng và tối đa 2 lớp phó. Mỗi lớp\nsinh viên được quản lý bởi cán bộ QLLSV.\nChương III NỘI DUNG CÔNG TÁC SINH VIÊN\nĐiều 10. Tổ chức các hoạt động giáo dục, tuyên truyền\n1. Giáo dục chính trị tư tưởng\na) Giáo dục, tuyên truyền để sinh viên nắm vững và thực hiện đúng chủ trương,\nđường lối của Đảng, chính sách pháp luật của Nhà nước;\nb) Phối hợp với Đoàn Thanh niên Cộng sản Hồ Chí Minh, Hội Sinh viên và các\ntổ chức chính trị - xã hội khác có liên quan trong các hoạt động rèn luyện của sinh\nviên; tạo môi trường thuận lợi để sinh viên rèn luyện phấn đấu.\n',
    ]
)
# [{'corpus_id': ..., 'score': ...}, {'corpus_id': ..., 'score': ...}, ...]

<!-- ### Direct Usage (Transformers) <details><summary>Click to see the direct usage in Transformers</summary> </details> --> <!-- ### Downstream Usage (Sentence Transformers) You can finetune this model on your own dataset. <details><summary>Click to expand</summary> </details> --> <!-- ### Out-of-Scope Use *List how the model may foreseeably be misused and address what users ought not to do with the model.* -->

Evaluation

Metrics

Cross Encoder Reranking

• Evaluated with <code>CrossEncoderRerankingEvaluator</code> with these parameters:

  {
      "at_k": 10
  }
  

<!-- ## Bias, Risks and Limitations *What are the known or foreseeable issues stemming from this model? You could also flag here known failure cases or weaknesses of the model.* --> <!-- ### Recommendations *What are recommendations with respect to the foreseeable issues? For example, filtering explicit content.* -->

Training Details

Training Dataset

Unnamed Dataset

• Size: 12,260 training samples
• Columns: <code>query</code>, <code>response</code>, and <code>label</code>
• Approximate statistics based on the first 1000 samples:

  	query	response	label
  type	string	string	int
  details	<ul><li>min: 36 characters</li><li>mean: 63.24 characters</li><li>max: 120 characters</li></ul>	<ul><li>min: 691 characters</li><li>mean: 1312.3 characters</li><li>max: 2529 characters</li></ul>	<ul><li>0: ~76.00%</li><li>1: ~24.00%</li></ul>

• Samples:

  query	response	label
  <code>Tại trường có bao nhiêu loại học bổng KKHT(khuyến khích học tập)?</code>	<code>Quy định xét cấp học bổng khuyến khích học tập tại Đại học Bách khoa Hà Nội<br>Điều 2. Các quy định chung<br>2. Học bổng KKHT nhằm khuyến khích sinh viên nâng cao thành tích học tập và<br>rèn luyện tại ĐHBK Hà Nội.<br>3. Quỹ học bổng KKHT hình thành từ nguồn học phí và bằng 8% (tám phần<br>trăm) học phí của học kỳ lấy điểm xét cấp học bổng.<br>4. Học bổng KKHT có 3 mức:<br>a) Học bổng loại khá (loại C): Bằng tổng học phí của tất cả các học phần tính<br>điểm trung bình học kỳ (GPA).<br>b) Học bổng loại giỏi (loại B): Bằng 1,2 lần mức học bổng loại khá.<br>c) Học bổng loại xuất sắc (loại A): Bằng 1,5 lần mức học bổng loại khá.<br>Điều 3. Tiêu chuẩn xét cấp học bổng<br>1. Học bổng loại C: GPA ≥ 2,5 và điểm rèn luyện học kỳ ≥ 65 điểm.<br>2. Học bổng loại B: GPA ≥ 3,2 và điểm rèn luyện học kỳ ≥ 80 điểm.<br>3. Học bổng loại A: GPA ≥ 3,6 và điểm rèn luyện học kỳ ≥ 90 điểm.<br>Điều 4. Nguyên tắc xét cấp học bổng<br>1. Sử dụng kết quả học tập và rèn luyện của học kỳ liền trước để xét cấp học<br>bổng cho học kỳ sau.<br>2. Học bổng được xét theo ...</code>	<code>1</code>
  <code>Tại trường có bao nhiêu loại học bổng KKHT(khuyến khích học tập)?</code>	<code>Quy định xét cấp học bổng khuyến khích học tập tại Đại học Bách khoa Hà Nội<br>Điều 1. Phạm vi điều chỉnh và đối tượng áp dụng<br>1. Văn bản này quy định về nguyên tắc, tiêu chuẩn xét duyệt và cấp học bổng cho<br>sinh viên đại học hình thức đào tạo chính quy tại Đại học Bách khoa Hà Nội (sau đây<br>viết tắt là ĐHBK Hà N ội), căn cứ các quy định liên quan tại Nghị định số<br>84/2020/NĐ-CP ngày 17/7/2020 của Chính phủ và Quy chế Quản lý tài chính của Đại<br>học Bách khoa Hà Nội được ban hành theo Nghị quyết số 20/NQ-ĐHBK ngày<br>16/3/2023 của Hội đồng Đại học, Đại học Bách khoa Hà Nội.<br>2. Quy định này áp dụng đối với sinh viên đại học hình thức đào tạo chính quy<br>văn bằng thứ nhất của ĐHBK Hà Nội.<br>Điều 2. Các quy định chung<br>1. Học bổng khuyến khích học tập (KKHT) cấp cho các sinh viên được lựa chọn<br>bởi Hội đồng xét cấp học bổng ĐHBK Hà Nội theo từng học kỳ chính của năm học ,<br>căn cứ vào thành tích học tập và rèn luyện của sinh viên trong học kỳ chính liền trước<br>đó.<br></code>	<code>1</code>
  <code>Tại trường có bao nhiêu loại học bổng KKHT(khuyến khích học tập)?</code>	<code>Quy định xét cấp học bổng khuyến khích học tập tại Đại học Bách khoa Hà Nội<br>Điều 4. Nguyên tắc xét cấp học bổng<br>3. Không xét cấp học bổng đối với sinh viên thuộc một trong các trường hợp sau:<br>a) Chịu hình thức kỷ luật từ mức khiển trách trở lên tại thời điểm xét học bổng;<br>b) Đăng ký học ít hơn 1 5 tín chỉ (kể cả các học phần không tính điểm GPA) tại<br>học kỳ lấy điểm xét, cấp học bổng, ngoại trừ học kỳ 1 năm học thứ nhất;<br>c) Đăng ký học ít hơn 6 tín chỉ (kể cả các học phần không tính điểm GPA) tại<br>học kỳ cấp học bổng;<br>d) Học quá thời gian theo kế hoạch học tập chuẩn của chương trình đào tạo;<br>đ) Học chương trình đào tạo do trường đối tác nước ngoài cấp một văn bằng tốt<br>nghiệp duy nhất;<br>Điều 5. Thời gian công bố kết quả xét duyệt và cấp học bổng<br>1. Danh sách sinh viên được cấp học bổng và mức đ iểm chuẩn để đạt học bổng<br>loại A, B, C theo khóa, ngành đào tạo tương ứng sẽ được công bố trên cổng thông tin<br>sinh viên: ctt.hust.edu.vn, chậm nhất vào tuần học thứ 10 của học kỳ cấp học bổng.<br></code>	<code>0</code>

• Loss: <code>BinaryCrossEntropyLoss</code> with these parameters:

  {
      "activation_fn": "torch.nn.modules.linear.Identity",
      "pos_weight": null
  }
  

Evaluation Dataset

Unnamed Dataset

• Size: 1,280 evaluation samples
• Columns: <code>query</code>, <code>response</code>, and <code>label</code>
• Approximate statistics based on the first 1000 samples:

  	query	response	label
  type	string	string	int
  details	<ul><li>min: 30 characters</li><li>mean: 71.72 characters</li><li>max: 172 characters</li></ul>	<ul><li>min: 691 characters</li><li>mean: 1302.88 characters</li><li>max: 2529 characters</li></ul>	<ul><li>0: ~68.30%</li><li>1: ~31.70%</li></ul>

• Samples:

  query	response	label
  <code>Quy định, quy chế về học tập thì sinh viên xem ở trang nào?</code>	<code>Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội<br>Chương III NỘI DUNG CÔNG TÁC SINH VIÊN<br>Điều 8. Quản lý thông tin sinh viên<br>2. Hồ sơ quản lý quá trình học tập, rèn luyện của sinh viên gồm:<br>a) Kết quả học tập (điểm quá trình, điểm kết thúc học phần, kết quả thi hoặc bảo<br>vệ đồ án tốt nghiệp/khoá luận tốt nghiệp) và kết quả rèn luyện (điểm rèn luyện theo<br>học kỳ, năm học, khoá học);<br>b) Kết quả các hoạt động xã hội đã tham gia trong từng học kỳ, năm học;<br>c) Hình thức khen thưởng (nếu có) mà sinh viên đạt được trong học tập, nghiên<br>cứu khoa học, hoạt động phong trào, đoàn thể;<br>d) Hình thức kỷ luật (nếu có);<br>đ) Thông tin thay đổi (nếu có) do chuyển chương trình đào tạo, chuyển ngành<br>học, chuyển trường, nghỉ học có thời hạn, thôi học, tốt nghiệp;<br>e) Địa chỉ nơi cư trú;<br>g) Tình trạng đóng học phí;<br>h) Thông tin về việc tham gia bảo hiểm y tế;<br>i) Thông tin kết quả khám sức khỏe cho sinh viên do Đại học tổ chức;<br>k) Các học bổng đã được nhận.<br></code>	<code>1</code>
  <code>Quy định, quy chế về học tập thì sinh viên xem ở trang nào?</code>	<code>Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội<br>Chương I NHỮNG QUY ĐỊNH CHUNG<br>Điều 3. Vị trí của sinh viên trong Đại học Bách khoa Hà Nội<br>Sinh viên là trung tâm các hoạt động giáo dục, đào tạo, nghiên cứu, khoa học<br>công nghệ, đổi mới sáng tạo và khởi nghiệp tại Đại học Bách khoa Hà Nội, được hỗ<br>trợ và tạo điều kiện tốt nhất về vật chất, tinh thần để phát triển toàn diện cả về đạo đức,<br>tri thức, phẩm chất, năng lực, tầm nhìn, kỹ năng và sức khỏe để phục vụ xã hội và đất<br>nước.<br>Điều 4. Từ viết tắt<br>1. Đại học: Đại học Bách khoa Hà Nội;<br>2. Đơn vị quản ngành: Trường/Khoa quản ngành;<br>3. NCKH: nghiên cứu khoa học;<br>4. QLLSV: quản lý lớp sinh viên.<br>Chương II TRÁCH NHIỆM VÀ QUYỀN LỢI CỦA SINH VIÊN<br>Điều 5. Trách nhiệm của sinh viên<br>1. Chấp hành nghiêm chủ trương, đường lối của Đảng, chính sách pháp luật của<br>Nhà nước và các quy định của Đại học.<br>2. Học tập, rèn luyện theo chương trình, kế hoạch của Đại học; chủ động, tích<br>cực tự học tập, NCKH và rèn luyện đạo đức, lối sống.<br></code>	<code>1</code>
  <code>Quy định, quy chế về học tập thì sinh viên xem ở trang nào?</code>	<code>Quy chế Công tác sinh viên Đại học Bách Khoa Hà Nội<br>Chương IV ĐÁNH GIÁ KẾT QUẢ RÈN LUYỆN SINH VIÊN<br>Điều 22. Nội dung, tiêu chí và thời gian đánh giá<br>1. Nội dung đánh giá gồm:<br>a) Ý thức tham gia học tập;<br>b) Ý thức chấp hành nội quy, quy chế, quy định của Đại học;<br>c) Ý thức tham gia các hoạt động chính trị, xã hội, văn hoá, văn nghệ, thể thao,<br>phòng chống tội phạm và các tệ nạn xã hội;<br>d) Ý thức công dân trong quan hệ với cộng đồng;<br>đ) Ý thức và kết quả tham gia công tác cán bộ lớp, các đoàn thể, tổ chức khác<br>trong Đại học hoặc các thành tích đặc biệt trong học tập và rèn luyện.<br>2. Kết quả rèn luyện của sinh viên được đánh giá theo học kỳ, năm học và khóa học.<br>3. Tiêu chí và thang, khung điểm đánh giá: hằng năm Giám đốc đại học ban hành<br>quy định chi tiết về tiêu chí và thang, khung điểm cho từng nội dung đánh giá.<br>Điều 23. Quy trình đánh giá<br>1. Các đơn vị liên quan được phân cấp tổ chức hoạt động công bố công khai kế<br>hoạch tổ chức các hoạt động cho sinh viên trên cổng thông tin sinh viên...</code>	<code>1</code>

• Loss: <code>BinaryCrossEntropyLoss</code> with these parameters:

  {
      "activation_fn": "torch.nn.modules.linear.Identity",
      "pos_weight": null
  }
  

Training Hyperparameters

Non-Default Hyperparameters

• eval_strategy: steps
• per_device_train_batch_size: 16
• per_device_eval_batch_size: 16
• learning_rate: 2e-05
• num_train_epochs: 20
• warmup_ratio: 0.1
• seed: 12
• bf16: True

All Hyperparameters

<details><summary>Click to expand</summary>

• overwrite_output_dir: False
• do_predict: False
• eval_strategy: steps
• prediction_loss_only: True
• per_device_train_batch_size: 16
• per_device_eval_batch_size: 16
• per_gpu_train_batch_size: None
• per_gpu_eval_batch_size: None
• gradient_accumulation_steps: 1
• eval_accumulation_steps: None
• torch_empty_cache_steps: None
• learning_rate: 2e-05
• weight_decay: 0.0
• adam_beta1: 0.9
• adam_beta2: 0.999
• adam_epsilon: 1e-08
• max_grad_norm: 1.0
• num_train_epochs: 20
• max_steps: -1
• lr_scheduler_type: linear
• lr_scheduler_kwargs: {}
• warmup_ratio: 0.1
• warmup_steps: 0
• log_level: passive
• log_level_replica: warning
• log_on_each_node: True
• logging_nan_inf_filter: True
• save_safetensors: True
• save_on_each_node: False
• save_only_model: False
• restore_callback_states_from_checkpoint: False
• no_cuda: False
• use_cpu: False
• use_mps_device: False
• seed: 12
• data_seed: None
• jit_mode_eval: False
• bf16: True
• fp16: False
• fp16_opt_level: O1
• half_precision_backend: auto
• bf16_full_eval: False
• fp16_full_eval: False
• tf32: None
• local_rank: 0
• ddp_backend: None
• tpu_num_cores: None
• tpu_metrics_debug: False
• debug: []
• dataloader_drop_last: False
• dataloader_num_workers: 0
• dataloader_prefetch_factor: None
• past_index: -1
• disable_tqdm: False
• remove_unused_columns: True
• label_names: None
• load_best_model_at_end: False
• ignore_data_skip: False
• fsdp: []
• fsdp_min_num_params: 0
• fsdp_config: {'min_num_params': 0, 'xla': False, 'xla_fsdp_v2': False, 'xla_fsdp_grad_ckpt': False}
• fsdp_transformer_layer_cls_to_wrap: None
• accelerator_config: {'split_batches': False, 'dispatch_batches': None, 'even_batches': True, 'use_seedable_sampler': True, 'non_blocking': False, 'gradient_accumulation_kwargs': None}
• parallelism_config: None
• deepspeed: None
• label_smoothing_factor: 0.0
• optim: adamw_torch_fused
• optim_args: None
• adafactor: False
• group_by_length: False
• length_column_name: length
• project: huggingface
• trackio_space_id: trackio
• ddp_find_unused_parameters: None
• ddp_bucket_cap_mb: None
• ddp_broadcast_buffers: False
• dataloader_pin_memory: True
• dataloader_persistent_workers: False
• skip_memory_metrics: True
• use_legacy_prediction_loop: False
• push_to_hub: False
• resume_from_checkpoint: None
• hub_model_id: None
• hub_strategy: every_save
• hub_private_repo: None
• hub_always_push: False
• hub_revision: None
• gradient_checkpointing: False
• gradient_checkpointing_kwargs: None
• include_inputs_for_metrics: False
• include_for_metrics: []
• eval_do_concat_batches: True
• fp16_backend: auto
• push_to_hub_model_id: None
• push_to_hub_organization: None
• mp_parameters:
• auto_find_batch_size: False
• full_determinism: False
• torchdynamo: None
• ray_scope: last
• ddp_timeout: 1800
• torch_compile: False
• torch_compile_backend: None
• torch_compile_mode: None
• include_tokens_per_second: False
• include_num_input_tokens_seen: no
• neftune_noise_alpha: None
• optim_target_modules: None
• batch_eval_metrics: False
• eval_on_start: False
• use_liger_kernel: False
• liger_kernel_config: None
• eval_use_gather_object: False
• average_tokens_across_devices: True
• prompts: None
• batch_sampler: batch_sampler
• multi_dataset_batch_sampler: proportional
• router_mapping: {}
• learning_rate_mapping: {}

</details>

Training Logs

<details><summary>Click to expand</summary> </details>

Framework Versions

• Python: 3.12.12
• Sentence Transformers: 5.2.0
• Transformers: 4.57.3
• PyTorch: 2.9.0+cu126
• Accelerate: 1.12.0
• Datasets: 4.0.0
• Tokenizers: 0.22.1

Citation

BibTeX

Sentence Transformers

@inproceedings{reimers-2019-sentence-bert,
    title = "Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks",
    author = "Reimers, Nils and Gurevych, Iryna",
    booktitle = "Proceedings of the 2019 Conference on Empirical Methods in Natural Language Processing",
    month = "11",
    year = "2019",
    publisher = "Association for Computational Linguistics",
    url = "https://arxiv.org/abs/1908.10084",
}

<!-- ## Glossary *Clearly define terms in order to be accessible across audiences.* --> <!-- ## Model Card Authors *Lists the people who create the model card, providing recognition and accountability for the detailed work that goes into its construction.* --> <!-- ## Model Card Contact *Provides a way for people who have updates to the Model Card, suggestions, or questions, to contact the Model Card authors.* -->