Downloads · 30 days
20
10% of all-time downloads
derhan/indobert-klasifikasi-alasan-tender
indobert-klasifikasi-alasan-tender is a text classification model from derhan. Use it when you need a label for a piece of text. It is set up for transformers. The card lists the license as mit.
Model ini adalah fine-tuned dari indobenchmark/indobert-base-p1 yang dilatih untuk melakukan klasifikasi teks pada alasan kegagalan tender pengadaan barang/jasa di Indonesia (SPSE/LPSE), khususnya Tender Pekerjaan Kon…
Downloads · 30 days
20
10% of all-time downloads
All-time downloads
202
Public
Parameters
124M
1.5 GB on disk
Likes
0
Public
Click a slice to open those files.
.safetensors498 MB · 100%
From the Hugging Face model README
Model ini adalah fine-tuned dari indobenchmark/indobert-base-p1 yang dilatih untuk melakukan klasifikasi teks pada alasan kegagalan tender pengadaan barang/jasa di Indonesia (SPSE/LPSE), khususnya Tender Pekerjaan Konstruksi dengan metode: Tender/Lelang Umum - Pascakualifikasi Satu File - Harga Terendah Sistem Gugur.
Model ini mengambil teks alasan mentah (misalnya: "SBU tidak berlaku") dan mengklasifikasikannya ke dalam salah satu dari 46 label evaluasi yang telah ditentukan (misalnya: X.2.1.5).
Model ini dilatih sebagai bagian dari penelitian tesis untuk mengotomatisasi analisis alasan kegagalan tender. Data latih dibuat dengan memberi label pada ~370.000 alasan unik menggunakan model gemini-flash-lite-latest dengan skema VARIABLE_MAP yang komprehensif.
Model indobert-base-p1 kemudian di-fine-tune pada data yang telah dilabeli ini selama 3 epoch, mencapai akurasi 91.1% pada set validasi.
bert-base-casedid)MITindobenchmark/indobert-base-p1https://huggingface.co/derhan/indobert-klasifikasi-alasan-tenderModel ini ditujukan untuk penggunaan langsung dalam pipeline text-classification untuk memprediksi kategori kegagalan tender berdasarkan teks alasannya.
# Instal pustaka
# !pip install transformers torch
from transformers import pipeline
import torch
repo_id = "derhan/indobert-klasifikasi-alasan-tender"
# Cek ketersediaan GPU
device = 0 if torch.cuda.is_available() else -1
# Muat pipeline
classifier = pipeline(
"text-classification",
model=repo_id,
device=device
)
# Contoh prediksi
contoh_alasan = [
"SBU yang dilampirkan tidak sesuai kualifikasi yang diminta",
"Peserta tidak menghadiri undangan pembuktian kualifikasi",
"terdapat kesamaan dokumen penawaran dengan cv maju bersama",
"NAMA PERSONIL mengakui tidak ada hubungan kerjasama dengan CV. BADAN USAHA"
]
hasil = classifier(contoh_alasan)
for alasan, pred in zip(contoh_alasan, hasil):
print(f"\nAlasan:\n '{alasan}'")
print(f"Prediksi Label:\n {pred['label']} (Skor: {pred['score']:.4f})")
# Output yang Diharapkan:
# Alasan:
# 'SBU yang dilampirkan tidak sesuai kualifikasi yang diminta'
# Prediksi Label:
# X.2.1.5 (Skor: 0.9XXX)
#
# Alasan:
# 'Peserta tidak menghadiri undangan pembuktian kualifikasi'
# Prediksi Label:
# X.2.3.1 (Skor: 0.9XXX)
#
# Alasan:
# 'terdapat kesamaan dokumen penawaran dengan cv maju bersama'
# Prediksi Label:
# X.2.1.6 (Skor: 0.9XXX)
#
# Alasan:
# 'NAMA PERSONIL mengakui tidak ada hubungan kerjasama dengan CV. BADAN USAHA'
# Prediksi Label:
# X.3.2.2 (Skor: 0.9XXX)
Model ini sangat terspesialisasi pada domain pengadaan (LPSE) Indonesia. Model ini tidak boleh digunakan untuk:
Performa model ini sangat bergantung pada kualitas label yang dihasilkan oleh model gemini-flash-lite-latest. Setiap bias atau kesalahan sistematis dari proses pelabelan LLM akan dipelajari dan diperkuat oleh model fine-tuned ini. Data pelatihan (370 ribu alasan unik) mungkin masih mengandung noise atau label 'UNCLASSIFIED' yang gagal diproses ulang, yang dapat memengaruhi akurasi pada kasus-kasus edge case tertentu.
Data pelatihan terdiri dari ~370.000 alasan unik kegagalan tender yang diambil dari data SPSE/LPSE. Teks alasan ini kemudian dilabeli menggunakan gemini-flash-lite-latest dengan skema Pydantic Union berdasarkan 46 label VARIABLE_MAP.
Data yang bersih (tidak termasuk label 'UNCLASSIFIED' atau 'ERROR') kemudian dibagi menjadi:
VARIABLE_MAP)X.1.1.1: Masa Berlaku Penawaran: Penawaran gugur karena masa berlakunya lebih singkat dari yang disyaratkan LDP.X.1.1.2: Surat Penawaran: Gugur karena surat penawaran tidak sesuai format, tidak ditandatangani, atau bermasalah (misal: tanggal salah).X.1.1.3: Jaminan Penawaran: Gugur karena Jaminan Penawaran tidak ada, nilai kurang, masa berlaku kurang, atau diterbitkan oleh instansi yang tidak sah.X.1.1.4: Perjanjian KSO (Kerja Sama Operasi): Gugur karena perjanjian KSO tidak ada, tidak sah, atau pembagian porsi tidak jelas.X.1.1.5: Mengundurkan Diri / Keikutsertaan Ganda: Peserta secara resmi mengundurkan diri dari proses tender atau personel/peralatan dipakai di paket lain.X.1.2.1: Kelengkapan Dokumen Penawaran Teknis: Penawaran gugur karena dokumen teknis (metodologi, RAB, jadwal, dll.) tidak diunggah atau tidak lengkap.X.1.2.2: Kelengkapan Dokumen Penawaran Harga: Penawaran gugur karena RAB, BQ, atau dokumen harga lainnya tidak diunggah atau tidak lengkap.X.1.2.3: Dokumen Rusak/Corrupt/Akses: File tidak bisa dibuka, gagal dekripsi, atau gagal diakses oleh Pokja.X.1.2.4: Dokumentasi/Bukti Fisik: Foto/dokumentasi tidak memenuhi syarat teknis, tidak ada geo-tagging, atau status verifikasi data tidak sah.X.2.1.1: Perpajakan (Status Wajib Pajak): Gugur karena status pajak (SPT Tahunan, CSWP) tidak valid, tidak dilaporkan, atau tidak memenuhi syarat.X.2.1.2: Legalitas (Akta, NIB, SIUMK): Gugur karena legalitas perusahaan tidak sah atau tidak sesuai, NIB/Sertifikat Standar BELUM TERVERIFIKASI, atau izin tidak sesuai.X.2.1.3: Pakta Integritas: Gugur karena Pakta Integritas tidak diunggah, tidak ditandatangani, atau tidak sesuai format.X.2.1.4: Surat Pernyataan Lainnya: Gugur karena tidak diunggah, tidak sah, atau tidak ditujukan dengan benar.X.2.1.5: SBU (Sertifikat Badan Usaha): Gugur karena SBU tidak ada, sudah habis masa berlaku, atau KBLI/Sub-klasifikasi tidak sesuai.X.2.1.6: Persekongkolan (Satu Entitas): Gugur karena terindikasi persekongkolan, seperti kesamaan dokumen, kesamaan nama pengurus, kesamaan IP address, atau afiliasi antar peserta.X.2.1.7: Kualifikasi Usaha: Kualifikasi Usaha tidak sesuai (Usaha Besar masuk paket Kecil atau sebaliknya).X.2.1.8: Syarat Khusus Regional/OAP (Papua): Gugur karena tidak memenuhi syarat khusus Pelaku Usaha Papua (OAP), domisili, atau ketentuan tender terbatas regional.X.2.2.1: Pengalaman Pekerjaan: Gugur karena tidak memiliki pengalaman sejenis, nilai pengalaman kurang, atau tidak dapat dibuktikan.X.2.2.2: SKP (Sisa Kemampuan Paket): Gugur karena nilai SKP tidak mencukupi (terlalu banyak paket sedang dikerjakan).X.2.2.3: Keuangan (Dukungan & Cash Flow): Gugur karena Kemampuan Keuangan/Cash Flow (Rekening Koran/Dukungan Bank) tidak memadai atau laporan keuangan tidak diaudit.X.2.3.1: Kehadiran Pembuktian Kualifikasi: Gugur karena TIDAK HADIR saat undangan pembuktian kualifikasi.X.2.3.2: Substansi Pembuktian Kualifikasi: Gugur karena saat pembuktian, data kualifikasi terbukti tidak benar, tidak sah, atau dokumen fisik berbeda dengan isian SPSE.X.3.1.1: Peralatan - Daftar Isian: Gugur karena daftar peralatan tidak diisi, tidak lengkap, atau tidak sesuai syarat minimal LDP.X.3.1.2: Peralatan - Bukti Kepemilikan: Gugur karena tidak dapat membuktikan kepemilikan/sewa saat klarifikasi.X.3.1.3: Konflik Sumber Daya Peralatan: Gugur karena peralatan yang ditawarkan sedang digunakan atau ditawarkan pada paket lain yang bersamaan.X.3.2.1: Personel - Daftar Isian: Gugur karena daftar personel (Manajer, K3, Pelaksana) tidak diisi, tidak lengkap, atau tidak sesuai syarat LDP.X.3.2.2: Personel - Kualifikasi/Konflik: Gugur karena personel tidak dapat membuktikan kualifikasinya (SKA/SKK) atau personel yang sama ditawarkan pada paket lain yang bersamaan (konflik sumber daya).X.3.3.1: SMKK/RKK (Penawaran Dokumen Keselamatan): Gugur karena DOKUMEN SMKK/RKK tidak diunggah atau substansi DOKUMEN tidak memenuhi syarat.X.3.3.2: SMKK/RKK - Pakta Komitmen: Gugur karena Pakta Komitmen Keselamatan Konstruksi tidak diunggah atau tidak sah.X.3.4.1: Kehadiran Klarifikasi Teknis: Gugur karena TIDAK HADIR saat undangan klarifikasi/pembuktian teknis.X.3.4.2: Substansi Teknis (Spesifikasi/Metode): Gugur saat klarifikasi, terbukti tidak benar, tidak wajar, atau penawaran (metode kerja, spesifikasi bahan/alat) tidak sesuai dengan yang disyaratkan LDP.X.3.4.3: Ketidaksesuaian Dokumen Dukungan: Surat dukungan material/perusahaan atau dokumen penawaran ditujukan untuk paket atau pihak yang salah.X.4.1.1: Harga di atas HPS (Pasca Koreksi): Gugur karena harga penawaran setelah koreksi aritmatik melebihi nilai HPS.X.4.2.1: [STATUS LULUS, BUKAN ALASAN GUGUR] Harga Lulus (> 80% HPS): Penawaran di atas 80% HPS dan dianggap wajar.X.4.2.2: Kewajaran Harga (Gagal < 80% HPS): Gugur karena harga penawaran di bawah 80% HPS dan gagal membuktikan kewajaran harga.X.4.2.3: Klarifikasi Harga Melebihi Penawaran: Gugur karena hasil klarifikasi harga wajar menghasilkan nilai yang lebih tinggi daripada harga penawaran yang diajukan.X.4.3.1: Kalah Peringkat / Evaluasi Dihentikan: Penawaran valid tapi gugur karena kalah peringkat (bukan penawar terendah) atau evaluasi tidak dilanjutkan.X.4.4.1: Kehadiran Klarifikasi Harga: Gugur karena TIDAK HADIR saat undangan klarifikasi kewajaran harga.X.4.4.2: Substansi Harga (Klarifikasi): Gugur karena Penawaran Harga Tidak Dapat Diklarifikasi (gagal membuktikan AHS/komponen harga).X.5.1.1: Kegagalan Evaluasi Keseluruhan (General): Gugur karena alasan umum seperti "Tidak Lulus Evaluasi", "Tidak Sesuai LDP", tanpa detail spesifik.X.5.1.2: Penggantian Karena Gagal Berkontrak: Gugur karena peserta sebelumnya diusulkan menang tetapi gagal berkontrak, sehingga dilakukan evaluasi terhadap penawar berikutnya.X.5.1.3: Tender Terbatas/Daftar Pendek: Gugur karena Tidak Lolos Daftar Pendek (Shortlist) atau tidak diundang.X.5.1.4: Ketidakhadiran (Umum): Gugur karena tidak hadir pada tahapan penting (non-spesifik) atau tidak bisa dihubungi.X.5.1.5: Gagal Syarat Tender Ulang: Gugur karena bukan peserta yang memasukkan penawaran pada tender yang ditetapkan gagal sebelumnya (syarat khusus tender ulang).X.5.1.6: Pembatalan oleh PA/KPA: Hasil pemilihan ditolak atau dibatalkan oleh Pengguna Anggaran/Kuasa Pengguna Anggaran.X.5.1.7: Tidak Lanjut Kompetisi/Respon: Gugur karena tidak menyampaikan penawaran ulang, tidak konfirmasi kehadiran, atau tidak merespon undangan lanjutan.Teks Alasan ditokenisasi menggunakan tokenizer indobenchmark/indobert-base-p1 dengan pengaturan:
truncation=Truemax_length=128Model dilatih menggunakan transformers.Trainer dengan pengaturan berikut:
num_train_epochs: 3fp16: True (Mixed Precision)per_device_train_batch_size: 128per_device_eval_batch_size: 256dataloader_num_workers: 4warmup_steps: 500weight_decay: 0.01optimizer: AdamW (default)lr_scheduler: linearAccuracy (Akurasi).Model terbaik dipilih berdasarkan akurasi tertinggi pada set validasi, yang dicapai pada Epoch 3.
| Epoch | Training Loss | Validation Loss | Accuracy |
|---|---|---|---|
| 1 | 0.339900 | 0.328844 | 0.888207 |
| 2 | 0.253600 | 0.282797 | 0.904231 |
| 3 | 0.180400 | 0.269147 | 0.911260 |
Model dilatih di Google Colab menggunakan satu GPU NVIDIA T4 dengan 16GB VRAM.
transformersdatasetstorch (PyTorch)scikit-learnevaluatecudaModel ini dilatih untuk penelitian terkait Evaluasi SOP Pengadaan Barang/Jasa berbasis evidence-based dari Alasan kegagalan penawaran pekerjaan konstruksi dari berbagai website SPSE Kementerian/Lembaga/Perangkat Daerah di Indonesia.
Penelitian dilakukan dalam rangka penyusunan Tesis di Jurusan Magister Teknik Sipil konsentrasi Manajemen Konstruksi di Universitas Mercu Buana.
| Nama | Sederhana Gulo |
|---|---|
| NIM | 55724110004 |
| 55724110004[at]student.mercubuana.ac.id |