fabhiansan commited on
Commit
5b3afb8
·
verified ·
1 Parent(s): 81811b1

Update README.md

Browse files
Files changed (1) hide show
  1. README.md +10 -13
README.md CHANGED
@@ -7,8 +7,8 @@ tags:
7
  - text-classification
8
  - natural-language-inference
9
  - indonesian
10
- - roberta
11
  - perturbation-robustness
 
12
  datasets:
13
  - fabhiansan/XSUM-Indonesia-AMR-NLI
14
  pipeline_tag: text-classification
@@ -40,21 +40,18 @@ Model ini menghasilkan salah satu dari dua label (0 untuk non-entailment/kontrad
40
 
41
 
42
 
43
- ## Penggunaan yang Ditujukan & Batasan
44
-
45
  ### Penggunaan yang Ditujukan
46
  Model ini ditujukan untuk digunakan dalam tugas klasifikasi teks NLI biner dalam bahasa Indonesia. Dapat digunakan untuk:
47
  * Memverifikasi apakah suatu klaim (hipotesis) didukung oleh teks sumber (premis).
48
- * Menganalisis hubungan logis antara dua kalimat.
49
- * Sebagai komponen dalam sistem yang lebih besar yang membutuhkan pemahaman hubungan tekstual, terutama yang sensitif terhadap jenis perturbasi data yang spesifik.
50
-
51
- ### Faktor di Luar Cakupan & Batasan
52
- * **Bahasa:** Model ini dilatih khusus untuk bahasa Indonesia. Kinerjanya pada bahasa lain tidak diketahui dan kemungkinan buruk.
53
- * **Domain Data:** Kinerja model sangat bergantung pada kesamaan antara data input dan data pelatihan. Data pelatihan berasal dari `New/data/NEGFILTERED_xsum_indonesia_train_entailment_score_filtered_GEN_perturbed2_FULL_BSCORE_entprobs_sentsim.json`, yang tampaknya merupakan data yang diproses dan mungkin diperturbasi dari dataset XSUM versi Indonesia. Kinerja pada domain yang sangat berbeda mungkin menurun.
54
- * **Jenis Perturbasi:** Meskipun dilatih untuk menangani jenis perturbasi tertentu yang ada dalam data pelatihan, model mungkin tidak tangguh terhadap jenis perturbasi baru atau yang tidak terlihat.
55
- * **Jumlah Label:** Model ini dilatih untuk klasifikasi biner (`num_labels: 2`). Tidak cocok untuk tugas NLI multi-kelas (misalnya, entailment, contradiction, neutral) tanpa modifikasi dan pelatihan ulang.
56
- * **Interpretasi:** Seperti kebanyakan model deep learning, keputusan model mungkin sulit untuk diinterpretasikan sepenuhnya.
57
-
58
  ## Cara Menggunakan
59
 
60
  Anda dapat menggunakan model ini dengan pustaka `transformers` dari Hugging Face:
 
7
  - text-classification
8
  - natural-language-inference
9
  - indonesian
 
10
  - perturbation-robustness
11
+ - bert
12
  datasets:
13
  - fabhiansan/XSUM-Indonesia-AMR-NLI
14
  pipeline_tag: text-classification
 
40
 
41
 
42
 
 
 
43
  ### Penggunaan yang Ditujukan
44
  Model ini ditujukan untuk digunakan dalam tugas klasifikasi teks NLI biner dalam bahasa Indonesia. Dapat digunakan untuk:
45
  * Memverifikasi apakah suatu klaim (hipotesis) didukung oleh teks sumber (premis).
46
+ * Menganalisis hubungan logis antara beberapa kalimat teks sumber dan kalimat ringkasannya.
47
+ * Model akan menganggap ringkasan tidak entails ketika terjadi halusinasi.
48
+ * Halusinasi yang dapat dideteksi oleh model ini adalah (Pagnoni dkk., 2021):
49
+ * Predicate error
50
+ * Discourse link error
51
+ * Entity Error
52
+ * Circumstance Error
53
+ * Out of Article Error
54
+
 
55
  ## Cara Menggunakan
56
 
57
  Anda dapat menggunakan model ini dengan pustaka `transformers` dari Hugging Face: