nlztrk commited on
Commit
f78f290
1 Parent(s): 1535c93

Create README.md

Browse files
Files changed (1) hide show
  1. README.md +80 -0
README.md ADDED
@@ -0,0 +1,80 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ ---
2
+ license: apache-2.0
3
+ language:
4
+ - tr
5
+ pipeline_tag: token-classification
6
+ widget:
7
+ - text: >-
8
+ Lütfen yardım Akevler mahallesi Rüzgar sokak Tuncay apartmanı zemin kat
9
+ Antakya akrabalarım göçük altında #hatay #Afad
10
+ example_title: Örnek
11
+ metrics:
12
+ - accuracy
13
+ - f1
14
+ - recall
15
+ - precision
16
+ ---
17
+ # Model: 'deprem-ner-mdebertav3'
18
+
19
+ ### Validasyon Sonuçları
20
+ - **Precision:** 0.711819
21
+ - **Recall:** 0.783626
22
+ - **F1:** 0.745999
23
+ - **Accuracy:** 0.933360
24
+
25
+ ### Eğitim Parametreleri
26
+ ```
27
+ evaluation_strategy="epoch"
28
+ save_strategy="epoch"
29
+ load_best_model_at_end=True
30
+ learning_rate=3e-5
31
+ per_device_train_batch_size=8
32
+ per_device_eval_batch_size=16
33
+ num_train_epochs=15
34
+ weight_decay=0.01
35
+ seed=42
36
+ ```
37
+
38
+ ### Örnekler
39
+ Bu model depremde enkaz altında kalan kişilerin bildirimlerinden sokak, il, ilçe gibi bilgileri çekmeye çalıştık.
40
+
41
+ Örnek girdiler:
42
+ - "Lütfen yardım Akevler mahallesi Rüzgar sokak Tuncay apartmanı zemin kat Antakya akrabalarım göçük altında #hatay #Afad"
43
+ - "MARAȘA'ta arkadaşimizdan haber alamıyoruz ACIL yardım Penta Park konutları 1. Blok en üst kat 11. Kat \n\n@AFADBaskanlik #kahramanmaraş\nACİL"
44
+
45
+ Verdiği çıktılar:
46
+
47
+ ```
48
+ [
49
+ {
50
+ "entity_group": "mahalle",
51
+ "score": 0.8160411715507507,
52
+ "word": "Akevler mahallesi",
53
+ "start": 14,
54
+ "end": 31
55
+ },
56
+ {
57
+ "entity_group": "sokak",
58
+ "score": 0.940501868724823,
59
+ "word": "Rüzgar sokak",
60
+ "start": 32,
61
+ "end": 44
62
+ },
63
+ {
64
+ "entity_group": "Apartman/Site",
65
+ "score": 0.8081040978431702,
66
+ "word": "Tuncay apartmanı",
67
+ "start": 45,
68
+ "end": 61
69
+ },
70
+ {
71
+ "entity_group": "ilce",
72
+ "score": 0.854024350643158,
73
+ "word": "Antakya",
74
+ "start": 72,
75
+ "end": 79
76
+ }
77
+ ]
78
+ ```
79
+ ### Değerlendirme
80
+ Bu modeli Hugging Face Hub'daki diğer modellerle karşılaştırdık, örnek 30 input'ta sonuçları [bu repository'de](https://huggingface.co/datasets/deprem-ml/butun_model_benchmarklari) bulabilirsiniz.