File size: 2,357 Bytes
1338ac4 ea2520d 1338ac4 fe458ec 1338ac4 ea2520d 1338ac4 |
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 |
https://github.com/sionic-ai/intent-classifier-sample
# Class Dictionary: {'Coding': 0, 'Information Seeking': 1, 'Language': 2, 'Others': 3, 'Writing': 4}
```
4 epoch version
accuracy: 0.95
precision: 0.95
recall: 0.95
F1 score: 0.95
confusion_matrix:
[[5681 49 0 3 19]
[ 93 5326 20 97 265]
[ 5 2 5845 39 15]
[ 12 76 167 2162 126]
[ 14 197 3 54 5626]]
μ±λ₯ μ§ν:
Accuracy (μ νλ): 0.95 - μ 체 μμΈ‘ μ€ 95%κ° μ ννμ΅λλ€.
Precision (μ λ°λ): 0.95 - λͺ¨λΈμ΄ νΉμ ν΄λμ€λΌκ³ μμΈ‘ν κ² μ€ 95%κ° μ€μ λ‘ κ·Έ ν΄λμ€μμ΅λλ€.
Recall (μ¬νμ¨): 0.95 - μ€μ νΉμ ν΄λμ€μΈ κ² μ€ 95%λ₯Ό λͺ¨λΈμ΄ μ¬λ°λ₯΄κ² μλ³νμ΅λλ€.
F1 score: 0.95 - μ λ°λμ μ¬νμ¨μ μ‘°ννκ· μΌλ‘, λͺ¨λΈμ μ λ°μ μΈ μ±λ₯μ΄ μ°μν¨μ λνλ
λλ€.
νΌλ νλ ¬ (Confusion Matrix): μ΄ νλ ¬μ 5x5 ν¬κΈ°λ‘, 5κ°μ ν΄λμ€κ° μμμ μλ―Έν©λλ€. νμ μ€μ ν΄λμ€λ₯Ό, μ΄μ μμΈ‘λ ν΄λμ€λ₯Ό λνλ
λλ€. [[5681 49 0 3 19] [ 93 5326 20 97 265] [ 5 2 5845 39 15] [ 12 76 167 2162 126] [ 14 197 3 54 5626]]
λκ°μ μμλ€(5681, 5326, 5845, 2162, 5626)μ κ° ν΄λμ€μ λν΄ μ ννκ² μμΈ‘λ μνμ μμ
λλ€.
λ€λ₯Έ μμλ€μ μ€λΆλ₯λ κ²½μ°λ₯Ό λνλ
λλ€.
μλ₯Ό λ€μ΄:
첫 λ²μ§Έ ν΄λμ€: 5681κ° μ νν λΆλ₯, 49κ°λ λ λ²μ§Έ ν΄λμ€λ‘ μ€λΆλ₯, 3κ°λ λ€ λ²μ§Έ ν΄λμ€λ‘, 19κ°λ λ€μ― λ²μ§Έ ν΄λμ€λ‘ μ€λΆλ₯λμμ΅λλ€.
λ λ²μ§Έ ν΄λμ€: 5326κ° μ νν λΆλ₯, 93κ°λ 첫 λ²μ§Έ ν΄λμ€λ‘, 20κ°λ μΈ λ²μ§Έ ν΄λμ€λ‘, 97κ°λ λ€ λ²μ§Έ ν΄λμ€λ‘, 265κ°λ λ€μ― λ²μ§Έ ν΄λμ€λ‘ μ€λΆλ₯λμμ΅λλ€.
λΆμ:
λͺ¨λΈμ μ λ°μ μΈ μ±λ₯μ΄ λ§€μ° μ’μ΅λλ€ (95% μ νλ).
μΈ λ²μ§Έ ν΄λμ€μ λΆλ₯ μ±λ₯μ΄ κ°μ₯ μ°μν©λλ€ (5845κ° μ νν λΆλ₯).
λ€ λ²μ§Έ ν΄λμ€μ λΆλ₯κ° μλμ μΌλ‘ μ΄λ €μ 보μ
λλ€ (λ€λ₯Έ ν΄λμ€μ λΉν΄ μ€λΆλ₯κ° λ λ§μ).
λ λ²μ§Έμ λ€μ― λ²μ§Έ ν΄λμ€ μ¬μ΄μ μ½κ°μ νΌλμ΄ μλ κ²μΌλ‘ 보μ
λλ€ (265κ°μ 197κ°μ μνΈ μ€λΆλ₯).
μ΄ κ²°κ³Όλ λͺ¨λΈμ΄ μ λ°μ μΌλ‘ λ§€μ° μ°μν μ±λ₯μ 보μ΄κ³ μμ§λ§, νΉμ ν΄λμ€ κ°μ ꡬλΆμ μμ΄ μ½κ°μ κ°μ μ¬μ§κ° μμμ λνλ
λλ€.
``` |