Dialogue State Tracking on MultiWOZ 2.1 (test)
60.61Joint Goal Accuracy
Trippy+SaCLog
Updated 4d ago
Evaluation Results
| Method | Links | |||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
2023.05 | 60.61 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 60.61 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 60.53 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 60.48 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.09 | 60.48 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 58.7 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 57.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 57.71 | - | - | - | - | - | - | 97.71 | - | - | - | - | - | - | - | - | - | |
2023.05 | 57.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 57.45 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 57.45 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 57.26 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 57.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.09 | 56.85 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 56.7 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 56.66 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 56.66 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.09 | 56.66 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 56.45 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.09 | 56.39 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 56.36 | - | - | - | - | - | - | 97.59 | - | - | - | - | - | - | - | - | - | |
2021.09 | 56.12 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 56.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 55.82 | - | - | - | - | - | - | 97.51 | - | - | - | - | - | - | - | - | - | |
2021.09 | 55.72 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 55.7 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.09 | 55.37 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 55.35 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 55.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 55.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 55.29 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.09 | 55.29 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 55.26 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 55.23 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.09 | 55.23 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 54.97 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 54.86 | - | - | - | - | - | - | 97.55 | - | - | - | - | - | - | - | - | - | |
2023.05 | 54.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 54.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 54.4 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 54.25 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 54.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 53.85 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.09 | 53.62 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 53.44 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 53.36 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 53.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 53.3 | - | - | - | - | - | - | 97.4 | - | - | - | - | - | - | - | - | - | |
2022.11 | 53.19 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 53.1 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 53.02 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 53.01 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 52.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 52.57 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 52.5 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 52.08 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 51.68 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 51.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 51.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 51.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 51.17 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.09 | 50.95 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 50.3 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 50.14 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 49.88 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.08 | 49.2 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 49.01 | - | - | - | - | - | - | 96.76 | - | - | - | - | - | - | - | - | - | |
2022.11 | 48.4 | - | - | - | - | - | - | 97.02 | - | - | - | - | - | - | - | - | - | |
2023.05 | 46 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2023.05 | 46 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2022.11 | 45.6 | - | - | - | - | - | - | 96.55 | - | - | - | - | - | - | - | - | - | |
2021.08 | 45.6 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2021.09 | 45.6 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.02 | 38.71 | - | 45.15 | 63.18 | 76.39 | 69.48 | 62.59 | - | 58.77 | 81.84 | 85.07 | 91.06 | 87.73 | 90.16 | - | - | - | |
2024.02 | 38.56 | - | 37.56 | 60.12 | 74.43 | 67.29 | 61.31 | - | 67.15 | 87.2 | 82.86 | 90.21 | 86.9 | 92.48 | - | - | - | |
2024.02 | 37.67 | - | 46.83 | 60.27 | 67.48 | 60.9 | 59.54 | - | 62.24 | 84.99 | 85.39 | 88.69 | 80.39 | 89.88 | - | - | - | |
2024.02 | 33.21 | - | 40.15 | 59.02 | 69.31 | 60.67 | 56.56 | - | 53.67 | 79.57 | 81.36 | 87.82 | 81.95 | 89.45 | - | - | - | |
2024.02 | 32.11 | - | 38.43 | 63.18 | 74.1 | 56.2 | 57.68 | - | 56.5 | 81.97 | 79.52 | 91.19 | 86.56 | 90 | - | - | - | |
2024.02 | 31.84 | - | 38.43 | 56.44 | 69.11 | 58.82 | 55.41 | - | 54.25 | 80.99 | 79.96 | 87.26 | 83.37 | 89.26 | - | - | - | |
2024.02 | 31.5 | - | 42 | 55.8 | 70.9 | 60.8 | 56.44 | - | 52.7 | - | - | - | - | - | - | - | - | |
2024.02 | 29.45 | - | 35 | 52.76 | 67.02 | 59.66 | 53.02 | - | 50.66 | 74.93 | 73.66 | 85.25 | 80.36 | 89.05 | - | - | - | |
2024.02 | 28.38 | - | 34.03 | 54.48 | 66.1 | 56.53 | 52.36 | - | 50.66 | 78.26 | 76.61 | 86.18 | 72.6 | 87.39 | - | - | - | |
2021.08 | 25.8 | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | - | |
2024.02 | 25.68 | - | 29.5 | 48.87 | 64.66 | 53.59 | 49.28 | - | 49.76 | 76.8 | 67.6 | 81.33 | 68.97 | 85.09 | - | - | - | |
2024.02 | 16.78 | - | 30.47 | 37.6 | 63.2 | 44.17 | 43.44 | - | 42.64 | 70.18 | 69.37 | 78.63 | 73.8 | 82.18 | - | - | - | |
2023.06 | - | 22.8 | 19.5 | 16.4 | 59.2 | 22.9 | 28.16 | - | - | - | - | - | - | - | - | - | - | |
2023.06 | - | 27.1 | 18.3 | 15.3 | 61.5 | 23.7 | 29.18 | - | - | - | - | - | - | - | - | - | - | |
2023.06 | - | 31.3 | 22.7 | 26.3 | 61.9 | 36.7 | 35.78 | - | - | - | - | - | - | - | - | - | - | |
2023.06 | - | 42.4 | 24.9 | 27.7 | 60.3 | 41.1 | 39.28 | - | - | - | - | - | - | - | - | - | - | |
2023.06 | - | 56.4 | 21.8 | 38.2 | 78.4 | 38.7 | 46.7 | - | - | - | - | - | - | - | - | - | - | |
2023.06 | - | 52.8 | 36.3 | 45.3 | 62.6 | 46.7 | 48.74 | - | - | - | - | - | - | - | - | - | - | |
2023.06 | - | 52.7 | 42 | 55.8 | 70.9 | 60.8 | 56.44 | - | - | - | - | - | - | - | - | - | - | |
2023.06 | - | 60 | 46.7 | 57.3 | 71.4 | 49.4 | 56.96 | - | - | - | - | - | - | - | - | - | - | |
2024.02 | - | - | 14.2 | 12.59 | 59.21 | 22.39 | 25.69 | - | 20.06 | - | - | - | - | - | - | - | - | |
2024.02 | - | - | 16.28 | 13.56 | 59.27 | 22.76 | 26.87 | - | 22.46 | - | - | - | - | - | - | - | - | |
2024.02 | - | - | 22.72 | 26.28 | 61.87 | 36.72 | 35.77 | - | 31.25 | - | - | - | - | - | - | - | - | |
2024.02 | - | - | 21.21 | 21.65 | 64.62 | 35.43 | 35.2 | - | 33.09 | - | - | - | - | - | - | - | - | |
2024.02 | - | - | 21.8 | 38.2 | 78.4 | 38.7 | 46.7 | - | 56.4 | - | - | - | - | - | - | - | - | |
2024.02 | - | - | 46.7 | 57.3 | 71.4 | 49.4 | 56.96 | - | 60 | - | - | - | - | - | - | - | - | |
2024.02 | - | - | 26.77 | 48.28 | 56.22 | 53.75 | 42.02 | - | 30.23 | 65.38 | 76.28 | 82.9 | 75.33 | 83.64 | - | - | - |
Showing 100 of 109 rows