| アイテムタイプ |
デフォルトアイテムタイプ（フル）(1) |
| 公開日 |
2022-06-14 |
| タイトル |
|
|
タイトル |
NKUST at the NTCIR-16 DialEval-2 Task |
|
言語 |
en |
| 作成者 |
Tao-Hsing Chang
Jian-He Chen
|
| 内容記述 |
|
|
内容記述タイプ |
Abstract |
|
内容記述 |
It is important to evaluate the quality of dialogues generated by chatbots. Most previous automatic evaluation methods have been based on models (e.g., LSTM ) that are capable of processing time series. This study presents three models for dialogue quality and two nugget detection subtasks, respectively. Specifically, the first model uses a Pegasus model that can transform dialogues into short summaries; the second model uses a Bi-LSTM that merely adjusts the internal model structure; and the third model is a multi-agent model simulating situations in which multiple annotators generate different evaluation results for the same text. The experimental results show that certain opinions may need to be corroborated by more refined experimental design and the testing of more model parameters before they are applicable to this issue. |
|
言語 |
en |
| 出版者 |
|
|
出版者 |
NII Institutional Repository |
|
言語 |
en |
| 日付 |
|
|
日付 |
2022-06-14 |
|
日付タイプ |
Issued |
| 言語 |
|
|
言語 |
eng |
| 資源タイプ |
|
|
資源タイプ識別子 |
http://purl.org/coar/resource_type/c_5794 |
|
資源タイプ |
conference paper |
| ID登録 |
|
|
ID登録 |
10.20736/0002002262 |
|
ID登録タイプ |
JaLC |
| 関連情報 |
|
|
関連タイプ |
isReferencedBy |
|
|
識別子タイプ |
URI |
|
|
関連識別子 |
https://research.nii.ac.jp/ntcir/ntcir-16/index.html |
|
|
言語 |
en |
|
|
関連名称 |
NTCIR-16 Conference |
| 開始ページ |
|
|
開始ページ |
none |
| 会議記述 |
|
|
|
会議名 |
NTCIR-16 Conference |
|
|
言語 |
en |
|
回次 |
16 |
|
|
主催機関 |
National Institute of Informatics |
|
|
言語 |
en |
|
|
開始年 |
2022 |
|
|
開始月 |
6 |
|
|
開始日 |
14 |
|
|
終了年 |
2022 |
|
|
終了月 |
6 |
|
|
終了日 |
17 |
|
|
開催期間 |
June 14-17, 2022 |
|
|
言語 |
en |
|
|
開催会場 |
National Institute of Informatics |
|
|
言語 |
en |
|
開催国 |
JPN |
05-NTCIR16-DIALEVAL-ChangT.pdf (835.4 KB)
