데이터: 대학원생 페르소나로 구성된 메일(이열)

이메일 구성

박부덕 페르소나 기준

일주일에

연구실 관련 15+

수업 조교 관련 10+

교내 연락 15+

광고, 홍보, 안내 10+

60개

월 14, 화 10, 수 12, 목 11, 금 13

현실적으로 배분해서 final report를 생성

60개에 대한 Ground Truth(label)을 2-3명이서

하드보팅 방식으로 직접 라벨링해야 함

개별 요약

reference-based

60개에 대한 레퍼런스(정답 요약)를 직접 만들고 ROUGE, BERTScore 계산

reference-free