Seonglae Chov4
첫결과 성능 좋다 summary 가 아주 짧게 나와서 psgs 구분 명확히 해줘야할듯
짧은 토큰과 summarizer exact match가 상대적으로 낮은 것에 비해 성능이 높게 나온 것으로 보아 machine readability가 상승한 것으로 볼 수 있다
다만 200개라서 좀 튜닝하고 숫자 늘려봐야
같은 구간인데 토큰은 늘고 성능은 줄었다
sum_em은 유사한 걸 보니 bullet point로 얻을 수 있는 한계가 있을수도
점점 내린다 뭐지
전체 v4 해보니 스코어가 안나온다 쩝