상세 보기
온디바이스 대형언어모델 엑사원 4.0 1.2B가 자동생성한 건축환경문헌 기반 Q&A 데이터셋의 품질평가
Quality Evaluation of Automatically Generated Q&A Datasets from Built Environment Literature Using the On-Device LLM Exaone 4.0 1.2B
Citations
SCOPUS
0초록
본 연구는 LMM(large language model)을 온디바이스 LMM 모델인 엑사원 4.0 1.2B를 이용해 건축환경 분야의 논문 36개를 수집 정제하고 Zero-shot 형태의 프롬프트로 입력하여 생성한 1,913개의 질의응답쌍의 품질검사를 목표로 한다. 그 결과 containment는 평균 0.399, cosine similarity(SBERT)는 0.42의 결과가 도출되었다. 형식적인 오류는 272개로 전체 1,913개의 문항의 14.2%에 해당하는 것으로 나타났다.
키워드
대형언어모델; 엑사원; 자동문항생성; 품질평가; 건축환경; Large language model; Exaone; Automatic item generation; Quality evaluation; Built environment
- 제목
- 온디바이스 대형언어모델 엑사원 4.0 1.2B가 자동생성한 건축환경문헌 기반 Q&A 데이터셋의 품질평가
- 제목 (타언어)
- Quality Evaluation of Automatically Generated Q&A Datasets from Built Environment Literature Using the On-Device LLM Exaone 4.0 1.2B
- 저자
- 정창헌
- 발행일
- 2025-11
- 유형
- Y
- 저널명
- 대한건축학회논문집
- 권
- 41
- 호
- 11
- 페이지
- 259 ~ 269