본문 바로가기 주메뉴 바로가기
국회도서관 홈으로 정보검색 소장정보 검색

결과 내 검색

동의어 포함

초록보기

This study develops a generative AI-based system for automatically generating scholarly topic descriptions within the OpenAlex database and evaluates its performance. Although OpenAlex provides concise topic descriptions, they lack contextual richness and informational coverage, limiting researchers’ ability to quickly grasp the semantic relevance of each topic. To address this issue, this study generated new descriptions for a total of 4,516 topics by utilizing metadata attributes— topic_id, topic_name, description, and keywords— and compared them with the original descriptions. Multiple large language models (LLMs), including GPT, LLaMA, and Mistral, were employed, and a consistent prompt-en- gineering scheme was designed to ensure the reproducibility of model comparison. A standardized evaluation framework integrating quantitative and qualitative indicators was proposed. Quantitative evaluation included keyword-based Precision, Recall, and F1 scores, ROUGE-L, Specter2 embedding-based cosine similarity, and BERTScore. Qualitative evaluation was conducted using LLM-based pairwise comparison, assessing Relevance, Coverage, and Clarity, with relative rankings determined through the Elo rating system. Furthermore, the Friedman test and Wilcoxon signed-rank test were applied to verify statistical significance. Experimental results revealed distinctive strengths and weaknesses across models, providing a benchmarking foundation for improving automated content generation in scholarly databases such as OpenAlex. The proposed evalua- tion framework also offers a reproducible and consistent basis for assessing various generative models, contributing to both academic research and practical system development.

권호기사

권호기사 목록 테이블로 기사명, 저자명, 페이지, 원문, 기사목차 순으로 되어있습니다.
기사명 저자명 페이지 원문 목차
탄소중립 요구사항을 반영한 ISO 통합 인증시스템의 설계 및 구현 = Design and implementation of an ISO integrated certification system reflecting carbon neutrality requirements 조재용, 김기태 p. 1-14
고가-저가 주가 데이터를 활용한 순차적 주식 투자 의사결정 = Decision-making based on high-low stock price : posterior probability distribution control charts : 사후 확률분포 관리도 구축 류승원, 김규태, 신종호 p. 15-24
시계열 데이터에 대한 전이 학습 기반 이상 탐지 방법 연구 = A study on transfer learning-based anomaly detection method for time-series data 김재훈, 박철순 p. 25-33
전술데이터링크의 TDMA 자원 할당 검증을 위한 SimPy 기반 시뮬레이터의 설계 및 구현 = A SimPy-based simulator for verification of TDMA resource allocation in tactical data links 송대영, 최신욱, 구영훈, 김재원, 음지훈, 김경택 p. 34-43
탄소 소부장 특화단지 재직자 인력 양성사업의 개선 방안 및 운영 전략 도출 = Development of operational strategy and curriculum for workforce training in the carbon materials specialized industrial cluster 김가현, 배준수 p. 44-56
Transformer와 Kalman Filter 결합을 통한 해운시장의 전략적 의사결정 지원 인공지능 프레임워크 = AI framework for strategic decision support in the shipping market through the integration of transformer and Kalman filtering 김동균, 김윤지, 김상화, 김윤아, 김현수 p. 57-70
육군 미래 과학화훈련체계 구축방안 연구 = A study on the development of the future scientific training system for the army : interoperability, data fusion, and weapon system integration : 협동성·데이터·무기체계연동을 중심으로 김성종, 최명진 p. 71-78
대규모 언어모델 기반 학술 토픽 설명 생성의 정량·정성 평가 연구 = Quantitative and qualitative evaluation of scholarly topic description generation using large language models : a case study on OpenAlex : OpenAlex 사례 김상국, 한혁, 권태훈 p. 79-94
스마트 제조 환경을 위한 결함 탐지 및 세분화 딥러닝 프레임워크 = A deep learning framework for defect detection and segmentation in smart manufacturing environments 장동건, 장영철, 조재형 p. 95-103
고중량 멀티콥터 부품 결함 검출을 위한 감독학습 모델 기반의 표준화된 FC 로그 분석 기법 연구 = A study of standardized FC log analysis techniques for identifying defects in high-weight multi-copter components using supervised learning models 이헌규, 조한혁, 김민재, 박홍규 p. 104-112
폐의류 자원화체계의 구조적 한계와 순환경제 기반 효율화 방안 = Structural limitations of Korea’s waste clothing recycling system and optimization strategies based on a circular economy framework 김경석, 옥창수, 나동규 p. 113-128
고비용 공정데이터 획득 환경에서 불완비 공정데이터의 효율적인 결측치 대체 방법 = An efficient method for imputing missing values in incomplete process data from high-cost data acquisition environments 배재호, 최선미, 배성윤 p. 129-141
일학습병행 학습근로자의 성격유형에 따른 훈련 성취도 비교 연구 = A comparative study on training performance according to personality types of work-learning dual program apprentices 박종훈 p. 142-154
비전 트랜스포머 및 메트릭 러닝 기반 수중 소나 이미지 분류 = Underwater sonar image classification based on vision transformer with metric learning 이우형, 김경택, 박은철, 경지훈 p. 155-164
그리스 제품의 품질 향상을 위한 그리스 주도예측 = Grease consistency prediction for grease products quality improvement 김동현, 이동주 p. 165-173