📝 개요이 글에서는 제품 설명 텍스트만을 입력받아가격을 예측하는 Fine-tuned GPT-4o-mini 모델을 구축하는 과정을 다룹니다.데이터 준비부터 모델 파인튜닝,완성된 모델 테스트까지 전 과정을 코드와 함께 실습하며,Weights & Biases를 이용한 학습 모니터링과 모델 성능 평가 방법도 소개합니다.주요 목표:제품 설명을 기반으로 가격을 추론하는 맞춤형 GPT 모델 만들기OpenAI Fine-tuning API 실습학습 진행 상황을 Weights & Biases로 실시간 추적Fine-tuned 모델을 활용해 테스트 및 성능 평가하기💵 문자열에서 가격 숫자만 추출하는 유틸리티 함수 (Utility Function to Extract Price)모델이 응답한 문자열에서 가격 숫자만 뽑아내는 ..
📝 개요이 글에서는 제품 설명 텍스트만을 입력받아가격을 예측하는 Fine-tuned GPT-4o-mini 모델을 구축하는 과정을 다룹니다.데이터 준비부터 모델 파인튜닝,완성된 모델 테스트까지 전 과정을 코드와 함께 실습하며,Weights & Biases를 이용한 학습 모니터링과 모델 성능 평가 방법도 소개합니다.주요 목표:제품 설명을 기반으로 가격을 추론하는 맞춤형 GPT 모델 만들기OpenAI Fine-tuning API 실습학습 진행 상황을 Weights & Biases로 실시간 추적Fine-tuned 모델을 활용해 테스트 및 성능 평가하기🎨 Weights & Biases(W&B) 연동 준비Weights and Biases(W&B)는 학습 과정을 모니터링할 수 있는 무료인 플랫폼입니다.OpenAI..
📝 개요이 글에서는 제품 설명 텍스트만을 입력받아가격을 예측하는 Fine-tuned GPT-4o-mini 모델을 구축하는 과정을 다룹니다.데이터 준비부터 모델 파인튜닝,완성된 모델 테스트까지 전 과정을 코드와 함께 실습하며,Weights & Biases를 이용한 학습 모니터링과 모델 성능 평가 방법도 소개합니다.주요 목표:제품 설명을 기반으로 가격을 추론하는 맞춤형 GPT 모델 만들기OpenAI Fine-tuning API 실습학습 진행 상황을 Weights & Biases로 실시간 추적Fine-tuned 모델을 활용해 테스트 및 성능 평가하기🚀 라이브러리 및 환경 설정모델 파인튜닝과 데이터 처리에 필요한 주요 라이브러리들을 불러옵니다.이제부터 본격적으로 작업을 시작할 준비를 합니다.📦 필수 라이브..
✨ 개요이 문서는 제품 설명 텍스트만을 기반으로 가격을 예측하는 프로젝트의 일환으로, 최신 Frontier 모델들의 성능을 평가하는 과정을 정리한 것입니다. 먼저, 기존에 전처리된 테스트 데이터를 활용해 사람이 직접 예측한 결과를 기준 삼아 비교하고,그 다음으로 다양한 Frontier 모델 (예: gpt-4o-mini, gpt-4o-2024-08-06, Claude 3.5 Sonnet)을 이용해모델별 가격 예측 성능을 테스트합니다. 특히, Frontier 모델들은 별도의 추가 학습 없이 바로 테스트 데이터에 적용하며,정확성, 응답 포맷 처리(get_price), 비용 이슈(호출 비용 1~2센트 발생) 등에 주의하여 진행합니다. 이 문서는 다음을 목표로 합니다:Frontier 모델이 제품 가격 예측 문제에..
