미세 조정(파인튜닝)

Fine-tuning

한 줄로 말하면

이미 많은 자료로 학습한 AI 모델에 특정 분야의 자료를 더 학습시켜, 그 일에 맞게 다듬는 과정이에요.

큰 AI 모델을 처음부터 만들려면 엄청나게 많은 자료로 학습시켜야 해요. 그래서 이미 넓게 배운 모델을 가져와, 필요한 분야의 자료로 조금 더 가르쳐요. 기본기를 갖춘 요리사가 새 식당에 가서 그 집 요리법을 익히는 것과 비슷해요. 이미 배운 지식을 다른 일에 옮겨 쓰는 '전이 학습'의 한 방법이에요.

프롬프트는 그때그때 지시를 바꾸는 것이고, 미세 조정은 모델 안의 숫자(매개변수)를 고쳐 모델 자체를 바꾸는 것이에요. 그만큼 조심할 점도 있어요. 2023년에 발표된 한 연구에서는, 위험한 요청을 거절하도록 다듬어진 AI 모델에 일부러 만든 해로운 예시 10개만 더 학습시켰더니 안전장치가 무너졌어요. 평범한 자료로 미세 조정해도 안전성이 조금 약해질 수 있었어요.

미세 조정된 AI 서비스를 고를 때는 이렇게 해 보세요. ① 어떤 자료로 다듬었는지 안내를 찾아봐요. ② '전문 AI'라는 이름만 믿지 말고 결과를 직접 확인해요. ③ 내 자료를 학습에 쓴다는 조건이 있는지 약관을 봐요.

생활 속 예시

일반 AI 모델에 한 병원의 진료 안내 자료를 더 학습시켜 그 병원 전용 상담 챗봇을 만드는 것이 미세 조정의 예예요.

주의할 점

특정 분야에 맞게 미세 조정했다는 AI도 틀릴 수 있고 안전장치가 약해졌을 수도 있으니, 중요한 결과는 사람이 다시 확인하세요.

관련 용어

이 용어, 글링코에게도 알려 줄까요? 실제 상황 문제로 연습해 봐요.

3분 수업 시작

참고한 자료