내 프로젝트에 LLM을 달아보자(3) - 잘못된 대답 고치기

이번 글은 프로그래밍 기술적인 부분은 아니고...

그냥 심심해서 ollama를 통해서 openchat 모델에 간단한 수학 계산을 시켜본 결과입니다.

 

리더보드에 나온 평가 지표에는 수학계산 및 표현에 대한 지표도 있었던 것으로 기억하는데...

과연 openchat의 표현능력은 얼마나 되나.. 궁금했습니다.

그래서 아주 간단하게 x의 제곱을 미분한 결과를 설명해달라고 해 보았습니다.

 

아래는 그 결과입니다.

미분 결과는 틀리지 않았는데 중간에 설명하는 부분이 잘못되었더군요.

한 번 지적해 보았는데 제대로 고치지 못하길래 이렇게 고치는 것이 어떠냐.. 라는 식으로 딱 집어서 말해 보았습니다.

 

그래도 명확하게 지적한 부분은 제대로 이해하고 수정을 하네요.

알고 있는 기능이지만 이렇게 보면 새삼 대단한데~ 싶습니다. ^^