boostcamp ai tech 3기 20주 회고

5월 30일 월요일

Fast API 강의와 실습을 다시 들었다. streamlit과 마찬가지로 처음 하는 거라 많이 낯설다.

최종 프로젝트는 거의 마무리 되었다. 처음 목표를 낮게 잡고, 단계별 목표를 세워서 점진적으로 최종 목표를 크게 늘려가는 방식이 성공한 것 같다. 이번에도 팀원들이 많이 고생하셨다.

5월 31일 화요일

챗봇 테스트를 했다. 생각보다 싱글턴 챗봇은 성능이 굉장히 좋았다. 의외로 그럴듯한 답변을 계속 해줘서 마음에 들었다. 사용자가 채팅을 길게 입력할수록 더 자세하고 그럴듯한 답변을 내놓는다는 것을 발견했다.

반면에 멀티턴 챗봇은 성능이 형편 없었다. 일단 첫 인사에 대해서도 제대로 답변하지 못하는 경우도 있었고, 대화를 하는 도중에도 방금 입력한 말과 전혀 상관 없는 답변을 하는 경우가 많았다. 이는 이전에 사용자가 입력했던 채팅과 관련된 답변을 돌려줘서 그런 것 같았다. 사용자가 현재 입력한 채팅에 가중치를 좀 더 주어야겠다는 생각이 들었다. 멀티턴 챗봇을 직접 사용한 화면이다.

6월 3일 금요일

SSA 평가 지표로 챗봇 성능 평가를 하는 중이다. 대화라서 애매한 부분이 많았으나 일관성 있게 채점하려고 노력했다.