ChatGPT

위키백과, 우리 모두의 백과사전.

ChatGPT
원저자OpenAI
발표일2022년 11월 30일(2개월 전)(2022-11-30)
종류인공지능 챗봇
라이선스사유 소프트웨어
웹사이트openai.com/blog/chatgpt/
대화 화면의 일부

ChatGPTOpenAI가 개발한 프로토타입 대화형 인공지능 챗봇이다. ChatGPT는 대형 언어 모델 GPT-3의 개선판인 GPT-3.5를 기반으로 만들어졌으며, 지도학습강화학습을 모두 사용해 파인 튜닝되었다.

ChatGPT는 Generative Pre-trained Transformer(GPT)와 Chat의 합성어이다.[1] ChatGPT는 2022년 11월 프로토타입으로 시작되었으며, 다양한 지식 분야에서 상세한 응답과 정교한 답변으로 인해 집중 받았다. 다만, 정보의 정확도는 중요한 결점으로 지적되고 있다.[2]

학습[편집]

ChatGPT는 지도 학습강화 학습을 활용해 GPT-3.5를 기반으로 세밀하게 조정되었다.[3] 지도학습과 강화학습 모두 인간 트레이너들이 모델의 성능을 개선하기 위해 사용되었다. 지도학습의 경우, 인간 트레이너가 사용자와 ChatGPT 양쪽 모두를 연기하는 대화가 모델에 입력되었다. 강화 단계에서는 인간 트레이너들이 먼저 모델이 이전 대화에서 만든 응답들에 순위를 매겼다. 이 순위들은 TRPO(Trust Region Policy Optimization)의 계산 효율을 개선한 PPO(Proximal Policy Optimization)를 이용하여 보상 모델을 만들기 위해 사용되었다.[4][5][6][7] 이 모델들은 마이크로소프트와 협업하여 마이크로소프트 애저 슈퍼컴퓨팅 인프라 상에서 훈련되었다.

기능[편집]

다른 챗봇들과 달리, ChatGPT는 주고받은 대화와 대화의 문맥을 기억할 수 있으며, 모종의 보고서나 실제로 작동하는 파이썬 코드를 비롯한 인간과 같은 상세하고 논리적인 글을 만들어 낼 수 있다.[8] 일부 저술가는 ChatGPT가 놀라울만큼 인간적이고 상세한 글을 생성할 수 있으며, 이 문제가 학계에서 심각한 문제가 될 수 있다 평가했다.[9]

전작인 InstructGPT에 비해 ChatGPT는 위험하고 부정직한 답변을 가능한 회피하도록 설계되었다. ChatGPT는 2021년 이후에 발생하는 사건에 대해서는 알지 못한다.[10]

같이 보기[편집]

각주[편집]

  1. “Chat GPT – The Most Advance Chatbot in the World”. 《opChatgpt》. 3 Febuary 2023에 확인함. 
  2. Vincent, James (2022년 12월 5일). “AI-generated answers temporarily banned on coding Q&A site Stack Overflow”. 《The Verge. 2022년 12월 5일에 확인함. 
  3. Knox, W. Bradley; Stone, Peter. 《Augmenting Reinforcement Learning with Human Feedback》 (PDF). University of Texas at Austin. 2022년 12월 5일에 확인함. 
  4. OpenAI (2022년 11월 30일). “ChatGPT: Optimizing Language Models for Dialogue”. 2022년 12월 5일에 확인함. 
  5. Vincent, James (2022년 12월 8일). “ChatGPT proves AI is finally mainstream – and things are only going to get weirder”. 《The Verge. 2022년 12월 8일에 확인함. 
  6. Schulman, John; Wolski, Filip; Dhariwal, Prafulla; Radford, Alec; Klimov, Oleg (2017). “Proximal Policy Optimization Algorithms”. arXiv:1707.06347 [cs.LG]. 
  7. van Heeswijk, Wouter (2022년 11월 29일). “Proximal Policy Optimization (PPO) Explained”. 《Towards Data Science》. 2022년 12월 5일에 확인함. 
  8. “ChatGPT: Optimizing Language Models for Dialogue” (영어). 2022년 11월 30일. 2022년 12월 22일에 확인함. 
  9. “AI bot ChatGPT stuns academics with essay-writing skills and usability” (영어). 2022년 12월 4일. 2022년 12월 22일에 확인함. 
  10. scienceblog (2022년 12월 24일). “AI가 설명하는 핵융합. - 과학 블로그”. 2023년 1월 25일에 확인함. 

외부 링크[편집]