bizbuddha

[ 밑줄/연결 ] 언어 모델: 자연어 처리 분야에서 사용되는 모델 중 하나로, 주어진 문장(단어)이 주어졌을 때 다음에 나올 문장(단어)를 예측하는 모델 (단어를 수치로 표현한다 : 임베딩) 단어 혹은 문장을 숫자로 표현해 주는 것이 임베딩 (컴퓨터와 인간에게 맞는 표현으로 변환한다 : 인코딩과 디코딩) 인코딩 : 컴퓨터에서 문자나 기호를 컴퓨터가 이해할 수 있는 코드(0이나 1)로 변환하는 과정을 의미함 디코딩 : 컴퓨터와 인간이 의사소통하기 위해 필요한 하나의 과정이라고 이해가면 됨 디코딩이란 인코딩된 데이터를 원래의 데이터로 변환하는 과정을 의미함 컴퓨터가 이해할 수 있도록 변환된 0과 1을 다시 인간이 이해할 수 있도록 인간의 언어로 표현하는 과정이라고 이해 (트랜스포머, 버트, GPT) 트랜스포..