쉽게 빠르게 익히는 실전 LLM by 시난 오즈데미르

[ 밑줄/연결 ]

 

1단계 문서 저장

(1) 임베딩을 위한 문서 저장 : 관리하기 더 쉽게 하기 위해 어떤 문서든 청크로 나눕니다.(2) 의미 정보를 인코딩하기 위해 텍스트 임베딩 생성 : OpenAI 임베딩(3) 나중에 퀴리가 주어졌을 때 검색할 수 있도록 임베딩을 데이터베이스에 저장: 파인콘

 

2단계 문서 검색

(1) 사용자에게 전처리되고 정리할  있는 쿼리 : FastAPI

(2) 후보 문서 검색 : OpenAI 임베딩 + 파인콘

(3) 필요한 경우 후보 문서 재순위화 : 크로스-인코더

(4) 최종 검색 결과 반환 : FastAPI

 

[ 자평 ]

 

원서는 2023년 9월, 번역서는 2024년 2월 나왔다.

그 당시에는 몰랐는데 2024년 12월 18일 재독하면서 보니 이리  내용이나 내용을 전달하는 기술 방식에서 낡았다.

같은 내용이라도 최신 기술과 전달 방식이 더 나은 책들이 벌써 꽤 많다.