자신에 대한 고찰

(해당 포스트에서 소개하고 있는 "10가지 프로젝트로 끝내는 트랜스포머 활용 가이드 with 파이토치" 책은 루비페이퍼 출판사로부터 제공받았음을 알려드립니다.) 트랜스포머는 Vaswani가 Attention is all you need 란 눈문을 통해서 소개한 신경망 구조이다. 기존에 나왔던 MLP나 CNN과 같은 기존의 신경망 구조에서 벗어나 내부적으로 해당 도메인의 메커니즘을 학습할 수 있는 구조로 되어 있어서, 초기에 제안되었던 NLP 분야 외에도 영상이나 강화학습에도 확장한 사례가 많이 제시되어 있으며, 요근래 나온 생성형 AI의 거대 모델의 기본 구조가 대부분 트랜스포머로 되어 있다. 물론 학습하는데 필요한 리소스가 많이 필요하다는 점이 일종의 제약일 수 있겠지만, 적어도 기존의 신경망 구조를 ..

(해당 포스트에서 소개하고 있는 "RAG 시스템 구축을 위한 랭체인 실전 가이드" 책은 루비페이퍼로부터 제공받았음을 알려드립니다.) RAG 시스템 구축을 위한 랭체인 실전 가이드 www.rubypaper.co.kr최근에는 생성형 AI가 쓰이지 않는 분야가 거의 없을만큼 다양한 분야에 LLM을 직접 접목시키거나 특수 목적에 맞게 재학습시켜서 사용하는 케이스가 늘기 시작했다. 그런데 지금 이렇게 활발하게 쓰이는 것과 비교했을때 불과 몇달 전만해도 LLM의 문제들이 부각되어서 잘 사용할 수가 없었다. 그중 보통 "세종대왕과 맥북 이야기"로 대변되는 환각 현상은 정확한 답, 아니면 답에 근접한 사실을 필요로 하는 사용자에게는 치명적인 단점 중 하나였었는데, 이를 극복할 수 있는 기술 중 하나가 바로 검색-증강-..