Euisuk's Dev Log

「서쿠 개발노트⭐」

[강의노트] Text Splitting For Retrieval

[강의노트] Text Splitting For Retrieval Introduction 대규모 언어 모델(LLM, Large Language Model)을 이용한 애플리케이션의 성능을 향상시키는 가장 효과적인 전략 중 하나는 큰 텍스트 데이터를 더 작은 조각으로 분할하는 것입니다. LLM에게 필요한 정보만을 제공함으로써 모델의 작업 효율성을 극...

Posted by Euisuk's Dev Log on September 16, 2024

[강의노트] RAG From Scratch : RAG for long context LLMs

[강의노트] RAG From Scratch : RAG for long context LLMs RAG for long context LLMs Introduction 최근 LLM(Long Large Models)의 급격한 발전으로 인해 거대한 양의 데이터를 한 번에 처리할 수 있는 가능성이 열리고 있습니다. 특히, 100만 토큰 이상의 정보를 한...

Posted by Euisuk's Dev Log on September 14, 2024

[강의노트] RAG From Scratch : Query Translation

[강의노트] RAG From Scratch : Query Translation 해당 블로그 포스트는 RAG From Scratch : Coursework 강의 파트 5 - 9 내용을 다루고 있습니다. 비디오 요약 강의 링크 슬라이드 Part...

Posted by Euisuk's Dev Log on September 14, 2024

[강의노트] RAG From Scratch : Query Routing & Structuring

[강의노트] RAG From Scratch : Query Routing & Structuring 해당 블로그 포스트는 RAG From Scratch : Coursework 강의 파트 10 - 11 내용을 다루고 있습니다. 비디오 요약 강의 링크 슬라이드 ...

Posted by Euisuk's Dev Log on September 14, 2024

[강의노트] RAG From Scratch : Query Retrieval 기법

[강의노트] RAG From Scratch : Query Retrieval 기법 해당 블로그 포스트는 RAG From Scratch : Coursework 강의 파트 15 - 18 내용을 다루고 있습니다. 별도의 강좌 내용이 보이지 않아서 실습 코드를 바탕으로 Reverse Enginneering해서 자료를 정리한 내용입니다. 참고 부탁...

Posted by Euisuk's Dev Log on September 14, 2024

[강의노트] RAG From Scratch : Query Indexing 기법

[강의노트] RAG From Scratch : Query Indexing 기법 해당 블로그 포스트는 RAG From Scratch : Coursework 강의 파트 12 - 14 내용을 다루고 있습니다. 비디오 요약 강의 링크 슬라이드 Pa...

Posted by Euisuk's Dev Log on September 14, 2024

[강의노트] RAG From Scratch : Overview

[강의노트] RAG From Scratch : Overview 해당 블로그 포스트는 RAG From Scratch : Coursework 강의 파트 1 - 4 내용을 다루고 있습니다. 비디오 요약 강의 링크 슬라이드 Part 1 (개요) ...

Posted by Euisuk's Dev Log on September 14, 2024

[강의노트] RAG From Scratch : Coursework

[강의노트] RAG From Scratch : Coursework 소개 오늘날의 Generative AI는 기본적인 대형 언어 모델(LLM)을 넘어, 정보 활용의 방식을 획기적으로 변화시키고 있습니다. 그 중에서도 RAG, Retrieval-Augmented Generation은 외부 데이터 소스를 활용하여 더욱 정교하고 도메인에 특화된 정보...

Posted by Euisuk's Dev Log on September 14, 2024

[OpenAI] GPT-4o 다음 버전 떴나!?

[OpenAI] GPT-4o 다음 버전 떴나!? 최근 AI의 발전 속도는 가히 놀라울 정도입니다. 특히 OpenAI의 새로운 모델 GPT-o1은 기존 모델인 GPT-4o에 비해 괄목할 만한 성능 향상을 보여주고 있습니다. GPT-o1은 복잡한 추론을 더 잘 수행하고, 다양한 문제 해결 능력에서 사람 수준의 성과를 보여주며, 안전성 면에서도 뛰어난...

Posted by Euisuk's Dev Log on September 13, 2024

[GPU] nvidia-smi의 시대는 갔다?

[GPU] nvidia-smi의 시대는 갔다? 안녕하세요! 리눅스 사용자이자 GPU 활용에 관심이 많은 분들을 위한 흥미로운 내용을 소개해 드리려고 합니다. 오늘은 NVIDIA GPU 모니터링 도구로 큰 인기를 끌고 있는 nvtop과 함께, 그보다 더 많은 기능을 제공하는 nvitop에 대해 알아보겠습니다. 대부분의 분들이 nvidia-smi를 통...

Posted by Euisuk's Dev Log on September 13, 2024