Euisuk’s Dev Log

[가이드] RAG 평가지표 입문: RAGAS·TruLens·DeepEval로 검색과 답변 나누어 보기

RAG는 자료를 보고 답하는 AI입니다 사내 챗봇에 “연간 교육비 한도는 얼마이고, 신청 전에 누구의 승인을 받아야 하나요?”라고 물었다고 생각해 보겠습니다. 답변은 매끄럽습니다. 그런데 한도는 맞고 승인자는 틀렸다면, 이 챗봇을 잘 만들었다고 할 수 있을까요? RAG 평가는 답변이 그럴듯한지를 넘어, 필요한 자료를 찾았는지와 그 자료를 제대로 사...

Posted by Euisuk's Dev Log on October 24, 2026

[TREND] State of AI Report 2026 — 하네스·추론 경제·안전으로 읽는 AI의 변화

2026년 AI를 읽는 관점: 모델, 실행 시스템, 그리고 검증 State of AI Report 2026은 AI의 발전을 모델 성능만으로 설명하기 어려워졌다는 보고서입니다. 모델을 둘러싼 도구와 실행 환경이 성과를 바꾸고, 실제 업무의 완료 여부가 평가의 중심으로 이동하며, 그 실행을 뒷받침할 전력·데이터센터·안전 통제가 함께 중요해집니다. Na...

트렌드 AI Agent 머신러닝 NVIDIA

Posted by Euisuk's Dev Log on October 12, 2026

[OpenAI] DevDay 2026 키노트 정리: 상시 동작 에이전트 Dots, GPT-6.1 Sol, Ultrafast, Codex Cloud까지

들어가며 2026년 9월 29일(현지 시각) 샌프란시스코에서 OpenAI DevDay 2026 키노트가 열렸습니다. 약 54분 동안 20개가 넘는 발표가 쏟아졌는데, 전체를 관통하는 흐름은 하나로 요약됩니다. 사용자가 매번 지시하는 “챗봇”에서, 권한과 맥락을 가지고 24시간 스스로 일하는 “에이전트”로 제품의 중심이 옮겨가고 있다는 점입니다. 키...

OpenAI ChatGPT AI Agent Conference

Posted by Euisuk's Dev Log on September 30, 2026

[Repo Review] OpenResearch: Git 스냅샷으로 연구 에이전트의 실험을 추적하는 작업 공간

들어가며 연구 에이전트가 코드를 수정하고 실험을 실행하기 시작하면, 대화 내용만으로는 결과의 출처를 따라가기 어렵습니다. 어느 가설에서 갈라진 코드인지, 실제 실행한 커밋은 무엇인지, 실행 중에 에이전트가 파일을 다시 고치지는 않았는지까지 연결해야 합니다. OpenResearch는 이 문제를 에이전트 세션, Git 기반 실험 계보, 실행 기록을 한 ...

Repo Review AI Agent Git Tools

Posted by Euisuk's Dev Log on September 29, 2026

[Paper Review] Coding Agents are Strong Prompt Optimizers — 실행 기록 전체를 분석하는 프롬프트 최적화

논문 개요와 전체 구조 프롬프트를 개선할 때는 보통 후보 지시문을 만들고, 에이전트를 다시 실행하고, 검증 점수가 좋아진 후보를 남깁니다. Coding-Agent Skill Distillation(CASD)은 이미 수집한 실행 기록을 코딩 에이전트에게 분석하게 한 뒤, 행동 규칙을 담은 Markdown 스킬 파일을 한 번 작성하는 방식입니다. 여기서...

Paper Review AI Agent Prompt Engineering NLP

Posted by Euisuk's Dev Log on September 29, 2026

[Paper Review] SkillGym: 사람의 스킬을 LLM의 실행 능력으로 학습시키기

논문 개요와 전체 구조 AI Agent에게 SKILL.md를 제공하면 작업 절차를 알려줄 수 있습니다. 그러나 문서를 읽을 수 있다는 사실과 실제로 복잡한 작업을 끝낼 수 있다는 사실은 다릅니다. 파일을 확인하고, 여러 도구를 연결하고, 실패를 수정한 뒤, 결과가 요구사항을 만족하는지 확인하는 능력이 필요합니다. SkillGym은 이처럼 여러 단계에...

Paper Review AI Agent NLP 딥러닝

Posted by Euisuk's Dev Log on September 28, 2026

[Repo Review] Opus 5.5 영상 프롬프팅: 사례에서 배우는 제작 경로와 검수 방법

“Opus로 만들었다”는 말에서 한 단계 더 들어가기 Claude Opus 5.5로 만든 영상이 인상적일 때, 바로 같은 프롬프트를 찾고 싶어집니다. 그런데 완성된 영상만으로는 모델이 무엇을 했고, 어떤 프로그램이 화면을 그렸으며, 사람이 무엇을 제공했는지 알기 어렵습니다. 짧은 요청 하나 뒤에 이미 완성된 애니메이션 엔진과 브랜드 자산이 있을 수도...

Repo Review Claude Anthropic Prompt Engineering Visualization

Posted by Euisuk's Dev Log on September 28, 2026

[Paper Review] Downside-Controlled Online Forecast Combination under Delayed and Revised Outcomes

논문 개요와 전체 구조 Downside-Controlled Online Forecast Combination under Delayed and Revised Outcomes는 다시 학습할 수 없는 시계열 예측기에 보정 계층을 붙일 때, 평균 정확도 향상과 개별 데이터에서의 성능 악화를 어떻게 함께 평가해야 하는지 다룹니다. Minkyoung Kim, ...

Paper Review 시계열 머신러닝

Posted by Euisuk's Dev Log on September 28, 2026

[가이드] Claude Agent SDK 입문: Claude Code 연동부터 첫 실행과 서비스 배포까지

Claude Agent SDK로 무엇을 만들 수 있을까요? 폴더를 읽고 문서를 정리하거나, 데이터 분석 결과를 검토하고 보고서를 만드는 일을 생각해 보겠습니다. 일반적인 채팅에서는 사람이 자료를 골라 전달하고 답변을 다시 파일로 옮깁니다. 에이전트 애플리케이션은 이 사이의 작업을 도구 호출로 수행합니다. Claude Agent SDK는 Claude ...

Claude Anthropic AI Agent MCP Python

Posted by Euisuk's Dev Log on September 28, 2026

[Paper Review] Return or Revise? — 검색 근거로 답을 고칠 때와 지킬 때

논문 개요와 전체 구조 검색 증강 생성(Retrieval-Augmented Generation, RAG)에서 검색한 문서를 읽고 답을 다시 쓰면 정확도가 올라갈 수 있습니다. 그러나 이미 맞는 답을 엉뚱한 답으로 바꾸는 경우도 있습니다. Return or Revise?는 질문에 대한 초안과 검색 결과가 준비된 시점에, 초안을 그대로 반환할지 아니면 ...

Paper Review RAG NLP 딥러닝 머신러닝

Posted by Euisuk's Dev Log on September 27, 2026

Euisuk's Dev Log

[가이드] RAG 평가지표 입문: RAGAS·TruLens·DeepEval로 검색과 답변 나누어 보기

[TREND] State of AI Report 2026 — 하네스·추론 경제·안전으로 읽는 AI의 변화

[OpenAI] DevDay 2026 키노트 정리: 상시 동작 에이전트 Dots, GPT-6.1 Sol, Ultrafast, Codex Cloud까지

[Repo Review] OpenResearch: Git 스냅샷으로 연구 에이전트의 실험을 추적하는 작업 공간

[Paper Review] Coding Agents are Strong Prompt Optimizers — 실행 기록 전체를 분석하는 프롬프트 최적화

[Paper Review] SkillGym: 사람의 스킬을 LLM의 실행 능력으로 학습시키기

[Repo Review] Opus 5.5 영상 프롬프팅: 사례에서 배우는 제작 경로와 검수 방법

[Paper Review] Downside-Controlled Online Forecast Combination under Delayed and Revised Outcomes

[가이드] Claude Agent SDK 입문: Claude Code 연동부터 첫 실행과 서비스 배포까지

[Paper Review] Return or Revise? — 검색 근거로 답을 고칠 때와 지킬 때

FEATURED TAGS

ABOUT ME

FRIEND SITES