본문 바로가기

전체 글

 (394)
RAG의 완성, Post Retrieval로 검색 정확도 극대화하는 방법들! Post Retrieval: 검색 후에도 이어지는 정교한 최적화RAG(Retrieval-Augmented Generation)에서 Post Retrieval은 이름 그대로 Retrieval 단계 이후에 수행되는 과정을 의미합니다. Retrieval 단계에서 추출된 문서들을 기반으로, 더욱 정확한 결과를 얻기 위해 후속 작업을 수행합니다. 이 과정은 검색의 정확도를 한층 더 높이며, 사용자가 원하는 답변을 더욱 정밀하게 제공합니다. 이번 글에서는 Post Retrieval의 주요 기법인 Reranker, Context Reorder, Compressor에 대해 자세히 알아보겠습니다.1. Reranker: 정교한 분석으로 정확도를 높이다Reranker란?Reranker는 Query와 Document 쌍의 관..
RAG의 핵심, Retrieval 기술로 검색 성능 극대화하기! Retrieval: RAG의 성능을 좌우하는 핵심 단계RAG(Retrieval-Augmented Generation)는 LLM(Large Language Model)의 능력을 확장하고 보완하는 기술로, LLM이 보다 정확하고 풍부한 정보를 제공할 수 있도록 도와줍니다. 그중에서도 Retrieval 단계는 사용자의 쿼리에 맞는 적절한 정보를 찾아내는 중요한 역할을 담당합니다. 이 글에서는 Retrieval 단계의 핵심 기술인 Hybrid Search, Hypothetical Question, **HyDE(Hypothetical Document Embeddings)**에 대해 살펴보겠습니다. 각각의 기술이 어떤 원리로 동작하며, 언제 효과적인지 알아볼까요?1. Hybrid Search: 시맨틱과 키워드 검색..
LLM의 성능을 높이는 비밀, Pre-Retrieval의 역할과 필요성! Pre-Retrieval: LLM 성능을 위한 첫 단계많은 사람들이 LLM(Large Language Model)을 사용할 때, 단순히 질문만 입력하면 정확한 답변을 받을 수 있을 거라 기대합니다. 하지만 실제로는 사용자가 입력한 쿼리(Query)가 LLM에 의해 잘 이해되지 않을 때가 많습니다. 이러한 문제를 해결하고, 더욱 정확한 검색 결과를 얻기 위해서 Pre-Retrieval이라는 단계가 필요합니다. Pre-Retrieval은 사용자의 쿼리를 LLM이 더 잘 이해할 수 있도록 사전에 최적화하는 과정으로, 실제 검색(Retrieval) 전에 수행됩니다.그렇다면, Pre-Retrieval 단계에서 어떤 작업들이 이루어질까요? 이번 글에서는 Pre-Retrieval의 주요 역할과 그 필요성에 대해 알아..
AI의 진화와 생명과학 혁신: 알파폴드와 노벨 화학상 수상의 의의 최근 과학계에서 주목할 만한 진전은 인공지능(AI)이 기술 혁신을 넘어서 생명과학의 패러다임을 변화시키고 있다는 것입니다. 그 중심에는 구글 딥마인드의 연구팀이 개발한 **알파폴드(AlphaFold)**가 자리하고 있습니다. 특히 알파폴드의 창시자인 데미스 허사비스와 존 점퍼가 2024년 노벨 화학상을 수상하며 이 기술의 중요성이 다시 한번 부각되었습니다. 이번 글에서는 알파폴드의 개발 역사와 생명과학에 미친 영향, 그리고 노벨상 수상의 의미를 심도 있게 논의하겠습니다.단백질 접힘 문제: 반세기 동안 풀리지 않은 생명과학의 난제단백질은 생명체의 거의 모든 기능을 담당하는 중요한 생체 분자입니다. 단백질의 기능은 그 구조에 의해 결정되며, 따라서 단백질이 어떤 방식으로 접히는지 예측하는 것은 생명과학과 의..
백준 알고리즘 문제 풀이 가이드: 코딩 면접 대비 완벽 준비-4134 다음 소수 편 (python) 문제 살펴보기!!문제 링크 : https://www.acmicpc.net/problem/4134솔루션 살펴보기!!def is_prime(n): # n이 2보다 작으면 소수가 아님 if n = n: continue x = pow(a, d, n) if x == 1 or x == n - 1: continue # 제곱을 반복하여 소수 여부를 판정 for _ in range(s - 1): x = pow(x, 2, n) if x == n - 1: break else: return False ..
Python 3.13의 새로운 기능: 무엇이 달라졌을까요? 10월 7일, Python 3.13이 드디어 출시되었습니다! 이번 버전에서는 개발자들이 특히 주목할 만한 여러 흥미로운 변화가 있었습니다. 새로운 인터랙티브 인터프리터부터 자유 스레드 모드(Free-threaded mode) 지원, 그리고 실험적인 JIT(Just-In-Time) 컴파일러까지 많은 기능이 추가되었죠. 이 글에서는 Python 3.13에서 도입된 주요 기능과 변화들을 간단히 정리해 보겠습니다.1. 새로워진 인터랙티브 인터프리터Python 3.13에서는 인터랙티브 모드에서 사용되는 셸이 대폭 개선되었습니다. 이제 기본 REPL이 PyPy 프로젝트의 코드를 기반으로 새롭게 구성되어, 멀티라인 편집, 컬러 지원, 도움말 탐색 등의 기능을 더 쉽게 사용할 수 있습니다. 사용자들은 명령 기록을 F2..
데이터 시각화를 빠르게! Streamlit으로 웹 애플리케이션 만들기 프론트엔드 개발을 하지 않더라도, 개발자라면 데이터 분석 결과나 모델의 성능을 웹페이지를 통해 보여줘야 하는 상황이 종종 발생합니다. 특히 머신러닝 엔지니어의 경우, 모델의 성능 개선 정도를 명확히 전달하기 위해 결과물을 웹으로 시각화하는 경우가 많습니다. 이때 간단하고 빠르게 웹 프론트를 구현할 수 있는 도구가 필요할 때가 있는데, 바로 그럴 때 Streamlit이 유용합니다.이 글에서는 Streamlit이 무엇인지, 어떤 특장점이 있는지, 그리고 기본적인 사용 방법에 대해 알아보겠습니다.Streamlit이란?Streamlit은 데이터를 시각화하고 공유할 수 있는 웹 애플리케이션을 빠르게 개발할 수 있도록 도와주는 파이썬 기반의 프레임워크입니다. Streamlit의 공식 웹사이트에서는 "데이터 애플리케..
Advanced RAG의 등장과 Naive RAG의 한계: 왜 우리는 더 나은 솔루션을 필요로 하는가? Retrieval-Augmented Generation (RAG)은 언어 모델의 성능을 크게 향상시킬 수 있는 기술로, 최근 AI 연구와 응용에서 중요한 위치를 차지하고 있습니다. RAG의 출현은 단순히 데이터를 학습하는 언어 모델을 넘어, 방대한 외부 지식 데이터베이스와 결합하여 필요한 정보를 실시간으로 검색하고, 이를 바탕으로 보다 정확한 답변을 생성하는 능력을 제공하려는 시도에서 비롯되었습니다. 특히 의료, 법률 등 높은 정확성과 신뢰성이 요구되는 분야에서 RAG는 필수적인 기술로 자리 잡고 있습니다.그러나 Naive RAG에는 여러 한계가 존재합니다. 기본적인 RAG 시스템에서는 단순한 검색과 생성의 반복으로 인해 불필요한 데이터 중복과 노이즈가 발생할 수 있습니다. 특히, 의미론적 유사성을 고려..
획기적인 AI 기술: Apple의 Depth Pro, 단일 이미지로 3D 깊이 지도 생성! Apple의 AI 연구팀이 머신이 깊이를 인식하는 방식을 혁신적으로 발전시킬 수 있는 새로운 모델을 개발했습니다. 이 기술은 증강 현실(AR)부터 자율주행차까지 다양한 산업에 변화를 가져올 잠재력을 지니고 있습니다.이번 시스템인 Depth Pro는 단일 2D 이미지에서 고해상도의 3D 깊이 지도를 단 몇 초 만에 생성할 수 있는 능력을 가지고 있습니다. 기존에 필요했던 카메라 데이터 없이도 가능한 점에서 기존 모델과는 확연히 다릅니다.혁신적인 기술적 기여Depth Pro는 **멀티스케일 비전 트랜스포머(multi-scale vision transformer)**를 통해 이미지의 전체 맥락과 세부 사항을 동시에 처리할 수 있습니다. 이러한 효율적인 아키텍처 덕분에 Depth Pro는 기존보다 빠르고 정밀한..
성수동 핫플 한정선 찹쌀떡, 이제 여의도에서 만나는 법! 안녕하세요, 디저트를 사랑하는 여러분! 오늘은 성수동에서 큰 인기를 끌고 있는 찹쌀떡 브랜드 '한정선'을 이제 여의도에서도 만나볼 수 있다는 소식을 전해드리려고 해요. 다양한 과일과 달콤함을 가득 품은 참쌀떡 디저트를 여의도 더현대서울에서 즐길 수 있게 되었답니다. 부모님이나 아이들도 좋아할 만한 이 디저트는 특별한 선물로도 손색이 없어요. 포장마저 고급스럽게 되어 있어 받는 사람도, 주는 사람도 기분이 좋아질 선물이랍니다. 이제 기다림의 기쁨이 있는 한정선 찹쌀떡을 자세히 소개할게요! 1. 고급스러운 찹쌀떡, 다양한 맛의 향연한정선의 찹쌀떡은 다양한 과일과 재료를 활용해 독특한 맛을 자랑해요. 입 안 가득히 퍼지는 쫀득함과 달콤함이 매력적이죠. 인기 메뉴 몇 가지를 소개해드릴게요:두바이st 찹쌀떡: 진..

티스토리툴바