본문 바로가기

분류 전체보기

 (702)
LangChain에서 PDF 파일을 불러오는 최고의 방법: Loader 소개와 사용법 LangChain은 다양한 PDF 파일 형식을 처리하기 위한 여러 PDF Document Loader를 제공합니다. 이 문서에서는 LangChain의 다양한 PDF Loader를 소개하고, 각 Loader의 장점과 특징, 그리고 어떻게 사용하는지에 대해 다룹니다. 특히 LangChain의 DocumentLoader 인터페이스를 활용하면 다양한 Loader를 동일한 방식으로 사용할 수 있다는 장점이 있어, 코드의 유지보수성이 높고 모듈 교체가 쉽다는 점을 설명하겠습니다.LangChain의 DocumentLoader가 주는 이점LangChain의 DocumentLoader는 파일을 처리할 때 다양한 소스에서 데이터를 불러올 수 있는 통일된 인터페이스를 제공합니다. 이를 통해 사용자는 필요한 Loader만 선..
넷플릭스의 키-값 데이터 추상화 기술, 데이터 혁신을 이끄는 핵심! 넷플릭스는 전 세계 수백만 명의 사용자가 매끄럽게 스트리밍 서비스를 이용할 수 있도록 대규모의 견고한 백엔드 인프라를 운영하고 있습니다. 그 중심에는 확장성과 고가용성을 자랑하는 Apache Cassandra와 같은 분산형 NoSQL 데이터베이스가 있습니다. 그러나 다양한 데이터베이스의 도입과 사용사례 증가로 인해 복잡성이 커지면서 개발자들이 데이터 저장소를 효율적으로 활용하는 데 어려움을 겪었습니다.이를 해결하기 위해 넷플릭스는 키-값(Key-Value, KV) 데이터 추상화 계층을 도입하였습니다. 이 기술은 데이터 액세스를 간소화하고 다양한 서비스가 최적의 데이터 저장소를 사용할 수 있도록 지원합니다. 이번 블로그에서는 넷플릭스의 KV 추상화 기술과 그 핵심 요소들을 살펴보겠습니다.1. 넷플릭스의 키..
노트북을 넘어, AI와 함께하는 새로운 메모 혁명: NotebookLM의 모든 것 NotebookLM이란 무엇인가?NotebookLM은 구글이 개발한 메모 작성 애플리케이션으로, 대규모 언어 모델(LLM)인 구글 제미나이(Gemini) 기술을 바탕으로 한 생성형 AI 기능을 제공합니다. 이 앱은 단순히 메모를 정리하는 것에 그치지 않고, 사용자가 제공한 자료를 기반으로 정보를 분석하고 요약해주는 가상 연구 보조원 역할을 수행합니다. 처음 이 앱을 접하면 Microsoft OneNote 같은 메모 앱을 떠올릴 수 있지만, NotebookLM은 그보다 훨씬 더 진화한 기능을 자랑합니다. 사용자가 업로드한 문서를 기반으로 AI가 사실을 요약하고, 복잡한 개념을 설명하며, 새롭고 독창적인 아이디어를 생성할 수 있는 능력을 제공합니다​주요 기능 및 특징NotebookLM은 단순한 메모 앱이 아..
Python 3.12의 혁신! 더욱 유연해진 f-string과 새로운 기능 탐구 Python 3.12: 새로운 기능과 변화Python은 매번 새로운 버전을 발표할 때마다 프로그래머들이 기대하는 다양한 기능과 성능 향상을 제공합니다. 2024년 4월 9일에 공개된 Python 3.12 역시 예외가 아닙니다. 특히 유연해진 f-string과 새로운 타입 어노테이션, 성능 개선 등으로 인해 많은 주목을 받았습니다. 이번 블로그에서는 Python 3.12에서 추가된 주요 기능들을 살펴보고, 이를 어떻게 활용할 수 있을지 알아보겠습니다.1. 더욱 유연해진 f-string (PEP 701)f-string은 Python 3.6부터 도입된 기능으로, 문자열 내에서 변수를 바로 사용할 수 있는 강력한 도구입니다. 하지만 이전 버전에서는 몇 가지 제한이 있어 사용자들이 불편함을 겪기도 했습니다. Py..
Maven vs Gradle: 빌드 자동화 도구의 진화와 Gradle의 강점 빌드 자동화 도구란 무엇인가?소프트웨어 개발에서 빌드 프로세스는 소스 코드를 실행 파일로 컴파일하고, 종속성을 처리하며, 배포 가능한 패키지를 생성하는 과정입니다. 빌드 자동화 도구는 이 과정들을 자동으로 처리해 개발자의 시간을 절약하고, 에러를 줄여주는 역할을 합니다. 대표적인 빌드 도구로는 Maven과 Gradle이 있습니다. 이 블로그에서는 Gradle에 대한 설명과 더불어 Maven과 Gradle의 비교, 그리고 Gradle의 도입 장점을 살펴보겠습니다Gradle이란?Gradle은 유연하고 확장 가능한 빌드 자동화 도구로, Apache Maven과 Apache Ant의 장점을 결합한 형태입니다. Gradle은 선언형(Declarative)인 Maven과 다르게 스크립트 기반의 빌드 설정을 사용합니..
Argo CD: Kubernetes 배포를 혁신하는 GitOps 솔루션과 그 모든 것 Argo CD란 무엇인가?Argo CD는 Kubernetes 환경에서 애플리케이션의 배포와 관리를 자동화하는 GitOps 도구입니다. GitOps는 Git을 중심으로 인프라와 애플리케이션의 상태를 관리하는 접근 방식을 뜻하며, Git에 저장된 선언적 구성 파일을 기준으로 클러스터의 상태를 유지합니다. 쉽게 말해, Git에 기록된 코드를 Kubernetes 클러스터에 자동으로 배포하고 그 상태를 실시간으로 동기화하는 도구가 Argo CD입니다.예를 들어, 여러분의 애플리케이션이 현재 Kubernetes 클러스터에서 버전 1.0으로 실행되고 있다고 가정해봅시다. Git에 새로운 버전 1.1이 커밋되면, Argo CD는 자동으로 이 변경 사항을 감지하고, Kubernetes 클러스터에 새로운 버전을 배포합니다..
백준 알고리즘 문제 풀이 가이드: 코딩 면접 대비 완벽 준비-21939 문제 추천 시스템 Version 1 편 (python) 문제 살펴보기!!문제 링크 : https://www.acmicpc.net/problem/21939솔루션 살펴보기!!import sysimport heapqclass ProblemManager: def __init__(self): # Dictionary to store current problems with their levels self.num_to_level = {} # Max heap: (-level, -num) self.max_heap = [] # Min heap: (level, num) self.min_heap = [] def add_problem(self, num, level): """Add a n..
Go 언어로 RAG(검색 증강 생성) 활용하여 LLM 어플리케이션을 더욱 스마트하게 구현하는 방법 최근 대형 언어 모델(LLM)의 성능이 발전하면서 인공지능(AI) 기반 어플리케이션의 가능성이 크게 확장되었습니다. 특히 검색 증강 생성(RAG, Retrieval-Augmented Generation)은 LLM의 한계를 극복하고 더욱 스마트한 응답을 제공하기 위해 주목받고 있습니다. 본 글에서는 Go 언어를 사용하여 RAG를 활용한 LLM 어플리케이션을 구축하는 방법을 소개하고, 그 과정에서 발생할 수 있는 다양한 문제를 어떻게 해결할 수 있는지 살펴보겠습니다.RAG란 무엇인가?RAG는 LLM이 외부 데이터베이스에서 관련 정보를 검색한 후, 그 데이터를 바탕으로 답변을 생성하는 방식입니다. 이를 통해 모델은 더 정확하고 구체적인 정보를 제공할 수 있으며, 최신 데이터에 대한 접근성을 높일 수 있습니다...

티스토리툴바