본문 바로가기

llm3

Day 19 생성형AI III / LLM, ChatGPT, RAG, Langchain, LlamaIndex 1. Large Language Model2. ChatGPT3. Retrieve Augmented Generation?4. RAG 아키텍처5. RAG 프레임워크6. Langchain7. LlamaIndex8. RAG의 최신 동향 1. Large Language Model LLM?: 대규모 텍스트 데이터 학습하여 자연어 이해, 생성 할 수 있는 인공지능 언어모델  텍스트 데이터 이해, 생성하여 다양한 자연어 처리(NLP) 작업 수행  최근 LLM -> 트랜스포머 아키텍처 이용[LLM의 학습방법]사전 학습 (Pre-training)   - 대규모 텍스트 코퍼스 사용하여 모델이 언어의 일반적인 패턴, 구조 학습 과정   - 모델이 언어의 기초적인 이해 습득하게 함미세 조정 (Fine-tuning)   - 전 .. 2024. 7. 29.
Day18_생성형AI 프롬프트 엔지니어링 1. LLM2. Prompt Engineering1. LLM What is LLM?: Large Language ModelWhat is LM(Language Model)?: 자연어에 대한 확률 모델: 자연어의 확률 분포확률 모델?: 확률 변수가 특정한 값을 가질 확률을 나타내는 함수: ex) 주사위     2. Prompt Engineering What is Prompt?: 특정 작업을 수행하도록 LLM에 요청하는 자연어 텍스트What is Prompt Engineering?: 생성형 인공 지능(생성형 AI) 솔루션을 안내하여 원하는 결과를 생성하는 프로세스##그럼 어떻게 인공지능한테 질문을 잘할 수 있을까?1)구체적이고 명확한 지시2) 명령의 배경을 설명3) 원하는 결과에 대해 예시로 설명4) 단계별 .. 2024. 7. 26.
Day17_생성형AI I (+Attention is All You Need) 1. 생성형 AI - Generative AI2. Transformer3. Attention is All you need1. 생성형 AI - Generative AI ◆ 생성형 AI?: 기존 데이터 학습하여 새로운 데이터 생성하는 인공지능 기술- Diffusion, GAN, VAE, Transformer, …◆ 활용분야1) 이미지 생성: 예술 작품, 얼굴 이미지, 자연 경관 등2) 텍스트 생성: 소설, 시, 뉴스 기사 등3) 음악 생성: 새로운 음악 작곡, 편곡 등4) 비디오 생성: 새로운 영상, 애니메이션 등##생성형 AI가 주목받는 이유?1) 창의성 증대에 대한 기대 (디자인 및 예술 분야, 엔터테인먼트 산업)2) 데이터 증강 및 확장 (의료분야, 자율주행 등)3) 효율성 및 비용 절감 (데이터 수집.. 2024. 7. 25.

티스토리툴바