Lớp học ứng dụng các mô hình AI cho lập trình viên - AI for Developers

Slide RAG System

<img style="max-width: 100%; height: auto;" src="https://storage.googleapis.com/mle-courses-prod/users/61b6fa1ba83a7e37c8309756/private-files/79cc1f70-2eba-11ef-bde4-3b0f2c27b69f-1718803855960.gif" width="800" height="1007" isdraggable="true">RankGPT: <a target="_blank" rel="noopener noreferrer nofollow" href="https://github.com/sunnweiwei/RankGPT">https://github.com/sunnweiwei/RankGPT</a>Chunking Optimization: <a target="_blank" rel="noopener noreferrer nofollow" href="https://medium.com/@thallyscostalat/chunking-strategies-optimization-for-retrieval-augmented-generation-rag-in-the-context-of-e47cc949931d">https://medium.com/@thallyscostalat/chunking-strategies-optimization-for-retrieval-augmented-generation-rag-in-the-context-of-e47cc949931d</a>Đường đẫn dự án: <a target="_blank" rel="noopener noreferrer nofollow" href="https://github.com/bangoc123/retrieval-backend-with-rag">https://github.com/bangoc123/retrieval-backend-with-rag</a>

Các thành phần chính của một hệ thống RAG

[Zoom 3-8-2024] Video

RAG là gì

<ul><li>Generating Synthetic Dataset cho RAG</li><li>Semantinc Router</li><li>Reflection</li><li>Graph trong RAG</li><li>Đọc paper GraphRAG</li><li>Xây dựng Graph bằng Neo4J và thiết kế RAG dựa trên Graph này</li></ul>

[Zoom 3-8-2024] RAG và xây dựng hệ thống Chatbot hiện đại

Sử dụng thành thục các API của ChatGPT<ul><li>GPT 3.5 Turbo</li><li>GPT-4 and GPT-4 Turbo</li><li>GPT-4o</li></ul>Sử dụng thành thục các API AI của Google<ul><li>API Gemini</li></ul>API các mô hình Open Source<ul><li>API LLAMA thông qua Together AI</li></ul>

[Zoom 29-6-2024] Sử dụng API liên quan tới văn bản

<ul><li>Giới thiệu kỹ thuật Prompt Engineering</li><li>Setup client giao tiếp với Backend</li></ul>

[Zoom 9-7-2024] Kỹ thuật Prompt Engineering

Xem kỹ hướng dẫn <a target="_blank" rel="noopener noreferrer nofollow" href="https://docs.google.com/presentation/d/1Rf-CkvW_JgZATZ5UgdBNcZPrUvneynKST9W4HxmHND4/edit?usp=sharing">tại đây</a>.Trong bài có 2 TODO mỗi TODO 20 điểm

Bài tập 1 - Xây dựng ứng dụng chuyển phác thảo thành hình ảnh

API<ul><li>DALL E</li><li>Midjourney</li><li>Stability AI<ul><li>Ứng dụng Edit đối tượng trong ảnh</li><li>Ứng dụng chuyển phác thảo thành ảnh</li><li>Ứng dụng Sinh ảnh</li></ul></li></ul>

Sử dụng API liên quan tới hình ảnh

<ul><li>Hướng dẫn sử dụng Colab + Ngrok để tạo Endpoint cho API</li><li>Cách sử dụng mô hình có sẵn trên HuggingFace: Mô hình Gemma 2 + LLAMA 3</li></ul>

[Zoom 20-7-2024] Tùy biến mô hình

Xem kỹ hướng dẫn <a target="_blank" rel="noopener noreferrer nofollow" href="https://docs.google.com/presentation/d/1LH4eYQVe5wVYat3O5dTfdE39q5qlsWqyf-5RP6W8YUc/edit?usp=sharing">tại đây</a>.Trong bài có 4 TODO mỗi TODO 40 điểm

Bài tập 2 - Xây dựng ứng dụng phân đoạn hình ảnh với SAM 2

<ul><li>Docker là gì?</li><li>Phân biệt image và container</li><li>Cài đặt Docker</li><li>Xây dựng Docker Image và chạy docker Container</li><li>Docker container</li></ul>

Docker + Cloud

<ul><li>Thực hành Langchain + LLAMA Index</li><li>Xây dựng hệ thống RAG hoàn toàn Open Source</li><li>Các công cụ xây dựng:<ul><li>Ollama để chạy mô hình</li><li>Langchain để xây quy trình truy xuất thông tin</li></ul></li></ul>

[Zoom 10-8-2024 ] Thực hành Langchain + LLAMA Index

<ul><li>API Tech to Speech</li><li>API Speech to Text</li><li>API video</li></ul>

[Zoom 17-8-2024] Sử dụng API liên quan tới âm thanh + Video

<ul><li>Công cụ Gradio/StreamLit</li><li>Lập trình giao diện mẫu bằng ReactJS/NextJS</li><li>Kết nối giao diện với API</li><li>Streaming Data từ API lên giao diện</li><li>Các giao diện mẫu<ul><li>Giao diện Chatbot</li><li>Giao diện sinh ảnh</li></ul></li></ul>

[Zoom 24-8-2024] Lập trình giao diện 

<ul><li>Tự đào tạo mô hình GPT</li><li>Tự đào tạo mô hình LLAMA</li><li>Cách đào tạo phân tán</li></ul>

Thực hành đào tạo mô hình riêng của bạn

Hướng dẫn: <a target="_blank" rel="noopener noreferrer nofollow" href="https://docs.google.com/presentation/d/14D_YwOIfmJVQiTjce7DJMZhw_Ac8HRXZdm2N8TO7GNc/edit?usp=sharing">https://docs.google.com/presentation/d/14D_YwOIfmJVQiTjce7DJMZhw_Ac8HRXZdm2N8TO7GNc/edit?usp=sharing</a>

Dự án 2 - Video Generation

Xây dựng hệ thống chatbot cho Shop bán Hoa

Danh sách chủ đề

[Zoom 3-8-2024] RAG và xây dựng hệ thống Chatbot hiện đại

1. RAG là gì

1.1. Slide RAG System

1.2. Các thành phần chính của một hệ thống RAG

1.3. [Zoom 3-8-2024] Video

Bài học