Lớp học ứng dụng AI cho lập trình viên 04 - AI for devs 04

Notebook: <a target="_blank" rel="noopener noreferrer nofollow" href="https://colab.research.google.com/drive/1CHbeLXLLgUQLisG8rif5u7kyapfr0z-9?usp=sharing">https://colab.research.google.com/drive/1CHbeLXLLgUQLisG8rif5u7kyapfr0z-9?usp=sharing</a>

Thực hành đào tạo mô hình riêng của bạn

Thực hành đào tạo mô hình ngôn ngữ của riêng bạn

Code load dữ liệu

Code đào tạo

Script training

Đào tạo mô hình ngôn ngữ trên Tiếng Việt

[Dev 01] Zoom 31-08-2024

[Dev 02] Zoom 23-10-2024

[Dev 03] Zoom 21-12-2024

[Dev 04] Zoom 01-03-2025

Video

<ul><li>Tự đào tạo mô hình GPT</li><li>Tự đào tạo mô hình LLAMA</li><li>Cách đào tạo phân tán</li></ul>

Sử dụng thành thục các API của ChatGPT<ul><li>GPT 3.5 Turbo</li><li>GPT-4 and GPT-4 Turbo</li><li>GPT-4o</li></ul>Sử dụng thành thục các API AI của Google<ul><li>API Gemini</li></ul>API các mô hình Open Source<ul><li>API LLAMA thông qua Together AI</li></ul>

Sử dụng API liên quan tới văn bản

4 TODO = 40 điểm<a target="_blank" rel="noopener noreferrer nofollow" href="https://docs.google.com/presentation/d/1lYXAraE_O5bvDZkLd7PQgRUXmqjo7Fh-RcNfhdpRRqY/edit?usp=sharing">https://docs.google.com/presentation/d/1lYXAraE_O5bvDZkLd7PQgRUXmqjo7Fh-RcNfhdpRRqY/edit?usp=sharing</a>

Bài tập 1 - Lập trình LLMs Playground

<ul><li>Công cụ Gradio/StreamLit</li><li>Lập trình giao diện mẫu bằng ReactJS/NextJS</li><li>Kết nối giao diện với API</li><li>Streaming Data từ API lên giao diện</li><li>Các giao diện mẫu<ul><li>Giao diện Chatbot</li><li>Giao diện sinh ảnh</li></ul></li></ul>

Lập trình giao diện 

Mọi thứ về lớp học

<ul><li>Giới thiệu kỹ thuật Prompt Engineering</li><li>Setup client giao tiếp với Backend</li></ul>

Kỹ thuật Prompt Engineering

<ul><li>Agents là gì?</li><li>LLM Agents</li><li>Đọc nghiên cứu ReAct</li><li>Kỹ thuật Prompt Engineering</li><li>Đào tạo LLMs để trở thành Agents</li></ul>

Agents và các bài toán liên quan

<ul><li>Hướng dẫn sử dụng Colab + Ngrok để tạo Endpoint cho API</li><li>Cách sử dụng mô hình có sẵn trên HuggingFace: Mô hình Gemma 2 + LLAMA 3</li><li>Training model đơn giản phân loại với Pytorch</li><li>Đóng gói mô hình phân loại với Docker</li></ul>

Tùy biến mô hình và deploy riêng

<ul><li>Docker là gì?</li><li>Phân biệt image và container</li><li>Cài đặt Docker</li><li>Xây dựng Docker Image và chạy docker Container</li><li>Docker container</li></ul>

Docker + Cloud

Deploy riêng mô hình với Docker + Cloud

<ul><li>Generating Synthetic Dataset cho RAG</li><li>Semantic Router</li><li>Reflection</li></ul>

RAG và xây dựng hệ thống Chatbot hiện đại

<ul><li>Hướng dẫn Crawl dữ liệu từ trang Web bất kỳ</li><li>Hướng dẫn sử dụng MongoDB</li></ul>

[Bổ trợ thêm] MongoDB + Crawl dữ liệu

<ul><li>Thực hành Langchain + LLAMA Index</li><li>Xây dựng hệ thống RAG hoàn toàn Open Source</li><li>Các công cụ xây dựng: <ul><li>Ollama để chạy mô hình</li><li>Langchain để xây quy trình truy xuất thông tin</li></ul></li></ul>

Thực hành Langchain + LLAMA Index

<ul><li>Xây dựng đồ thị tri thức Knowledge graph từ văn bản</li><li>Thực hành RAG sử dụng Cypher Query trên Neo4j</li><li>Xây dựng Embeddings sử dụng Graph Convolution Network</li><li>Các trending về RAG trên đồ thị</li></ul>

Rag trên đồ thị - Graph RAG

API<ul><li>DALL E</li><li>Midjourney</li><li>Stability AI<ul><li>Ứng dụng Edit đối tượng trong ảnh</li><li>Ứng dụng chuyển phác thảo thành ảnh</li><li>Ứng dụng Sinh ảnh</li></ul></li></ul>

Sử dụng API liên quan tới hình ảnh + âm thanh + video

<ul><li>API Tech to Speech</li><li>API Speech to Text</li><li>API video</li></ul>

Thực hành đào tạo mô hình riêng của bạn

1. Thực hành đào tạo mô hình ngôn ngữ của riêng bạn

1.1. Thực hành đào tạo mô hình riêng của bạn

2. Đào tạo mô hình ngôn ngữ trên Tiếng Việt

2.1. Code load dữ liệu

2.2. Code đào tạo

2.3. Script training

3. Video

3.1. [Dev 01] Zoom 31-08-2024

3.2. [Dev 02] Zoom 23-10-2024

3.3. [Dev 03] Zoom 21-12-2024

3.4. [Dev 04] Zoom 01-03-2025