List of topics
[Khai giảng] [Zoom 07-05-2025] Các thông tin quan trọng của lớp
[Zoom 12-05-2025] Biểu thức chính quy - Regular Expressions
[Zoom 14-05-2025] Chi tiết các thuật toán tách token
[Zoom 19-05-2025] Chuẩn hóa văn bản
[Zoom 21-05-2025] Ôn tập đại số tuyến tính
[Zoom 26-05-2025] Ôn tập học máy, học sâu và các khái niệm liên quan
[Zoom 28-05-2025] Ôn tập quá trình training
[Zoom 02-06-2025] Ôn tập softmax + mạng nơ ron
[Bổ trợ] Các thuật toán Training
[Zoom 04-06-2025] Vector Semantics và Embeddings
[Zoom 09-06-2025] SkipGram, Glove và FastText
[Zoom 11-06-2025] Mô hình ngôn ngữ
[Zoom 16-06-2025] RNN và LSTM
[Zoom 23-06-2025] Bài toán dịch máy
[Zoom 25-06-2025] Mô hình Transfomer (4 buổi)
[Zoom 07-07-2025] Mô hình Bert và ứng dụng
[Zoom 07-07-2025] Thực hành Bert và ứng dụng với bài toán NER và POS Tag
[Zoom 09-07-2025] GPT + Đào tạo phân tán
[Zoom 14-07-2025] Bài toán truy xuất thông tin - Information Retrieval
[Zoom 16-07-2025] Vector Database and RAG
Transformer Nâng cao
[Zoom 14-05-2025] Chi tiết các thuật toán tách token
Các thuật toán tách token sử dụng Subwords
Thuật toán BPE
Thuật toán WordPiece
1. Giới thiệu Tách token
1.1. Slide
1.2. Thực hành tách từ với các thư viện khác nhau
Python thuần: https://colab.research.google.com/drive/1l3_wOM7cA5KLnJcv3jcgcb1g03SVAN05?usp=sharing
Thư viện Pytorch: https://drive.google.com/file/d/1jwJQ0iYBMHAce0FQBApEwu75il5Ugi2A/view?usp=sharing
Thư viện Tensorflow: https://drive.google.com/file/d/1MTBQwgqd1jBwK_yNGNNIQ4lkKrkaG36z/view?usp=sharing
Thư viện tiktoken: https://github.com/openai/tiktoken
High Speed with HuggingFace Dataset:
https://colab.research.google.com/drive/1HNLSiDVbgzPzk0Wu1xiPZvgvxcgs_ax8?usp=sharing
1.3. Lập trình tách Ngrams
Click to view more
1.4. [Thú vị] Tool hiển thị các thuật toán tách tokens
2. Thuật toán tách token BPE + WordPiece
2.1. Thực hành dùng WordPiece với HuggingFace
2.2. BPE Demo
3. Video Zoom NLP 01
3.1. Video Zoom 01
3.2. Video Zoom 02
3.3. Zoom NLP 03 - 24-09-2024
3.4. Zoom NLP 04 - 27-11-2024 [phần 1]
3.5. Zoom NLP 04 - 27-11-2024 [phần 2]
3.6. [Zoom NLP 06] 14-05-2025 Tách token
1. Giới thiệu Tách token
1.1. Slide
1.2. Thực hành tách từ với các thư viện khác nhau
1.3. Lập trình tách Ngrams
1.4. [Thú vị] Tool hiển thị các thuật toán tách tokens
2. Thuật toán tách token BPE + WordPiece
2.1. Thực hành dùng WordPiece với HuggingFace
2.2. BPE Demo
3. Video Zoom NLP 01
3.1. Video Zoom 01
3.2. Video Zoom 02
3.3. Zoom NLP 03 - 24-09-2024
3.4. Zoom NLP 04 - 27-11-2024 [phần 1]
3.5. Zoom NLP 04 - 27-11-2024 [phần 2]
3.6. [Zoom NLP 06] 14-05-2025 Tách token