List of topics
Biểu thức chính quy - Regular Expressions
[31-1-2024] Chi tiết các thuật toán tách từ
Chuẩn hóa văn bản
Vector Semantics và Embeddings
SkipGram, Glove và FastText
Mô hình ngôn ngữ
RNN và LSTM
Bài toán dịch máy
Mô hình Transfomer
Mô hình Bert và ứng dụng
Thực hành Bert và ứng dụng với bài toán NER và POS Tag
GPT và ứng dụng
Bài toán tìm kiếm và hỏi đáp - Question Answering
Vector Database and RAG
Prompt Engineering
Semantic Cache
Nâng cao - Mô hình Wave2Vec cho bài toán nhận diện giọng nói
Dự án cuối khóa

Bài toán dịch máy

  • Bài toán dịch máy

  • Mô hình Seq2Seq

  • Vấn đề BottleNeck của Seq2Seq

  • Mô hình Seq2Seq và cơ chế Attention

  • BLEU Score

  • Thuật toán Greedy/Beam Search

1. Slide

1.1. Máy dịch, mô hình Seq2Seq và cơ chế Attention

Giải thích chi tiết:

  • Mô hình Seq2Seq

  • Cơ chế Attention

1.2. Mô hình Seq2Seq và cơ chế Attention với bài toán dịch máy

1.3. NMT

Click to view more

1.4. Beam Search

1.5. Beam search Code

Click to view more

1.6. Video

1.7. Top-p, top-k Sampling

Click to view more

2. Chi tiết BLEU Score

2.1. Chi tiết Bleu

BLEU Score: https://cloud.google.com/translate/automl/docs/evaluate#:~:text=BLEU%20(BiLingual%20Evaluation%20Understudy)%20is,of%20high%20quality%20reference%20translations.

Code:

https://github.com/bangoc123/BLEU

1. Slide
1.1. Máy dịch, mô hình Seq2Seq và cơ chế Attention
1.2. Mô hình Seq2Seq và cơ chế Attention với bài toán dịch máy
1.3. NMT
1.4. Beam Search
1.5. Beam search Code
1.6. Video
1.7. Top-p, top-k Sampling
2. Chi tiết BLEU Score
2.1. Chi tiết Bleu