BERT là gì?
BERT là từ viết tắt của “Bidirectional Encoder Representations from Transformers” (tạm dịch: Mô hình mã hóa hai chiều dữ liệu từ các khối Transformer),  là một phương pháp kỹ thuật được xây dựng dựa trên mô hình mạng mô phỏng  theo hệ thống nơron thần kinh của con người (neural network) dùng để  đào tạo trước (pre-train) quá trình xử lý ngôn ngữ tự nhiên.