Viết tắt và tiếng lóng mạng tiếng Việt: chuẩn hoá văn bản để AI đọc đúng bình luận
“ko”, “đc”, “ck”, “ny”, chữ kéo dài, emoji: văn bản mạng tiếng Việt làm khó AI. Chuẩn hoá văn bản là gì, viết tắt nhập nhằng ở đâu, quy trình xử lý bình luận.
#teencode
Phân loại văn bản tiếng Việt: tinh chỉnh mô hình nhỏ hay hỏi thẳng mô hình lớn
Ba cách phân loại văn bản tiếng Việt (luật từ khoá, mô hình nhỏ tinh chỉnh, mô hình lớn qua câu lệnh), xử lý chữ không dấu và teencode, thiết kế nhãn và cách đo
An toàn AI với nội dung tiếng Việt: bộ lọc, ngôn từ độc hại, không dấu, tiếng lóng
Vì sao lớp an toàn của AI hay yếu hơn với tiếng Việt: chữ không dấu, tiếng lóng, nói lái, dữ liệu ít. Cách phát hiện ngôn từ độc hại và việc người làm sản phẩm