BERT của Google và các phương pháp dựa trên transformer gần đây đã gây ra một cơn bão trong lĩnh vực NLP, đạt kết quả vượt trội trên một số nhiệm vụ. Gần đây, những cải tiến khác nhau của BERT đã xuất hiện. Hãy cùng trituenhantao.io tìm hiểu các điểm tương đồng và khác … Đọc tiếp
Trong những năm gần đây, nhu cầu tuyển dụng và làm việc trong lĩnh vực AI tăng cao. Câu hỏi phỏng vấn AI là tài liệu quan trọng cho cả nhà tuyển dụng và ứng viên. Bài viết này, trituenhantao.io đưa ra một số câu hỏi cơ bản liên quan đến lĩnh vực. Các nhà … Đọc tiếp
Trí tuệ nhân tạo được mệnh danh là ngành học của tương lai bởi những triển vọng đáng mong đợi của nó. Đặc biệt trong kỷ nguyên số, máy tính đã phát triển thành siêu máy tính, công nghệ len lỏi vào từng ngành nghề… Thuật ngữ Trí tuệ nhân tạo lại càng được nhắc … Đọc tiếp
Xử lý ngôn ngữ tự nhiên (NLP) là một nhánh của Trí tuệ nhân tạo. Trong bài này, chúng tôi sẽ giới thiệu những vấn đề cơ bản của nó. Hãy cùng tìm hiểu nhé! Từ rất lâu, máy tính đã hoạt động thật sự hiệu quả với những kiểu dữ liệu được chuẩn hóa … Đọc tiếp
Trung tâm nghiên cứu của Google và Viện công nghệ Toyota đã cùng nhau xuất bản bài báo giới thiệu về một mô hình được coi là người kế vị của BERT, một mô hình hiệu quả hơn với số lượng tham số ít hơn nhiều. Mô hình này có tên là ALBERT (A Lite … Đọc tiếp
Có thể dịch là bộ ngữ liệu. Trong NLP, các đoạn văn bản thường được biểu diễn bởi các thành phần nhỏ hơn như từ, ký tự hoặc các biểu diễn trung gian. Vocabulary chứa toàn bộ các thành phần như vậy mà một mô hình ánh xạ trong bộ nhớ của nó. Vocabulary của … Đọc tiếp
Attention là một kỹ thuật hiện đại trong các mạng nơ ron nhân tạo. Kỹ thuật này đã chứng minh được tính hiệu quả trong các nhiệm vụ dịch máy hay xử lý ngôn ngữ tự nhiên. Nó cũng là một trong số những thành phần tạo nên đột phá trong các mô hình như … Đọc tiếp
Transformer là mô hình học sâu được giới thiệu vào năm 2017, được sử dụng chủ yếu trong lĩnh vực xử lý ngôn ngữ tự nhiên (NLP).
https://github.com/undertheseanlp/underthesea Underthesea – Vietnamese NLP Toolkit https://github.com/stopwords/vietnamese-stopwords Stop word trong tiếng Việt https://github.com/duydo/elasticsearch-analysis-vietnamese Vietnamese Analysis Plugin for Elasticsearch https://github.com/phuonglh/vn.vitk A Vietnamese Text Processing Toolkit https://github.com/coccoc/coccoc-tokenizer Tách từ tiếng Việt bởi Cốc cốc https://github.com/trituenhantaoio/CentralVietnamDataset Dataset phương ngữ miễn Trung
