Một chuỗi gồm một hoặc nhiều ký tự được ánh xạ làm đầu vào cho các mô hình trong NLP. Trong word embedding, token là chuỗi các ký tự liền kề giữa hai khoảng trắng hoặc giữa dấu cách và dấu chấm.
Bạn muốn trích dẫn bài này:
-----
-----
"Token," Trí tuệ nhân tạo, Ngày xuất bản: 06/07/2019, URL: https://trituenhantao.io/tu-dien-thuat-ngu/token/, Ngày truy cập: 21/01/2021.