LoRA là gì? Finetune Transformer với LoRA

LoRA là gì? Có thể bạn đã nghe đến thuật ngữ này nhiều lần. Nó thực sự là một khái niệm quan trọng nếu bạn muốn finetune GPT. Trong bài viết này, hãy cùng trituenhantao.io tìm hiểu về phương pháp fine-tuning LoRA (viết tắt của “Low-Rank Adaptation of Large Language Models”). Đầu tiên, hãy bắt … Đọc tiếp

Giải thuật Simulated Annealing trong tối ưu hoá

Simulated Annealing xuất phát từ khái niệm annealing trong vật lý, giúp tăng kích thước tinh thể và giảm khiếm khuyết từ việc đun nóng và làm nguội đột ngột tinh thể. Đây là lý do mà đôi khi giải thuật này được gọi là Giải thuật mô phỏng luyện kim. Giải thuật này được … Đọc tiếp

Phân phối chuẩn và ứng dụng trong Machine Learning

Phân phối chuẩn hay phân phối Gauss là một khái niệm quan trọng trong thống kê và là nền tảng của Machine Learning. Một Nhà khoa học dữ liệu (Data Scientist) cần biết về phân phối này khi họ làm việc với các mô hình tuyến tính. Như được Carl Friedrich Gauss khám phá ra, … Đọc tiếp

Hướng dẫn theo đuổi AI/ML trong năm 2023 dành cho người mới bắt đầu

Trí tuệ nhân tạo (AI) và Học máy (ML) là hai lĩnh vực phát triển nhanh chóng nhất trong ngành công nghệ hiện nay. Chúng không chỉ thay đổi ngành công nghiệp mà còn tạo ra cơ hội mới cho doanh nghiệp và cá nhân. Tuy nhiên, với người mới bắt đầu, việc theo kịp … Đọc tiếp