- Xuất bản vào
Phải làm gì khi LLM đạt đến giới hạn của nó?
- Tác giả
- Tên
- AbnAsia.org
- @steven_n_t
Các nhà nghiên cứu đang xem xét LCM khi LLM đạt đến giới hạn của nó.
Meta đang thay đổi mô hình AI từ LLMs sang LCMs.
Tại sao điều này quan trọng:
LLMs (Mô hình Ngôn ngữ Lớn) đã xuất sắc trong xử lý ở cấp độ token nhưng lại thiếu sót khi nói đến lý luận phân cấp và sự mạch lạc trong văn bản dài — những đặc điểm thiết yếu của trí thông minh con người.
Mô hình Khái niệm Lớn (LCMs) mới của Meta thay đổi cách tiếp cận bằng cách hoạt động ở cấp độ câu trong không gian nhúng đa chiều, không phụ thuộc vào ngôn ngữ. Thay vì dự đoán dựa trên token, LCMs sử dụng "khái niệm" (nghĩa là ý tưởng ngữ nghĩa, không chỉ là từ ngữ), cho phép chúng:
🔹 Lên kế hoạch đầu ra với cấu trúc phân cấp rõ ràng
🔹 Xử lý ngữ cảnh dài hiệu quả hơn
🔹 Khái quát hóa trên 200 ngôn ngữ mà không cần huấn luyện lại
Kiến trúc này được thiết kế để phản ánh cách con người suy nghĩ — bằng cách lý luận trừu tượng thay vì từng từ một.
Meta đã mở mã nguồn LCM, để cộng đồng có thể thử nghiệm với cách tiếp cận đột phá này.
Kho lưu trữ Github: https://github.com/facebookresearch/large_concept_model
TÁC GIẢ
Về ABN Asia: AiUTOMATING PEOPLE, ABN Asia được thành lập từ năm 2012, là một công ty xuất phát từ học thuật, do những giảng viên, cựu du học sinh Hungary, Hà Lan, Nga, Đức, và Nhật Bản sáng lập. Chúng tôi chia sẻ đam mê chung và tầm nhìn vững chắc về công nghệ, mang đến sự đổi mới và chất lượng đỉnh cao cho khách hàng. Phương châm của chúng tôi là: Tốt hơn. Nhanh hơn. An toàn hơn. Trong nhiều trường hợp: Rẻ hơn.
Hãy liên hệ với chúng tôi khi Quý doanh nghiệp có các nhu cầu về dịch vụ công nghệ thông tin, tư vấn chuyển đổi số, tìm kiếm các giải pháp phần mềm phù hợp, hoặc nếu Quý doanh nghi��p có đấu thầu CNTT (RFP) để chúng tôi tham dự. Quý doanh nghiệp có thể liên hệ với chúng tôi qua địa chỉ email [email protected]. Chúng tôi sẵn lòng hỗ trợ với mọi nhu cầu công nghệ của Quý doanh nghiệp.
© ABN ASIA