Blog FOSS by Lê Trung Nghĩa

https://letrungnghia.mangvn.org

10 mô hình ngôn ngữ lớn (LLM) nguồn mở hàng đầu cho năm 2025. 4. Mistral-8x22b

10 mô hình ngôn ngữ lớn (LLM) nguồn mở hàng đầu cho năm 2025. 4. Mistral-8x22b

Top 10 open source LLMs for 2025.  4. Mistral-8x22b

Theo: https://www.instaclustr.com/education/open-source-ai/top-10-open-source-llms-for-2025/

Mô hình Ngôn ngữ Lớn - LLM (Large Language Model) là mô hình máy học có thể hiểu được và tạo ra ngôn ngữ con người dựa vào các tập dữ liệu phạm vi rộng.

4. Mistral-8x22b

Mixtral-8x22B là một mô hình Hỗn hợp Chuyên gia thưa thớt - SMoE (Sparse Mixture-of-Experts), tận dụng 39 tỷ tham số hoạt động trong tổng số 141 tỷ tham số. Nó có thể xử lý các tác vụ NLP bằng nhiều ngôn ngữ và có khả năng mạnh mẽ về toán học và lập trình.

Thông tin dự án:

Tính năng:

  • Ngôn ngữ ngôn ngữ: Thành thạo tiếng Anh, Pháp, Ý, Đức và Tây Ban Nha, cho phép giao tiếp và hiểu hiệu quả giữa các ngôn ngữ chính này.

  • Cửa sổ ngữ cảnh: 64 nghìn mã thông báo.

  • Toán học và lập trình: Hỗ trợ các tác vụ giải quyết vấn đề phức tạp và phát triển phần mềm.

  • Gọi hàm: Có khả năng gọi hàm gốc, được tăng cường bởi chế độ đầu ra hạn chế được triển khai trên la Plateforme, cho phép phát triển ứng dụng quy mô lớn và hiện đại hóa ngăn xếp công nghệ.

Source: Mistral

Về mục lục ………. Phần trước ………. Phần tiếp theo

Mixtral-8x22B is a sparse Mixture-of-Experts (SMoE) model that leverages 39 billion active parameters out of a total 141 billion. It can handle NLP tasks in multiple languages and has strong capabilities in mathematics and coding.

Project information:

  • License: Apache 2.0

  • GitHub stars: 9.2K (Mistral AI)

  • Main corporate sponsor: Mistral AI

  • Official repo link: https://huggingface.co/mistralai/Mixtral-8x22B-Instruct-v0.1

Features:

  • Language proficiency: Fluent in English, French, Italian, German, and Spanish, enabling effective communication and understanding across these major languages.

  • Context window: 64K tokens.

  • Mathematics and coding: Supports complex problem-solving and software development tasks.

  • Function calling: Natively capable of function calling, enhanced by a constrained output mode implemented on la Plateforme, enabling large-scale application development and tech stack modernization.

Dịch: Lê Trung Nghĩa

letrungnghia.foss@gmail.com

 

Tác giả: Nghĩa Lê Trung

Bạn đã không sử dụng Site, Bấm vào đây để duy trì trạng thái đăng nhập. Thời gian chờ: 60 giây