Kỹ thuật 'Chưng Cất' là gì khiến các công ty AI tiên phong lo ngại?
Last updated: March 02, 2025 Xem trên toàn màn hình
Recommended for you
- 26 Jul 2024
"Khổ tận cam lai" - Làm thế nào để chuyển hóa từ khổ thành sướng? 2408 - 12 Nov 2024 "Nhân tình thế thái" là gì? "Thời thế" là gì? 1596
- 01 Sep 2022 Thiên kiến xác nhận (Confirmation Bias) có phải là một dạng bảo thủ? 596
- 04 Oct 2023 Authority bias (Thiên kiến uy quyền) là gì? 506
- 04 Sep 2020 IQ, EQ hay LQ quan trọng nhất trong thời đại 4.0? 468
- 08 Dec 2023 Giải mã bí mật của trò chơi vô hạn và hữu hạn 361
- 08 Dec 2023 Hiệu ứng Barnum là gì? Hiệu ứng Barnum tốt hay xấu? 353
- 01 Mar 2024 Google thử nghiệm Search AI (Search Generative Experience - SGE) 349
- 01 Aug 2022 Đỉnh cao ứng xử của kẻ trí tuệ: Nhìn thấu không nói, biết người không bình, hiểu lý không tranh 341
- 01 Aug 2024 Infomercial - Chiến thuật "cô đọng" điều gì đó trong đầu người dùng 336
- 04 May 2024 Hiệu ứng FOMO trong phát triển phần mềm 299
- 22 Apr 2021 Người Nhật vận dụng định luật 78:22 trong kinh doanh và đào tạo nhân sự cao cấp như thế nào? 253
- 23 Aug 2024 Nghịch lý toán học chứng minh giới hạn của AI 217
- 26 Sep 2024 Đội quân dán nhãn AI của tỷ phú 27 tuổi 210
- 19 Jun 2024 Giải mã AI, ML và DL: Chìa khóa nắm bắt xu hướng chuyển đổi số 158
- 03 May 2024 AI Đàm Thoại (Conversational AI) – Cuộc Cách Mạng Công Nghệ Đầy Hứa Hẹn 152
- 15 Apr 2025 YouTube đang ủng hộ "Đạo luật No Fakes" nhắm vào các bản sao AI trái phép. 150
- 19 Jan 2025 AI Agents: Ngọn Hải Đăng Dẫn Lối Khởi Nghiệp Trong Kỷ Nguyên Số 130
- 21 Mar 2024 12 triết lý sống tối giản bạn nên biết 127
- 02 Aug 2024 Tổng hợp các câu nói động lực - chất xúc tác cho sự phát triển bản thân 116
- 27 Nov 2024 Ứng dụng AI theo dõi thu chi gây sốt vì 'mắng' người tiêu tiền 115
- 09 Apr 2025 10 bẫy thao túng bạn có thể chưa biết 106
- 23 Apr 2025 Multimodal Agent AI – Cuộc cách mạng trong tương tác người – máy 105
- 07 Feb 2025 Buyer’s remorse: Sự hối hận của người mua sau khi chốt đơn mua hàng 82
- 02 Jul 2025 Doanh nghiệp đối diện CHI PHÍ ẨN khi không áp dụng "AI Agents": Lộ diện nguy cơ tụt hậu 37
- 01 Sep 2025 AI đang thay đổi khoa học quản trị hiện đại như thế nào 28
KỸ THUẬT “CHƯNG CẤT”
Một trong những giả thuyết được giới chuyên gia trong ngành nhận định đây là phương pháp chưng cất (distillation), một kỹ thuật huấn luyện AI sử dụng mô hình "mẹ" lớn hơn để huấn luyện mô hình "con" nhỏ hơn nhưng có khả năng hoạt động nhanh hơn.
DeepSeek tuyên bố đạt được mức độ hiệu suất tương đương với mô hình o1 của OpenAI với chi phí chỉ bằng một phần nhỏ thông qua “thiết kế tối ưu hóa thuật toán, khung và phần cứng”.
Việc công ty AI ra đời sau dùng công nghệ, kỹ thuật để "chưng cất" (distillation) kiến thức của các mô hình AI đi trước gây nhiều lo ngại.
Trong thế giới AI, khái niệm "chưng cất" đề cập việc "chuyển giao kiến thức" từ mô hình này sang mô hình khác theo dạng giáo viên - học sinh. "Chưng cất là kỹ thuật được thiết kế để chuyển kiến thức của một mô hình lớn được đào tạo trước (giáo viên) thành một mô hình nhỏ hơn (học sinh), cho phép mô hình học sinh đạt được hiệu suất tương đương mô hình giáo viên", hai nhà khoa học Vishal Yadav và Nikhil Pandey nói với Forbes. "Kỹ thuật này giúp người dùng tận dụng chất lượng của các mô hình ngôn ngữ lớn (LLM), đồng thời giảm chi phí suy luận".
"Điều này giống như khi bạn có vài giờ phỏng vấn Einstein và bước ra với kiến thức gần bằng ông ấy về một lĩnh vực vật lý", Ali Ghodsi, CEO công ty quản lý dữ liệu Databricks, nói với WSJ.
Các mô hình AI hàng đầu từ OpenAI, Google, Meta hay Anthropic về cơ bản tự học từ đầu với lượng dữ liệu thô khổng lồ - quá trình thường mất nhiều tháng và tiêu tốn hàng chục triệu USD trở lên. Tuy nhiên, khi một công ty khác ra đời sau và sử dụng kết quả đã có từ các AI đi đầu này, quá trình chưng cất có thể giúp tạo ra một mô hình tốt trong vài tuần, thậm chí vài ngày, với chi phí ít hơn đáng kể.
"Điều dễ sao chép nhất là quy trình chưng cất", nhà khoa học nghiên cứu cấp cao Lewis Tunstall viết trên blog cuối tuần trước.
Ngày 29/1, nói với FT, OpenAI phát hiện dấu hiệu "chưng cất" mà họ nghi ngờ từ DeepSeek. Kỹ thuật này được các nhà phát triển sử dụng để đạt hiệu suất tốt hơn trên các mô hình nhỏ, bằng cách sử dụng đầu ra từ những mô hình lớn, cho phép họ có được kết quả tương tự trong các nhiệm vụ cụ thể với chi phí thấp hơn. Đây là hoạt động phổ biến trong lĩnh vực AI nhưng có thể DeepSeek đã vi phạm điều khoản dịch vụ của OpenAI.
Trong khi đó, Bloomberg đưa tin OpenAI và đối tác Microsoft đang điều tra các tài khoản được cho là của DeepSeek từng sử dụng giao diện lập trình ứng dụng (API) của OpenAI vào năm ngoái và chặn quyền truy cập vì nghi ngờ có hành vi vi phạm điều khoản.
"Họ có thể chắt lọc để tạo ra một LLM thực sự tốt và sử dụng quy trình 'chưng cất' để làm điều đó", Chetan Puttagunta, chuyên gia của Benchmark, nói với CNBC khi mô hình DeepSeek R1 được giới thiệu. "Về cơ bản, họ sử dụng một mô hình rất lớn để giúp mô hình nhỏ của mình trở nên thông minh và cách này rất tiết kiệm chi phí".
Chưng cất không phải ý tưởng mới trong giới công nghệ. CNN dẫn các báo cáo khoa học cho thấy lĩnh vực được ứng dụng nhiều trước đó là xe tự lái. "Kiểu học tập này cho thấy tiềm năng to lớn trong nhiều lĩnh vực, như xe tự lái, điều khiển robot và chăm sóc sức khỏe", trang này cho hay. "Trong lái xe tự động, chưng cất cho phép đào tạo hiệu quả và tinh chỉnh mô hình AI cho các nhiệm vụ như hợp nhất cảm biến, phát hiện vật thể và ra quyết định, đồng thời giảm mức tiêu thụ năng lượng và đảm bảo khả năng phản hồi theo thời gian thực".
Tuy nhiên, thành công của DeepSeek đang gây chú ý, làm dấy lên những câu hỏi rằng việc chi hàng tỷ USD để tiên phong của các doanh nghiệp Mỹ liệu có mang lại lợi thế vô song, hay chỉ đóng vai trò là bàn đạp cho đối thủ rẻ hơn. Theo WSJ, các lãnh đạo AI tại Thung lũng Silicon đang xem xét lại mô hình kinh doanh của họ, đồng thời đặt câu hỏi liệu việc trở thành người dẫn đầu lĩnh vực có còn đáng giá hay không.
"Liệu có hiệu quả kinh tế khi đi đầu trong lĩnh vực với chi phí cao gấp 8 lần so với những công ty đang theo sau một cách nhanh chóng?", Mike Volpi, một giám đốc công nghệ kỳ cựu, nhà đầu tư mạo hiểm và là nhà phân tích của Hanabi Capital, nhận xét.
Sau sự xuất hiện của DeepSeek, trên X, CEO OpenAI Sam Altman đánh giá các mô hình mới nhất của DeepSeek "ấn tượng, đặc biệt là về những gì có thể cung cấp với mức giá đó", nhưng khẳng định "tiếp tục thực hiện lộ trình nghiên cứu của mình".
Trong khi đó, Yann LeCun, Giám đốc AI của Meta, cũng cho rằng có "hiểu lầm lớn" khi so sánh việc công ty Mỹ chi hàng tỷ USD vào AI với DeepSeek. "Phần lớn trong số hàng tỷ USD đó được đầu tư vào cơ sở hạ tầng để 'suy luận', không phải để đào tạo", LeCun viết trên mạng xã hội Threads giữa tuần này.
Trên blog, CEO Anthropic Dario Amodei cũng cho rằng hai mô hình chủ lực của DeepSeek "không phải một bước đột phá độc đáo hay thứ gì đó thay đổi nền kinh tế" của các hệ thống AI tiên tiến, mà là "một điểm dự kiến trên đường cong giảm chi phí AI đang diễn ra".
Bên cạnh những lo ngại, giới công nghệ cũng mong đợi việc "chưng cất" sẽ sớm tạo ra các ứng dụng AI chất lượng cao. Chẳng hạn, nhóm các nhà nghiên cứu trên nền tảng Hugging Face đã bắt đầu xây dựng một mô hình tương tự DeepSeek vào tuần trước.
Thực tế, các mô hình từ OpenAI hay Google vẫn được đánh giá cao hơn nhiều so với DeepSeek. Những gã khổng lồ công nghệ này có khả năng duy trì lợi thế trong các hệ thống tiên tiến nhất vì họ thường xuyên tạo ra cái mới. Nói với Fox News, David Sacks, quan chức phụ trách chính sách trí tuệ nhân tạo và tiền điện tử Nhà Trắng, hy vọng các công ty Mỹ sẽ có cách để khiến "việc chưng cất các mô hình AI trở nên khó khăn hơn".
Tuy nhiên, doanh nghiệp và người dùng cuối lại thích các công nghệ có chi phí rẻ. Cạnh tranh trong lĩnh vực AI thời gian qua vốn đã khốc liệt. Sự gia nhập của DeepSeek và các công ty sử dụng phương pháp chưng cất có thể thúc đẩy giá giảm hơn nữa.
"Ngoài giá, kỹ thuật chưng cất cũng hiệu quả trong việc bổ sung các khả năng mới cho mô hình AI hiện có", Ion Stoica, giáo sư khoa học máy tính của UC Berkeley, nói với WSJ.
Khám phá thêm các chủ đề sau
Đọc thêm: Hướng dẫn hợp tác viết bài (guest blogging)
Các chủ đề được quan tâm nhiều nhất
CHIA SẺ BÀI VIẾT
Link copied!
Mới cập nhật