Tin VEIA
Cách DeepSeek sử dụng phương pháp chưng cất để đào tạo mô hình trí tuệ nhân tạo
Minh Ngọc - Chủ Nhật, 23/02/2025 8:34 SA
Vietnet24h - Phòng thí nghiệm trí tuệ nhân tạo Trung Quốc DeepSeek đã khuấy động thị trường vào tháng 1, gây ra một đợt bán tháo công nghệ và chất bán dẫn lớn sau khi công bố các mô hình AI mà họ cho là rẻ hơn và hiệu quả hơn so với các mô hình của Mỹ.
Nhưng nỗi sợ hãi và đột phá tiềm ẩn đã thúc đẩy đợt bán tháo này còn sâu sắc hơn nhiều so với một công ty khởi nghiệp AI. Thung lũng Silicon hiện đang tính đến một kỹ thuật trong phát triển AI được gọi là chưng cất, một kỹ thuật có thể đảo ngược bảng xếp hạng AI.
 
Chưng cất là một quá trình trích xuất kiến ​​thức từ một mô hình AI lớn hơn để tạo ra một mô hình nhỏ hơn. Nó có thể cho phép một nhóm nhỏ hầu như không có nguồn lực nào tạo ra một mô hình tiên tiến.
 
Một công ty công nghệ hàng đầu đầu tư nhiều năm và hàng triệu đô la để phát triển một mô hình hàng đầu từ đầu. Sau đó, một nhóm nhỏ hơn như DeepSeek lao vào và đào tạo mô hình chuyên biệt hơn của riêng mình bằng cách đặt câu hỏi cho mô hình "giáo viên" lớn hơn. Quá trình này tạo ra một mô hình mới có khả năng gần như mô hình của công ty lớn nhưng đào tạo nhanh hơn và hiệu quả hơn.
 
“Kỹ thuật chưng cất này cực kỳ mạnh mẽ và cực kỳ rẻ, và nó dành cho bất kỳ ai”, Ali Ghodsi, CEO của Databricks, cho biết, đồng thời nói thêm rằng ông hy vọng sẽ thấy sự đổi mới khi nói đến cách xây dựng các mô hình ngôn ngữ lớn hay LLM. “Chúng ta sẽ thấy rất nhiều sự cạnh tranh cho LLM. Đó là những gì sẽ xảy ra trong kỷ nguyên mới mà chúng ta đang bước vào”.
 
Hiện nay, chưng cất đang cho phép các công ty khởi nghiệp và phòng nghiên cứu ít vốn cạnh tranh ở vị trí tiên tiến nhanh hơn bao giờ hết.
 
Các nhà nghiên cứu tại Berkeley cho biết, sử dụng kỹ thuật này, họ đã tái tạo mô hình lý luận của OpenAI với giá 450 đô la trong 19 giờ vào tháng trước. Ngay sau đó, các nhà nghiên cứu tại Stanford và Đại học Washington đã tạo ra mô hình lý luận của riêng họ chỉ trong 26 phút, sử dụng chưa đến 50 đô la tín dụng tính toán, họ cho biết. Công ty khởi nghiệp Hugging Face đã tái tạo tính năng mới nhất và hấp dẫn nhất của OpenAI, Nghiên cứu sâu, dưới dạng thử thách mã hóa trong 24 giờ.
 
DeepSeek không phát minh ra quá trình chưng cất, nhưng nó đã đánh thức thế giới AI về tiềm năng phá vỡ của nó. Nó cũng mở ra sự trỗi dậy của một trật tự nguồn mở mới — một niềm tin rằng tính minh bạch và khả năng tiếp cận thúc đẩy sự đổi mới nhanh hơn so với nghiên cứu đóng cửa.
 
"Nguồn mở luôn chiến thắng trong ngành công nghệ", Arvind Jain, CEO của Glean, công ty tạo ra công cụ tìm kiếm hỗ trợ AI cho các doanh nghiệp, cho biết. "Bạn không thể đánh bại được động lực mà một dự án nguồn mở thành công thực sự có thể tạo ra".
 
Bản thân OpenAI đã quay lại chiến lược nguồn đóng của mình sau thành tích của DeepSeek.
 
"Cá nhân tôi nghĩ rằng chúng ta đã đi sai hướng trong lịch sử và cần tìm ra một chiến lược nguồn mở khác", CEO của OpenAI Sam Altman đã viết trong một bài đăng trên Reddit vào ngày 31 tháng 1.
 
Sự kết hợp giữa sức hút mới tìm thấy của quá trình chưng cất và sự gia tăng phổ biến của nguồn mở đang hoàn toàn thay đổi động lực cạnh tranh trong AI.
Bắc Kinh áp dụng DeepSeek để dẫn đầu việc áp dụng AI khi tìm kiếm động lực tăng trưởng mới Vietnet24h - DeepSeek cũng đã làm rung chuyển hệ sinh thái AI của Trung Quốc, với các tổ chức nhà nước cũng như các công ty công nghệ lớn, bao gồm cả các đối thủ cạnh tranh, tận dụng kiến ​​trúc nguồn mở của nó.
Mô hình AI của Deepseek, là một tác phẩm tốt nhất của Trung Quốc nhưng hơi quá "cường điệu", Giám đốc điều hành của Google Deepmind nói Vietnet24h - Mô hình AI của Deepseek, có lẽ là tác phẩm hay nhất của Trung Quốc, Demis Hassabis, CEO của Google Deepmind cho biết vào Chủ nhật.
Tin khác cùng chuyên mục
Tin đọc nhiều
ELECRAMA 2025: Triển lãm lớn nhất Nam Á về Thiết bị và linh kiện điện tại Ấn Độ đã diễn ra thành công Vietnet24h - ELECRAMA là triển lãm hàng đầu của hệ sinh thái ngành công nghiệp điện Ấn Độ và là triển lãm độc lập lớn nhất trong ngành thiết bị và linh kiện điện, đồng thời cũng là triển lãm T&D lớn nhất thế giới, là cánh cổng dẫn đến thế giới điện.
Thúc đẩy hợp tác kinh tế Ấn Độ - Việt Nam Vietnet24h - Ngày 24 tháng 12 năm 2024, Đại sứ quán Ấn Độ tại Việt Nam đã tổ chức một diễn đàn chủ đề "Cuộc gặp gỡ Ấn Độ - Việt Nam về Hợp tác Kinh tế" nhằm thúc đẩy thương mại và đầu tư song phương giữa Ấn Độ và Việt Nam.
Sắp diễn ra hội thảo “Vai trò của chất kết dính băng keo trong chuỗi cung ứng điện tử” Vietnet24h - Hội thảo: “Vai trò của chất kết dính băng keo trong chuỗi cung ứng điện tử” kết hợp giao thương B2B sẽ được tổ chức vào chiều ngày 27 tháng 11 năm 2024 tại SECC quận 7, TP. Hồ Chí Minh.
Nâng tầm doanh nghiệp điện tử Việt Nam dẫn đầu chuỗi cung ứng toàn cầu Vietnet24h - Hội thảo: “Nâng tầm doanh nghiệp điện tử Việt Nam dẫn đầu chuỗi cung ứng toàn cầu” do Hiệp hội Doanh nghiệp Điện tử Việt Nam tổ chức sẽ diễn ra ngày 28 tháng 11 năm 2024 tại Trung tâm Hội nghị và Triển lãm Quốc tế Hà Nội, 91 Trần Hưng Đạo, Quận Hoàn Kiếm, Hà Nội
TRIỂN LÃM NGŨ KIM VÀ DỤNG CỤ CẦM TAY LẦN THỨ 9 Điểm hẹn Giao thương và Trải nghiệm Vietnet24h - Triển lãm Quốc tế Sản phẩm Ngũ kim & Dụng cụ cầm tay lần thứ 9 – VIETNAM HARDWARE & HAND TOOLS EXPO 2024 (VHHE) sẽ chính thức diễn ra từ ngày 05-07/12/2024 tại Trung tâm Triển lãm SECC, Tp. Hồ Chí Minh.
Triển lãm Tìm nguồn cung ứng Vật liệu và Linh kiện Điện tử Quốc tế Thâm Quyến năm 2024 đã có một kết thúc hoàn hảo! Vietnet24h - Vào ngày 8 tháng 11, Triển lãm Tìm nguồn cung ứng Vật liệu và Linh kiện Điện tử Quốc tế Thâm Quyến năm 2024 ("ES SHOW") đã kết thúc thành công tại Trung tâm Triển lãm và Hội nghị Quốc tế Thâm Quyến (Bao'an), tỉnh Quảng Đông, Trung Quốc.
Nhà máy thông minh GREEN Intelligence chung tay cùng Hiệp hội Doanh nghiệp Điện tử Việt Nam hướng tới chương mới của công cuộc hiện đại hóa Vietnet24h - Trong khuôn khổ Triển lãm Quốc tế NEPCON ASIA 2024 tại Thâm Quyến, đoàn công tác của Hiệp hội Doanh nghiệp Điện tử Việt Nam đã có chuyến thăm và làm việc chuyên sâu tại nhà máy của Công ty Green Intelligence.
Nỗ lực tham gia có hiệu quả vào chuỗi sản xuất thông minh và chuỗi cung ứng toàn cầu của doanh nghiệp Việt Vietnet24h - Để thúc đẩy ngành sản xuất điện tử Việt Nam phát triển đạt chất lượng cao và tăng cường trao đổi chuyên sâu, hợp tác thương mại giữa Trung Quốc và Việt Nam trong lĩnh vực sản xuất điện tử, Hội nghị “Sản xuất thông minh trong ngành điện tử: “Kết nối và phát triển chuỗi cung ứng” do Tạp chí Công nghệ mới Step by Step thuộc Nhà xuất bản Quốc tế ACT International phối hợp với Hiệp hội Doanh nghiệp điện tử Việt Nam (VEIA) đồng tổ chức đã diễn ra tại Hà Nội.
Sắp diễn ra Hội thảo: Sản xuất thông minh trong ngành điện tử: Kết nối và Phát triển chuỗi cung ứng Vietnet24h - Hội thảo do Hiệp hội Doanh nghiệp Điện tử Việt Nam (VEIA) phối hợp cùng Nhà xuất bản quốc tế ACT (Trung Quốc) và Tạp chí Điện tử Vietnet24h tổ chức vào ngày 08 tháng 8 năm 2024 tại Khách sạn Melia Hà Nội.
Hội thảo quốc tế IPC về Chất Lượng & Độ Tin Cậy Cao tại Việt Nam Vietnet24h - IPC (Institute of Printed Circuits) là Hiệp Hội Thương Mại Toàn Cầu cho Ngành Công Nghiệp Điện Tử thành lập vào năm 1957 tại Hoa Kỳ. Nay là một trong những tổ chức có ảnh hưởng nhất trong ngành công nghiệp sản xuất điện tử của Mỹ và thế giới. IPC được Viện Tiêu chuẩn Quốc gia Hoa Kỳ (ANSI) công nhận là Tổ Chức Phát Triển Tiêu Chuẩn.
Cổ phiếu Intel tăng 14% khi nhà sản xuất chip này bổ nhiệm CEO mới Vietnet24h - Cổ phiếu của Intel tăng hơn 14% sau khi công bố Lip-Bu Tan là CEO mới.
SK Networks, Qualcomm hợp tác để phát triển các giải pháp AI, IoT Vietnet24h - Việc hợp tác với Qualcomm sẽ cung cấp cho SK Networks các giải pháp IoT tiên tiến, bao gồm Dragonwing QCS6490, hỗ trợ các mô hình ngôn ngữ lớn trên thiết bị.
MobiFone đạt thành tích xuất sắc về ứng dụng chuyển đổi số cho TP. Hà Nội Vietnet24h - Sáng 3/3, Tổng Công ty viễn thông MobiFone đã vinh dự nhận bằng khen về thành tích xuất sắc trong công tác triển khai ứng dụng chuyển đổi số dùng chung 3 cấp trong cơ quan Đảng, chính quyền, Mặt trận Tổ quốc và các tổ chức chính trị - xã hội TP. Hà Nội.
SK hynix bắt đầu xây dựng nhà máy tại cụm chip Yongin Vietnet24h - Nhà sản xuất chip nhớ Hàn Quốc SK hynix đã bắt đầu xây dựng nhà máy chế tạo chip đầu tiên tại Cụm bán dẫn Yongin sau khi được Thành phố Yongin chấp thuận, công ty cho biết hôm thứ Ba (25/2).
Cổ phiếu IBM tăng 9% nhờ lợi nhuận vượt dự kiến Vietnet24h - IBM đã báo cáo thu nhập quý IV vào thứ Tư, vượt qua kỳ vọng của Phố Wall về thu nhập và doanh thu.
Nhà phát triển chương trình AI DeepSeek của Trung Quốc khiến cộng đồng AI kinh ngạc Vietnet24h - DeepSeek, một nhà phát triển phần mềm AI của Trung Quốc, đang gây hoang mang trong cộng đồng AI khi tuyên bố họ có thể đào tạo một chương trình hàng đầu trong ngành với chi phí 5,6 triệu đô la so với chi phí từ 100 triệu đến 1 tỷ đô la mà các nhà phát triển AI hàng đầu của Hoa Kỳ đưa ra
Samsung Electronics thực hiện thưởng theo cổ phiếu cho các giám đốc điều hành Vietnet24h - Samsung Electronics đã thông báo trên bảng tin nội bộ rằng một phần tiền thưởng lợi nhuận vượt mức (OPI) dành cho các giám đốc điều hành sẽ được trả bằng cổ phiếu của công ty.
Samsung SDS ra mắt dịch vụ AI cho tự động hóa doanh nghiệp tại CES 2025 Vietnet24h - Samsung SDS đã tiết lộ các dịch vụ tự động hóa doanh nghiệp dựa trên trí tuệ nhân tạo (AI) tại triển lãm công nghệ CES 2025 ở Las Vegas.
Cuộc cách mạng AI toàn cầu: OpenAI chính thức chuyển sang mô hình vì lợi nhuận Vietnet24h - Với sự chuyển đổi này, OpenAI không chỉ tìm cách gia tăng nguồn vốn để đẩy mạnh nghiên cứu trí tuệ nhân tạo mà còn phải đối mặt với những tranh cãi trong nội bộ công ty và từ các đối thủ cạnh tranh. Liệu mô hình mới này sẽ giúp OpenAI duy trì vị thế dẫn đầu trong thị trường AI đầy cạnh tranh?
Hoa Kỳ hoàn tất khoản tài trợ 458 triệu đô la cho SK hynix để xây dựng cơ sở đóng gói chip Vietnet24h - Bộ Thương mại Hoa Kỳ hôm thứ Năm (19/12) đã hoàn tất việc trao tặng cho SK hynix khoản tài trợ lên tới 458 triệu đô la của chính phủ để giúp tài trợ cho một nhà máy đóng gói chip tiên tiến và cơ sở nghiên cứu và phát triển cho các sản phẩm trí tuệ nhân tạo tại Indiana.
Jensen Huang sẽ có bài phát biểu quan trọng tại Computex Đài Bắc Vietnet24h - Nhà sáng lập kiêm Tổng giám đốc điều hành của Nvidia Corp. Jensen Huang sẽ có bài phát biểu quan trọng đầu tiên tại Computex Taipei 2025.
Intel bổ nhiệm Lip-Bu Tan làm CEO, cổ phiếu công ty tăng 12% Vietnet24h - Việc bổ nhiệm Lip-Bu Tan diễn ra ba tháng sau khi Pat Gelsinger từ chức giám đốc điều hành.
Samsung Electronics chính thức được bầu làm giám đốc nhóm của cơ quan tiêu chuẩn truyền thông quốc tế Vietnet24h - Samsung Electronics Co. cho biết hôm thứ Tư (12/3) rằng, một trong những viên chức của công ty đã được bầu làm chủ tịch của một nhóm kỹ thuật quan trọng theo Dự án Đối tác Thế hệ thứ 3, một tổ chức phát triển tiêu chuẩn viễn thông quốc tế hàng đầu.
CEO Kia bày tỏ sự tự tin vào những cơ hội mới bất chấp rủi ro thương mại toàn cầu gia tăng Vietnet24h - Trong một lá thư gửi các cổ đông được công bố trên trang web của Kia, Chủ tịch kiêm Giám đốc điều hành Song Ho-sung đánh giá rằng, xu hướng toàn cầu hóa trong nửa thế kỷ qua đang "chuyển sang chủ nghĩa khu vực và chủ nghĩa dân tộc", đồng thời định hình lại động lực thương mại quốc tế.
Meta chấp thuận kế hoạch tăng tiền thưởng cho giám đốc điều hành sau khi sa thải 5% nhân viên Vietnet24h - Theo hồ sơ nộp vào thứ năm, các giám đốc điều hành của Meta có thể kiếm được khoản tiền thưởng bằng 200% mức lương cơ bản theo kế hoạch thưởng dành cho giám đốc điều hành mới của công ty, tăng từ mức 75% trước đây.
SK hynix bổ nhiệm Phó chủ tịch lãnh đạo nhà máy đóng gói chip tại Hoa Kỳ Vietnet24h - SK hynix đã bổ nhiệm Phó chủ tịch Lee Woong-sun làm người dẫn đầu nhà máy đóng gói chip tiên tiến của hãng tại Hoa Kỳ.
Người đứng đầu Samsung Electronics khó có thể quay trở lại hội đồng quản trị Vietnet24h - Các cuộc chiến pháp lý trì hoãn sự trở lại tiềm năng của Lee Jae-yong.
Người viết tiểu sử của Jensen Huang đánh giá ông là: Người có tầm nhìn xa về AI, nhà lãnh đạo kiên trì, người cha ngốc nghếch Vietnet24h - Trong một thế giới do trí tuệ nhân tạo (AI) thúc đẩy phần lớn được cung cấp năng lượng bởi chip của Nvidia, tiểu sử và bản thiết kế của nhà sáng lập công ty chip khổng lồ tại Thung lũng Silicon Jensen Huang được nhiều người coi là thú vị không kém gì công ty hàng đầu thế giới của ông.
43 năm trước, Steve Jobs đã nói rằng đây là điều tạo nên sự khác biệt giữa những người cực kỳ thành công: cách làm chủ kỹ năng Vietnet24h - "Bạn đã bao giờ nghĩ về việc thông minh là gì chưa?" Nhà đồng sáng lập huyền thoại của Apple đã hỏi khán giả của mình vào năm 1982 khi ông giành giải thưởng "Golden Plate" từ Viện Hàn lâm Thành tựu.
Salesforce chọn thành viên hội đồng quản trị Robin Washington làm người lãnh đạo tài chính và điều hành tiếp theo Vietnet24h - Robin Washington sẽ là chủ tịch mới và giám đốc tài chính và điều hành của Salesforce.