Công nghệ độc lạ
Nvidia tiết lộ chip trí tuệ nhận tạo và cho biết chi phí chạy mô hình ngôn ngữ lớn sẽ 'giảm đáng kể'
Vĩnh An - Thứ Tư, 09/08/2023 5:45 CH
Vietnet24h - Nvidia đã công bố một con chip mới được thiết kế để chạy các mô hình trí tuệ nhân tạo vào thứ ba (7/8).
Nvidia đã công bố một con chip mới được thiết kế để chạy các mô hình trí tuệ nhân tạo vào thứ ba khi công ty đang tìm cách chống lại các đối thủ cạnh tranh trong không gian phần cứng AI, bao gồm AMD, Google và Amazon.
 
Hiện tại, Nvidia đang thống trị thị trường chip AI với hơn 80% thị phần, theo một số ước tính. Chuyên môn của công ty là các đơn vị xử lý đồ họa hoặc GPU, đã trở thành chip ưa thích cho các mô hình AI lớn làm nền tảng cho phần mềm AI tổng quát, chẳng hạn như Bard của Google và ChatGPT của OpenAI. Nhưng chip của Nvidia đang bị thiếu hụt khi những gã khổng lồ công nghệ, nhà cung cấp đám mây và công ty khởi nghiệp tranh giành năng lực GPU để phát triển các mô hình AI của riêng họ.
 
Chip mới của Nvidia, GH200, có cùng GPU với chip AI cao cấp nhất hiện tại của công ty, H100. Nhưng GH200 kết hợp GPU đó với bộ nhớ tiên tiến 141 gigabyte, cũng như bộ xử lý trung tâm ARM 72 lõi.
 
Giám đốc điều hành Nvidia Jensen Huang cho biết trong một cuộc nói chuyện tại một hội nghị vào thứ Ba: “Chúng tôi đang tăng cường sức mạnh cho bộ xử lý này. Anh ấy nói thêm, “Bộ xử lý này được thiết kế để mở rộng quy mô của các trung tâm dữ liệu trên thế giới.”
 
Huang cho biết chip mới sẽ có sẵn từ các nhà phân phối của Nvidia vào quý hai năm sau và sẽ có sẵn để lấy mẫu vào cuối năm nay. Đại diện của Nvidia từ chối đưa ra mức giá.
 
Thông thường, quá trình làm việc với các mô hình AI được chia thành ít nhất hai phần: đào tạo và suy luận.
 
Đầu tiên, một mô hình được đào tạo bằng cách sử dụng lượng lớn dữ liệu, một quá trình có thể mất hàng tháng và đôi khi yêu cầu hàng nghìn GPU, chẳng hạn như trong trường hợp của Nvidia là chip H100 và A100 của nó. Sau đó, mô hình được sử dụng trong phần mềm để đưa ra dự đoán hoặc tạo nội dung, sử dụng quy trình gọi là suy luận. Giống như đào tạo, suy luận rất tốn kém về mặt tính toán và đòi hỏi nhiều sức mạnh xử lý mỗi khi phần mềm chạy, chẳng hạn như khi phần mềm hoạt động để tạo văn bản hoặc hình ảnh. Nhưng không giống như đào tạo, suy luận diễn ra gần như liên tục, trong khi đào tạo chỉ được yêu cầu khi mô hình cần cập nhật.
 
“Bạn có thể lấy gần như bất kỳ mô hình ngôn ngữ lớn nào bạn muốn và đặt nó vào đây và nó sẽ suy luận như điên,” Huang nói. “Chi phí suy luận của các mô hình ngôn ngữ lớn sẽ giảm đáng kể.”
 
GH200 mới của Nvidia được thiết kế để suy luận vì nó có nhiều dung lượng bộ nhớ hơn, cho phép các mô hình AI lớn hơn phù hợp với một hệ thống duy nhất, Phó chủ tịch Nvidia Ian Buck cho biết trong một cuộc gọi với các nhà phân tích và phóng viên hôm thứ Ba. H100 của Nvidia có bộ nhớ 80GB, so với 141GB trên GH200 mới. Nvidia cũng đã công bố một hệ thống kết hợp hai chip GH200 vào một máy tính duy nhất cho các mẫu thậm chí còn lớn hơn.
 
Buck cho biết: “Việc có bộ nhớ lớn hơn cho phép mô hình duy trì trạng thái cố định trên một GPU duy nhất và không cần phải yêu cầu nhiều hệ thống hoặc nhiều GPU để chạy,” Buck nói.
 
Thông báo này được đưa ra khi đối thủ GPU chính của Nvidia, AMD, gần đây đã công bố chip định hướng AI của riêng mình, MI300X, có thể hỗ trợ bộ nhớ 192GB và đang được bán trên thị trường nhờ khả năng suy luận AI. Các công ty bao gồm Google và Amazon cũng đang thiết kế chip AI tùy chỉnh của riêng họ để suy luận.
Nvidia trở thành công ty nghìn tỷ nhờ AI Vietnet24h - Nvidia vừa chạm mốc vốn hóa 1.000 tỷ USD vào ngày 30/5, trở thành hãng chip đầu tiên gia nhập “câu lạc bộ” nghìn tỷ nhờ sự bùng nổ của trí tuệ nhân tạo (AI).
Nvidia phải 'chạy chứ không đi bộ' trước đối thủ như Intel Vietnet24h - Thứ Ba (30/5), người sáng lập và Giám đốc điều hành của Nvidia, Jensen Huang cho biết công ty của ông phải "chạy ... không đi bộ" trước sự cạnh tranh từ các đối thủ bao gồm Intel Corp có trụ sở tại Hoa Kỳ.
Theo CNBC
Tin khác cùng chuyên mục
Tin đọc nhiều
Ghi âm cuộc gọi và cải tiến camera: Những điểm nổi bật trong iOS 18.1 của Apple Vietnet24h - Vào tối 28 tháng 10, Apple phát hành phiên bản iOS 18.1, mang đến tính năng ghi âm cuộc gọi lần đầu tiên cho người dùng iPhone. Cùng với đó là những cải tiến cho camera và giao diện, hứa hẹn sẽ nâng cao trải nghiệm người dùng trên các thiết bị mới.
Orion sắp ra mắt: OpenAI mở ra chương mới cho trí tuệ nhân tạo Vietnet24h - Với việc ra mắt mô hình AI mới mang tên Orion vào tháng 12/2024, OpenAI đang tạo ra những bước tiến mạnh mẽ trong lĩnh vực công nghệ. Orion được kỳ vọng sẽ có sức mạnh vượt trội gấp 100 lần GPT-4, đánh dấu một cột mốc quan trọng trong hành trình phát triển trí tuệ nhân tạo tổng quát.
Chỉnh sửa ảnh thông minh với Microsoft Paint nhờ AI Vietnet24h - Microsoft Paint không ngừng cải tiến với sự ra mắt của Generative Fill và Generative Erase. Hai tính năng mới này giúp người dùng dễ dàng thêm hoặc xóa các chi tiết trong ảnh, mang lại trải nghiệm chỉnh sửa ảnh phong phú và trực quan hơn bao giờ hết.
Nút bấm mới trên iPhone 17 Pro: Tích hợp âm lượng và Action Vietnet24h - Thông tin từ các nguồn đáng tin cậy cho thấy iPhone 17 Pro có thể ra mắt với nút bấm đa năng, thay thế cho nút Action và âm lượng riêng biệt, hứa hẹn mang lại trải nghiệm người dùng mới lạ.
Phiên bản iPhone nào đủ sức chạy Apple Intelligence? Vietnet24h - Apple vừa đưa ra thông tin về dung lượng bộ nhớ mà các mẫu iPhone cần để hỗ trợ tính năng Apple Intelligence, cho biết tối thiểu 4 GB dung lượng trống là cần thiết và dự kiến sẽ tăng lên trong tương lai. Điều này được đề cập trong tài liệu hướng dẫn mới nhất của hãng dành cho bản cập nhật iOS 18.1 Developer Beta 5.
Liệu Apple Intelligence có lợi thế hơn Galaxy AI không? Vietnet24h - Tại Hội nghị các nhà phát triển toàn cầu hôm thứ Hai, Apple đã giới thiệu Apple Intelligence, hệ thống AI sẽ được tích hợp trên các sản phẩm từ iPhone đến Macbook.
Apple Intelligence trên iPhone của bạn có thể yêu cầu nâng cấp Vietnet24h - Apple cuối cùng đã lao đầu vào lĩnh vực trí tuệ nhân tạo vào thứ Hai với thông báo về Apple Intelligence.
Khám phá iOS 18: Sức mạnh của trí tuệ nhân tạo trên iPhone 15 Pro/Pro Max Vietnet24h - iOS 18 đem lại chuỗi tính năng AI độc đáo, từ cải thiện Siri đến xử lý dữ liệu mạnh mẽ trên đám mây. Chip A17 Pro và Neural Engine trên iPhone 15 Pro/Pro Max cho phép trải nghiệm toàn diện, trong khi các thiết bị khác chỉ hỗ trợ tính năng AI hạn chế.
iOS 18: kỷ nguyên mới của trải nghiệm người dùng iPhone Vietnet24h - Apple công bố iOS 18 với công nghệ AI tiên tiến, mang đến khả năng tùy chỉnh không giới hạn với biểu tượng cảm xúc độc đáo và cá nhân hóa. Tính năng mới cho phép tạo emoji tùy chỉnh nhanh chóng, thể hiện chính xác cảm xúc và ngữ cảnh của từng tin nhắn, làm phong phú kho emoji hiện có. iOS 18 sẽ bổ sung nhiều tính năng mới và cải tiến đáng kể như chuyển đổi âm thanh thành văn bản, dịch ngôn ngữ và tóm tắt văn bản, đều được hỗ trợ bởi AI.
Windows 11 IoT Enterprise LTSC 2024: Mở rộng khả năng tương thích phần cứng Vietnet24h - Phiên bản Windows 11 IoT Enterprise LTSC 2024 từ Microsoft không chỉ tối ưu hóa cho thiết bị cấu hình thấp mà còn mở rộng khả năng tương thích phần cứng. Với khả năng hoạt động trên các card màn hình cũ kỹ dựa trên DirectX 10 và không yêu cầu TPM và Secure Boot, người dùng có thêm sự linh hoạt khi lựa chọn thiết bị.
Vision Pro 2 và chip M5: Apple tiếp tục nâng cao trải nghiệm AR/VR Vietnet24h - Apple dự kiến ra mắt Vision Pro 2 với chip M5 vào năm 2025, tăng cường hiệu năng xử lý để cải thiện trải nghiệm thực tế ảo tăng cường. Đây được xem là bước tiến mới của Apple, hướng tới phát triển các sản phẩm AR/VR chất lượng cao.
Apple sẽ mang đến một cuộc cách mạng thiết kế trong MacBook Pro 2026 Vietnet24h - Theo thông tin mới nhất, MacBook Pro 2026 sẽ sở hữu một thiết kế hoàn toàn mới, mỏng nhẹ hơn, trang bị màn hình OLED sắc nét và chip M6 vượt trội. Dòng MacBook này hứa hẹn sẽ nâng cao hiệu suất và trải nghiệm người dùng.
Linh kiện cho SpaceX của Elon Musk sẽ được sản xuất tại Việt Nam Vietnet24h - Theo tin từ Reuters cho hay "do các yếu tố chính trị", tỉ phú Musk đã yêu cầu các đối tác cung ứng linh kiện cho thiết bị Internet vệ tinh Starlink chuyển dịch sản xuất từ Đài Loan (Trung Quốc) sang Việt Nam.
Tesla đạt vốn hóa thị trường 1 nghìn tỷ đô la sau chiến thắng của Trump Vietnet24h - Cổ phiếu Tesla tăng 8% vào thứ Sáu, đẩy vốn hóa thị trường của công ty vượt mốc 1 nghìn tỷ đô la.
Đón xem Triển lãm ADHESIVES & TAPE EXPO VIETNAM 2024: vai trò thiết yếu cho phát triển ngành công nghiệp điện tử trong giai đoạn mới. Vietnet24h - Từ ngày 27 – 29/11/2024 tại Trung tâm Triển lãm SECC, 799 Nguyễn Văn Linh, Quận 7, Thành phố Hồ Chí Minh sẽ diễn ra Triển lãm quốc tế ngành Chất kết dính và Băng keo tại Việt Nam - ADHESIVES & TAPE EXPO VIETNAM 2024.
Nvidia sẽ gia nhập Dow Jones Industrial Average, thay thế đối thủ sản xuất chip Intel Vietnet24h - Nvidia đang thay thế Intel trong Chỉ số trung bình công nghiệp Dow Jones, một sự thay đổi phản ánh sự thay đổi lớn trong ngành công nghiệp bán dẫn.
Kỷ nguyên mới của AI di động với sự dẫn dắt của 5.5G Vietnet24h - Phát biểu tại Diễn đàn MBB toàn cầu 2024, ông Yang Chaobin từ Huawei khẳng định rằng 5.5G sẽ là chìa khóa để giải phóng tiềm năng của AI di động, mang đến những thay đổi mạnh mẽ trong mô hình kinh doanh và dịch vụ di động.
Apple phát hành Apple Intelligence và cách tải xuống trên iPhone của bạn Vietnet24h - Vào thứ Hai (28/10), Apple đã phát hành iOS 18.1, một bản cập nhật cho iPhone bao gồm phiên bản công khai đầu tiên của Apple Intelligence, hệ thống trí tuệ nhân tạo của Apple. Công ty cũng phát hành bản cập nhật phần mềm cho iPad và Mac với Apple Intelligence.
Bản lề của Galaxy Z Fold SE sử dụng gấp đôi số bộ phận của Fold 6 Vietnet24h - Bản lề của Galaxy Z Fold SE sử dụng gấp đôi số lượng linh kiện so với Galaxy Z Fold 6.
Nvidia vượt qua Apple để trở thành công ty có giá trị nhất thế giới Vietnet24h - Nvidia đã soán ngôi Apple để trở thành công ty có giá trị nhất thế giới vào thứ Sáu (25/10) sau đợt tăng giá cổ phiếu kỷ lục, được thúc đẩy bởi nhu cầu không ngừng đối với các chip trí tuệ nhân tạo chuyên dụng của công ty.
Phát hiện Supersolid: Vật chất vừa có tính chất rắn vừa có tính chất lỏng Vietnet24h - Supersolid, trạng thái vật chất kỳ lạ, cuối cùng đã được quan sát trực tiếp bởi các nhà khoa học. Thành tựu này cung cấp cái nhìn sâu sắc hơn về thế giới lượng tử với những tính chất vượt ngoài hiểu biết thông thường.
Visual Intelligence: bức tranh mới về trí tuệ nhân tạo trên iphone Vietnet24h - Visual Intelligence, một trong những tính năng nổi bật nhất trong bộ công cụ Apple Intelligence, đang thu hút sự chú ý với khả năng nhận diện và tạo hình ảnh, video, và văn bản. Được giới thiệu trong bản iOS 18.2 beta 1, tính năng này hứa hẹn sẽ nâng cao trải nghiệm người dùng smartphone.
OPPO dẫn đầu đổi mới AI với việc triển khai kiến trúc hỗn hợp chuyên gia MoE, mở đường cho những tiến bộ của AI Vietnet24h - Thương hiệu thiết bị thông minh hàng đầu toàn cầu OPPO đã đạt được bước đột phá đáng kể khi trở thành công ty đầu tiên triển khai kiến ​​trúc Hỗn hợp chuyên gia (MoE) trên thiết bị.
Qualcomm ra mắt chip điện thoại thông minh có khả năng tương đương máy tính xách tay để hỗ trợ AI Vietnet24h - Phiên bản mới nhất của dòng Snapdragon sẽ bao gồm thiết kế nội bộ của Qualcomm, vì công ty đầu tư nhiều hơn vào công nghệ trong nước.
Tính giờ trên mặt trăng: thách thức lớn trong cuộc đua khám phá vũ trụ Vietnet24h - Trong cuộc đua không gian đang nóng bỏng hiện nay, một trong những thách thức lớn nhất mà các nhà khoa học phải đối mặt chính là việc định thời gian chính xác trên Mặt Trăng. Mặc dù đây có vẻ là một chi tiết nhỏ, nhưng sự sai lệch về thời gian có thể tạo ra những hệ quả nghiêm trọng trong các sứ mệnh không gian.
Honor sắp tung ra smartphone gập ba chỉ 10mm, mỏng hơn Huawei Mate XT Vietnet24h - Không lâu sau khi Huawei tung ra chiếc Mate XT, mẫu smartphone màn hình gập ba đầu tiên và được ca ngợi với thiết kế mỏng chỉ 12,8 mm khi gập lại, đối thủ Honor đã nhanh chóng hé lộ một kế hoạch có thể làm lung lay vị trí độc tôn của Huawei.
Huawei Mate XT gập ba gây sốt với hơn hai triệu lượt đặt trước dù chưa ra mắt Vietnet24h - Huawei Mate XT, mẫu smartphone gập ba đầu tiên trên thế giới sắp được thương mại hóa, đã thu hút hơn hai triệu lượt đăng ký đặt trước chỉ trong hai ngày dù chưa chính thức ra mắt. Sản phẩm hiện đang tạo ra làn sóng quan tâm mạnh mẽ, đặc biệt tại Trung Quốc.
Khí cầu AS700 của Trung Quốc hoàn thành chuyến bay xuyên tỉnh đầu tiên Vietnet24h - Khí cầu dân dụng có người lái as700, do trung quốc tự nghiên cứu và phát triển, vừa hoàn thành chuyến bay thử nghiệm xuyên tỉnh dài gần 1.000 km, mở ra tiềm năng mới cho ngành hàng không dân dụng của nước này.
Chip AI Ascind 910c của Huawei đạt sức mạnh tương đương Nvidia H100 Vietnet24h - Trước sự hạn chế nghiêm ngặt từ Mỹ về sức mạnh của các chip đồ họa (GPU) xuất khẩu sang Trung Quốc, quốc gia này đang chuẩn bị trình làng một sản phẩm trí tuệ nhân tạo (AI) mới của Huawei có khả năng tương đương với GPU NVIDIA H100.
Google nâng tầm camera an ninh với AI Gemini đọc hiểu nâng cao Vietnet24h - Google vừa đưa ra một bước tiến mới trong việc tích hợp trí tuệ nhân tạo (AI) vào hệ sinh thái nhà thông minh của mình, khi chính thức giới thiệu khả năng "đọc" và phân tích nội dung từ camera an ninh thông qua AI Gemini.