NVIDIA "Huang's Law" giúp tăng hiệu năng chip hơn 1000 lần trong vòng chưa đầy 10 năm

NVIDIA "Huang's Law" là yếu tố chính giúp tăng hiệu năng và hiệu quả của chip hơn 1000 lần trong vòng chưa đầy 10 năm. Đối với NVIDIA, Huang's Law là phương pháp cơ bản vượt ra ngoài các nguyên tắc tăng tốc chip truyền thống như Moore's Law, vốn đã thống trị ngành công nghệ trong quá khứ.

CEO của NVIDIA, Jensen Huang, đã nhiều lần bày tỏ rằng Moore's Law đang "chậm lại" và khái niệm mà nó dựa trên đang bắt đầu trở nên lỗi thời. Cuộc tranh luận trở nên sôi nổi, đặc biệt là sau bài phát biểu chính của Jensen tại GTC 2023.

Nếu chúng ta xem xét Moore's Law là gì, nó liên quan đến số lượng bóng bán dẫn trên một vi mạch và cách nó "nên" tăng gấp đôi mỗi năm. Mặc dù NVIDIA đã di chuyển GPU từ các nút bán dẫn 28nm sang 5nm trong thập kỷ qua, nhưng công nghệ đó chỉ chiếm 2.5 lần tổng mức tăng trưởng, Dally lưu ý.

Trong một bài đăng trên blog, Nhà khoa học trưởng của NVIDIA, Bill Dally, đã làm rõ rằng phương pháp của Team Green đối với công nghệ thế hệ tiếp theo xoay quanh "Huang's Law." Chúng tôi sẽ đi sâu vào ý nghĩa của điều này, nhưng bản thân NVIDIA tuyên bố rằng thuật ngữ này bắt nguồn từ một báo cáo của IEEE Spectrum và sau đó được phổ biến trên một số phương tiện truyền thông.

Khái niệm mà NVIDIA đã triển khai với các sản phẩm của mình gần đây thực sự rất thú vị và có lẽ nó nắm giữ chìa khóa để mở ra cánh cửa cho tương lai của ngành công nghiệp.

Trong một bài nói chuyện tại Hot Chips 2023, Bill Dally cho biết NVIDIA đã chứng kiến sự gia tăng hiệu năng đáng kinh ngạc gấp 1000 lần trong các chip điện toán trong thập kỷ qua. Theo sách, những mức tăng trưởng như vậy sẽ không thể đạt được với Moore's Law, và điều quan trọng nhất là việc thu nhỏ quy trình không có tác động đến con số này.

Bây giờ, bạn có thể hỏi tôi làm thế nào điều này trở thành có thể, và câu trả lời mà tôi sẽ đưa ra ở đây là ưu tiên đổi mới trong từng "cụm" riêng lẻ thay vì phát triển chip.

Để ủng hộ tuyên bố của mình, NVIDIA cho biết trong bài đăng trên blog rằng việc giới thiệu "kiến trúc Hopper" là yếu tố quyết định trong việc cho thấy hiệu năng khổng lồ vì chúng sử dụng "toán học số thực và số nguyên 8 và 16 bit".

Để tiến thêm một bước, việc trình làng "kiến trúc Ampere" đã hỗ trợ hiệu năng trong học tập thống kê, mang lại mức tăng hiệu năng gấp 2 lần trong khối lượng công việc điện toán.

Để kết nối các công nghệ riêng lẻ với nhau, "NVLINK" của NVIDIA đã trở nên hữu ích, điều này đã dẫn đến mốc x1000.

Bây giờ, đi đến trọng tâm, bài đăng trên blog của NVIDIA đề cập rằng trong suốt giai đoạn 10 năm, công ty đã chuyển từ quy trình 28nm sang quy trình 5nm, chỉ chiếm 2.5 lần mức tăng hiệu năng. Điều này phủ định Moore's Law, vốn kỳ vọng mức tăng gấp 2 lần theo năm sau mỗi lần chip "thu nhỏ".

Dally cho biết tương lai của NVIDIA phụ thuộc vào "Huang's Law", mang đến nhiều cơ hội tiến bộ cho ngành.

"Đây là thời điểm thú vị để trở thành một kỹ sư máy tính", Dally bày tỏ, và tình hình của ngành thực sự chứng minh cho điều đó. Chúng ta có thể nói rằng ngành công nghiệp máy tính đang ở thời điểm quyết định và tất cả phụ thuộc vào cách các công ty tiếp cận "phát triển chip và điện toán" trong tương lai.