Suy nghĩ buổi sáng về các con đường phát triển AI.
Một sự chia rẽ thú vị đang hình thành trong không gian hiện tại. Trong khi hầu hết các phòng thí nghiệm AI đang trong cuộc đua vũ trang về số lượng tham số—ném thêm tính toán, thêm dữ liệu vào các mô hình ngày càng lớn—một số dự án đang đặt cược khác.
Cách tiếp cận của Sentient AGI? Họ không theo đuổi kích thước. Họ đang theo đuổi kiến trúc lý luận thông minh hơn. Đó là cuộc tranh luận cổ điển: sức mạnh thô vs giải pháp tinh tế.
Hãy nghĩ về điều đó—có phải não lớn hơn tự động có nghĩa là suy nghĩ tốt hơn? Hay là về cách bạn xử lý và kết nối các ý tưởng một cách hiệu quả?
Ngành công nghiệp đang cuồng nhiệt với GPT-5, GPT-6, bất cứ điều gì tiếp theo với hàng triệu triệu tham số. Nhưng có thể bước đột phá thực sự không nằm ở quy mô. Có thể nó nằm ở việc dạy các mô hình thực sự lập luận qua các vấn đề thay vì chỉ đơn giản là nhận dạng mẫu một cách cực đoan.
Không nói rằng một cách tiếp cận nào đó chắc chắn tốt hơn. Chỉ lưu ý rằng không phải ai cũng đang chơi cùng một trò chơi nữa.
Xem bản gốc
Trang này có thể chứa nội dung của bên thứ ba, được cung cấp chỉ nhằm mục đích thông tin (không phải là tuyên bố/bảo đảm) và không được coi là sự chứng thực cho quan điểm của Gate hoặc là lời khuyên về tài chính hoặc chuyên môn. Xem Tuyên bố từ chối trách nhiệm để biết chi tiết.
10 thích
Phần thưởng
10
5
Đăng lại
Retweed
Bình luận
0/400
ContractHunter
· 9giờ trước
Bẫy tham số đó đã lỗi thời từ lâu, đường đua thực sự là hiệu suất suy luận
ngl tham số nhiều thì trí thông minh cao, câu nói này nghe thật phi lý...
Sentient có một ý tưởng khá hay, nhưng bây giờ nói thắng thì còn quá sớm
Mọi người đều đang cạnh tranh quy mô, chỉ một mình họ đi theo hướng tinh tế? Có chút yếu tố mạo hiểm đó
Thật sao, giải pháp tinh tế thật sự có thể đánh bại sức mạnh thô bạo? Tôi tỏ ra nghi ngờ
Nhưng nói đi cũng phải nói lại, khớp mẫu ≠ suy luận, điều này thật sự là một luận đề giả.
Xem bản gốcTrả lời0
AirdropCollector
· 9giờ trước
À có nghĩa là, nhóm người đó đang đưa ra quá nhiều tham số có thể đã đi sai hướng, trí tuệ thực sự không nằm ở chỗ lớn mà nằm ở chỗ tinh tế hơn.
Logic này tôi đã suy nghĩ một chút, cảm thấy giống như mâu thuẫn vĩnh cửu giữa tối ưu hóa và sức mạnh thô, thật thú vị.
Nhiều tham số thì có thể suy nghĩ tốt? Chưa chắc đâu, tôi nghĩ cách thiết kế kiến trúc mới là điều quan trọng.
Cứ chờ xem ai sẽ là người cười cuối cùng nhé.
Xem bản gốcTrả lời0
ReverseTradingGuru
· 9giờ trước
Bẫy tham số nào đó sớm muộn cũng sẽ thất bại, chất lượng > số lượng sao lại khó hiểu đến vậy
Mô hình càng lớn thì não cũng không sử dụng tốt, vấn đề chính vẫn là phải có chuỗi logic
Nhóm Sentient xem ra đã nhìn thấu, không chạy theo cuộc đua tham số mà ngược lại còn có chút thú vị
Nói trắng ra là sức mạnh khéo léo vs sức mạnh thô bạo, ngành công nghiệp vẫn đang đốt tiền để tăng tham số, họ thì sớm đã đổi tư duy
Cảm giác con đường của mô hình lớn này sắp đi đến hồi kết, tiếp theo sẽ là khả năng suy luận thôi
Tham số dồn đến chân trời cũng không thể thay đổi bản chất của pattern matching, điều này sớm đã phải nhận thức rõ
Vấn đề là ai có thể tạo ra kiến trúc thật sự biết suy nghĩ, còn phải xem tiếp theo
Đừng có làm cái lý thuyết quy mô tối thượng nữa, chỉ cần đầu óc đủ dùng là được
Xem bản gốcTrả lời0
blockBoy
· 9giờ trước
Tham số không nhất định là con đường đúng, tôi ủng hộ con đường kiến trúc thông minh.
---
Tham số càng nhiều càng thông minh? Nói nhảm, hiệu quả mới là chìa khóa.
---
Không phải ai cũng theo đuổi GPT-X, điểm này tôi đồng ý.
---
Chất lượng > số lượng, cuối cùng có người nói rõ ràng.
---
Lập luận > khớp mẫu, đó là sự khác biệt.
---
Cảm giác con đường của mô hình lớn đang đi sai, cần phải nghĩ lại.
---
Bước đi của Sentient là có thể, người khác đều cuốn tham số, nó cuốn kiến trúc.
---
Cả giới đều bị hàng triệu tham số làm cho mệt mỏi.
Xem bản gốcTrả lời0
DefiEngineerJack
· 9giờ trước
không, việc đếm tham số cope thì quá 2023. Nói một cách thực nghiệm, bạn chỉ đang ném tính toán vào tường hy vọng có thứ gì đó dính lại - đó không phải là tối ưu hóa, đó chỉ là... sức mạnh thô tốn kém, thật lòng mà nói. Kiến trúc lý luận thực sự quan trọng nếu bạn muốn có những cải thiện hiệu suất không tầm thường. Hầu hết các phòng thí nghiệm sẽ không thừa nhận điều này vì họ đã tiêu tốn hàng tỷ vào cược quy mô lmao
Suy nghĩ buổi sáng về các con đường phát triển AI.
Một sự chia rẽ thú vị đang hình thành trong không gian hiện tại. Trong khi hầu hết các phòng thí nghiệm AI đang trong cuộc đua vũ trang về số lượng tham số—ném thêm tính toán, thêm dữ liệu vào các mô hình ngày càng lớn—một số dự án đang đặt cược khác.
Cách tiếp cận của Sentient AGI? Họ không theo đuổi kích thước. Họ đang theo đuổi kiến trúc lý luận thông minh hơn. Đó là cuộc tranh luận cổ điển: sức mạnh thô vs giải pháp tinh tế.
Hãy nghĩ về điều đó—có phải não lớn hơn tự động có nghĩa là suy nghĩ tốt hơn? Hay là về cách bạn xử lý và kết nối các ý tưởng một cách hiệu quả?
Ngành công nghiệp đang cuồng nhiệt với GPT-5, GPT-6, bất cứ điều gì tiếp theo với hàng triệu triệu tham số. Nhưng có thể bước đột phá thực sự không nằm ở quy mô. Có thể nó nằm ở việc dạy các mô hình thực sự lập luận qua các vấn đề thay vì chỉ đơn giản là nhận dạng mẫu một cách cực đoan.
Không nói rằng một cách tiếp cận nào đó chắc chắn tốt hơn. Chỉ lưu ý rằng không phải ai cũng đang chơi cùng một trò chơi nữa.