linear attention
AssessKỹ thuật
Cách biểu diễn attention giúp tránh chi phí bậc hai bằng cách tái cấu trúc phép tính.
Vì sao ở đây
Xếp vào Assess: 4 bài bằng chứng từ 2 nguồn, chủ yếu là tin nghiên cứu, 0 bài trong 30 ngày qua. Độ tin cậy 48%.
Bằng chứng (4)
- 3Hacker News·18/8/2026researchDùng chuyển động của tàu hỏa như máy quét phẳng
Bài viết mô tả một dự án dùng camera quét tuyến tính công nghiệp để chụp ảnh siêu rộng từ tàu hỏa và phà đang di chuyển bằng cách ghép các lát dọc liên tiếp thành một khung hình. Tác giả bàn về các thách thức kỹ thuật khi bù chuyển động và tạo ảnh quét sạch hơn, đồng thời tham chiếu các kỹ thuật quét cảm biến và slit-scanning trước đó.
- 5Ars Technica AI·29/7/2026researchAI được áp dụng để giải mã các ngôn ngữ thất truyền
Bài viết xem xét các nỗ lực sử dụng AI để hỗ trợ giải mã những ngôn ngữ cổ không có “mỏ neo” quen thuộc như văn bản song ngữ hoặc ngôn ngữ họ hàng gần. Bài nêu Linear A và Etruscan là những trường hợp khó, যেখানে các phương pháp ngôn ngữ học truyền thống vẫn chưa thể giải thích trọn vẹn hệ chữ viết hoặc ngữ pháp của chúng.
- 4Hacker News·28/7/2026researchGiải thích họ biến thể attention tuyến tính DeltaNet
Bài viết trình bày cách suy ra họ phương pháp attention tuyến tính DeltaNet, bắt đầu từ causal softmax attention rồi dần đơn giản hóa thành các dạng attention tuyến tính. Nội dung cũng liên hệ các ý tưởng này với DeltaNet, Gated DeltaNet và Kimi Delta Attention, đồng thời nhấn mạnh các phép cập nhật trạng thái và cách triển khai theo kiểu recurrent và chunkwise.
- 8Hacker News·28/6/2026researchLineShine vươn lên vị trí số 1 TOP500 tại ISC 2026
Tại ISC 2026, bảng xếp hạng TOP500 đã ghi nhận LineShine ở Thâm Quyến, Trung Quốc là siêu máy tính số 1 mới, vận hành bằng hệ thống Armv9 chỉ dùng CPU quy mô lớn. Bài viết cũng nêu HPCG ấn tượng của LineShine, hệ thống HPC7 của Italy gia nhập nhóm dẫn đầu, và Fugaku vẫn duy trì sức cạnh tranh cao dù đã ra mắt nhiều năm.