Apache Parquet
AssessCông cụ
Định dạng tệp lưu trữ dạng cột mã nguồn mở, thường dùng cho các tác vụ phân tích dữ liệu.
Vì sao ở đây
Xếp vào Assess: 3 bài bằng chứng từ 2 nguồn, chủ yếu là tin nghiên cứu, 2 bài trong 30 ngày qua. Độ tin cậy 45%.
Bằng chứng (3)
- 7InfoQ·12/8/2026researchSpotify bổ sung cơ chế lập chỉ mục ngoài để truy vấn Parquet độ trễ thấp
Spotify đã giới thiệu kiến trúc lập chỉ mục ngoài cho hồ dữ liệu Apache Parquet, giúp các truy vấn điểm được phục vụ với độ trễ thấp mà không cần sao chép dữ liệu sang cơ sở dữ liệu vận hành. Cách tiếp cận này ánh xạ khóa tra cứu tới tệp và vị trí dòng, cho phép đọc có mục tiêu từ lưu trữ đối tượng trên đám mây cho phân tích, học máy, ứng dụng AI và dịch vụ trực tuyến.
- 7Hacker News·31/7/2026researchPhân tích đồ thị quy mô tỷ nút chạy với 10GB RAM bằng Apache DataFusion
Tác giả cho biết đã triển khai các thuật toán đồ thị như PageRank và thành phần liên thông yếu trên các bộ dữ liệu hàng tỷ cạnh bằng Apache DataFusion, dựa vào ghi tràn ra đĩa, quét hàng loạt, phép join và tổng hợp thay vì truy cập ngẫu nhiên trong bộ nhớ. Các thử nghiệm được cho là đã chạy thành công dưới giới hạn bộ nhớ chặt, với PageRank trên 1,05 tỷ cạnh dùng 5GB và WCC trên 1,96 tỷ cạnh dùng 10GB, dù vẫn còn một số lỗi deadlock ở spill pool và các điểm cần tối ưu.
- 5InfoQ·3/7/2026open_sourceHardwood 1.0 mang đến xử lý Parquet trên JVM nhanh, không cần phụ thuộc bắt buộc
Hardwood, dự án Java do Gunnar Morling khởi xướng để xử lý tệp Parquet, đã đạt phiên bản 1. Thư viện này dùng thiết kế đa luồng và không yêu cầu phụ thuộc ngoài bắt buộc; hiện mới hỗ trợ đọc, còn khả năng ghi sẽ được bổ sung ở các phiên bản tới.