Kính thiên văn Rubin để thu thập tới 500.000 TB dữ liệu từ camera 3.200 megapixel trong mười năm

Đôi khi thật khó để hiểu được khối lượng dữ liệu khổng lồ trong thực tế số của chúng ta. Điều đáng ngạc nhiên không kém là lượng dữ liệu khổng lồ được thu thập bởi một đài quan sát duy nhất theo dõi không gian bên ngoài. Đài quan sát Vera C. Rubin ở Chile chụp khoảng 1.000 bức ảnh mỗi ngày về bầu trời ban đêm. Gần đây, New York Times đã phỏng vấn các thành viên trong nhóm của đài quan sát, họ xác nhận rằng mỗi bức ảnh được chụp bởi camera của kính thiên văn bao gồm 3.

Telescope ghi lại 2 tỷ pixel, mỗi pixel đại diện cho một trong 65.536 sắc độ xám. Trung bình mỗi hình ảnh có khoảng 6,4 GB dữ liệu. Ảnh được tự động gửi đến các máy chủ gần đó, cho phép kính thiên văn di chuyển và chụp thêm ảnh. Kế hoạch là quan sát cùng một khu vực nhiều lần trong ít nhất một thập kỷ. Nhóm nghiên cứu dự đoán sẽ thu thập được khối lượng dữ liệu khổng lồ, ước tính khoảng 60 tỷ byte, tương đương 60.000 TB, vào cuối dự án.

Bạn có thể quan tâm đến 1.5TB dữ liệu từ kính viễn vọng James Webb được công khai trên internet. Oracle được cho là đã đặt hàng 40 tỷ USD cho các GPU AI của Nvidia cho một trung tâm dữ liệu OpenAI mới. Giải pháp lưu trữ bên ngoài 976TB với tốc độ truyền 28 GB/s này có thể có giá trên 130,000 USD. Để xử lý toàn bộ dữ liệu đó, một trung tâm dữ liệu đã được xây dựng tại Rubin, thiết kế để lưu trữ ít nhất một tháng dữ liệu tại chỗ phòng trường hợp xảy ra sự cố mạng.

Điều này tạo ra sự dự phòng cần thiết để bảo vệ công việc của họ. Nhóm có thể phân tích dữ liệu tại đài quan sát trước khi gửi đi để phân tích thêm. Dữ liệu được truyền tới Phòng thí nghiệm Tăng tốc SLAC, thuộc Trung tâm Nghiên cứu Năng lượng ở Menlo Park, California. Cần 60 dặm cáp quang để kết nối trung tâm dữ liệu với thành phố La Serena ở Chile, đảm bảo dữ liệu này có thể đến được trung tâm nghiên cứu.

Tại đây, các hình ảnh mới được so sánh với những hình ảnh cũ trong cùng khu vực không gian để tìm kiếm sự thay đổi đáng kể. Các biến đổi được tách riêng, làm nổi bật và nghiên cứu sâu hơn. Nhóm ước tính tổng dữ liệu cuối cùng khoảng 60.000 TB, nhưng có nhiều yếu tố có thể làm thay đổi con số này. Họ cũng cho rằng dữ liệu có thể lên tới 500.000 TB.

Tiến sĩ O’Mullane, phó giám đốc sản xuất dữ liệu của đài thiên văn, cho rằng việc các nhà thiên văn học phân tích dữ liệu lớn như vậy sẽ dễ dàng hơn nhờ AI. Hãy theo dõi Toms Hardware trên Google News để nhận tin tức, phân tích và đánh giá mới nhất. Đừng quên nhấn nút Theo dõi.

Nguồn: www.tomshardware.com/pc-components/storage/rubin-telescope-to-collect-up-to-500-000-tb-of-data-from-3-200-megapixel-camera-over-ten-years-each-image-is-6-4-gb-facility-has-its-own-data-center-for-data-storage