Наука тонет в данных
Новая проблема в науке. Данных становится больше, чем исследователи могут разумно хранить и поддерживать.
Будущие радиотелескопы в Южной Африке и Австралии смогут генерировать около 700 петабайт данных в год — примерно как 149 млн DVD.
Но «сохраним всё навсегда» больше не работает.
Данные нужно хранить, описывать, резервировать, защищать, оплачивать и делать понятными для других учёных. Без нормальных метаданных и отбора даже огромный архив быстро превращается в цифровую свалку.
Но надо признать что ценность данных не равна их объёму. Науке всё чаще нужно решать, что сохранять полностью, что сжимать, что удалять, а что документировать лучше.
Будущее — не в бесконечном накоплении данных, а в умении оставлять то, что действительно можно проверить и переиспользовать.
#данные #наука #архивы
