Существует проект для лаборатории. Требование сохранить лабораторные данные (необработанных данных и связанной с ними информации) для исследований в течение многих лет. Таким образом, данные должны сохраняться годами, но данные такие большие, каждый необработанных данных более 10 ГБ. Если мы храним необработанные данные в файле таблицы SQL Server и сохраняем соответствующую информацию в обычной таблице SQL Server, то после нескольких месяцев или лет размер базы данных настолько велик, что мы должны перенести некоторые данные истории из базы данных.Является ли таблица файлов SQL Server пригодной для хранения больших файлов (более 10 ГБ)?
Возможно, мы могли бы добавить файлы (на другом жестком диске) в файловую группу filestream для файла таблицы (хранить необработанные данные), но я считаю, что это не подходит для поддержки SQL Server. Мы должны поддерживать согласованность исходных данных и данных.
Фактически мы рассмотрели использование ленты для сохранения исходных данных истории. Мы хотим использовать жесткий диск для сохранения последних необработанных данных и использовать ленту для сохранения исходных данных истории. Когда мы перемещаем данные истории на ленту, мы записываем журнал перемещения в таблицу, чтобы мы могли знать, куда перемещаются данные истории, и как можно скорее забрать его.
Есть хороший совет для меня:
- Как хранить исходные данные и связанную с ними информацию?
- Подходит ли файл для сценария?
- Есть ли еще одно хорошее решение для этого сценария?
Я бы сказал, сохраните метаданные в базе данных и сам файл «где-то еще». Где это зависит от того, как, когда и как часто вы хотите его использовать. Я не должен сохранять файлы в базе данных, но вы сами пришли к этому ответу. – Alfons
Одна деталь требования: у нас есть машина (Xradia MicroXCT) для сканирования образца (например, небольшие скалы), при обработке мы вводим некоторые параметры для системы управления MicroXCT. Из-за параметров важны результаты MicroXCT, поэтому мы должен сохранять параметры и результат MicroXCT (необработанные данные), размер которых превышает 10 ГБ. Исходные данные будут обрабатываться в следующие дни или месяцы или годы, поэтому мы должны хранить необработанные данные и параметры в течение длительного времени. – huoxudong125
Являются ли сырые данные одним файлом или серией файлов, которые создают весь набор данных? –