KaraBY писал(а):
Ну не знаю, пойдут ли на это пользователи. Если бы это был торрент, где можно предварительно выбрать что закачивать, то да, а когда ссылки... Если это не ссылка на некую папку (реальную или виртуальную). Но при этом всё равно придется качать каждый файл по отдельности. Либо собирать всё издание в один архив, а это практически может быть нереально, если это издание само занимает терабайт (есть и такие собрания).
Не обязательно собирать в единый архив, если хранение организовано в виде виртуальных папок. Посмотрите "облака" в том же mail ru, отмечаете файлы любых форматов и сразу их все скачиваете. Существующую инфраструктуру хранения, не придется переделывать.
KaraBY писал(а):
Дело не только и не столько в хранилище.
Да, сейчас в базе 9 тб. файлов. Но в работе ссылки на многие десятки(!) тб внешних ссылок, разбросанных по официальным библиотекам и архивам. Какой смысл всё это грузить в одно место?
Но возьмем хотя бы только наши запасы. Найдем мы внешнее облако на 10 тб. Заполним. Через какое то время появится еще 10 тб. файлов. Их придется размещать в другом облаке.
Просто нужно изначально разработать логистическую структуру хранения файлов наперед. Те издания которые больше не выходят, хранить в одном месте, дополнительного места не оставлять. Дальше рассчитывать, сколько наперед оставлять свободного места, исходя из периодичности выхода издания. Условно говоря, заполняем 800ГБ из 1ТБ, остальное место резерв под новые выпуски. Да, в конечном счете рано или поздно, место может закончится, но если все по уму организовать, этого может хватить на очень долгое время. В крайнем случае, ничего не помешает разместить дополнительную ссылку на продолжение издания в новом облаке, в любом случае это существенно расширит функционал системы в целом.
KaraBY писал(а):
А значит, одно издание будет разделено уже на 2 части. Всё равно не удастся одной ссылкой скачать все файлы одного издания.
Мне сейчас допустим в числе прочего, нужна Новая газета, я изначально пытаюсь скачивать подборки изданий с трекеров, а потом дополняю недостающими номерами с MagzDB, но для данного издания доступна только 1 подборка из 15 номеров, в MagzDB учтено 792 номера, соответственно все остальное мне придется выкачивать вручную, займет это по прикидкам несколько часов, а в облаке это будет представлено в виде 2 ссылок.
Даже не обязательно менять существующую инфраструктуру, просто постепенно дублировать издания в облако и добавлять дополнительно ссылки, на загрузку всего разом.
