forum.dolgachov.com - форум о фотобанках, стоках и продаже фотографий / microstock forum
forum => Фототехника => : dolgachov June 15, 2012, 02:49:49 PM
-
ребята, что бы вы могли посоветовать для бэкапа массива данных в 20 Терабайт?
жёсткие диски уже достали.
может быть, есть какие-то ленточные накопители, которые вместе с кассетами по цене выходят дешевле, чем 7 дисков по 3Тб? и при этом надёжны?
-
а чем достали-то? по надёжности и скорости доступа самое оно... можно делать райд-массивы, а можно и не делать. ленточные ничуть не надежней, но медленней точно. ssd будет дороже, быстрее всего по доступу, про надёжность жалоб не слышал ни от кого.
-
нет, я про недорогой и надёжный БЭКАП. мне не нужна скорость. мне нужно восстановить оттуда, если основная копия навернётся.
вариант дешёвого бэкапа 20 Тб на SSD я как-то даже в страшном сне представить не мог ;]
-
ну тогда, наверное, и вариантов нет... обычные винты и всё. можно не 7200 оборотов, а 5400 - так даже дешевле выйдет, а по надежности то же самое. про ленты я тоже в самом страшном сне не рассматриваю. это как магнитофонная кассета... надо что-то из конца - мотай часок.
винты для надежности можно сделать зеркальными.
-
а мне как раз интересно послушать тех, кто хорошо разбирается в современных ленточных.
-
http://h30094.www3.hp.com/product/sku/10243919/mfg_partno/EH957A&jumpid=in_r3924_us%2Fen%2FSASS-SMB-PS%2FCustomerViewed%2FOverview%2FSelect%2FSMB-PS%3AStorage%3ATape+drives%3ALTO+Ultrium+tape+drives%2FEH957A%2FEH899A
такого плана. но здесь мне цена не нравится, это слишком дорого для моих объёмов данных.
-
страница не живая "Sorry, we can't find that page"
да нет там ничего интересного. магнитная лента, на нее пишется файл. всё как в старом магнитофоне, как в кассете минидиви. со временем порошок обсыпается и есть шанс, что файл перестанет читаться. её даже не обязательно мотать... просто от времени обсыпается.
-
может моё мнение сильно предвзятое, просто я в своё время наелся этими технологиями.
-
нашел похожий на этом сайте
http://www.karma-group.ru/catalog/tape_drives_fujitsu
там есть онлайн консультат, может с ним проконсультироваться?
-
страница ожила, посмотрел... конечно скорость написана красивая: Data Transfer Rate - 277.76 MBps (Compressed), но скорость компа будет ниже почти на порядок. а цена так просто зверская - $3,609.00
1. не верю я, что наклееный порошок на гибкую ленту будет лучше стоять, чем на пластине обычного винта.
2. не верю я, что наклееный порошок на трущиеся поверхности будет лучше стоять, чем на пластинах, которые не касаются друг друга.
может у кого есть опыт работы (лет 5-10) с таким устройством, поделитесь. меньше не интересно - двд диски раньше тоже не портятся.
-
Не совсем по теме, но близко, киношники то, до сих пор, как я понимаю, пользуются вот такими магнитофонами (http://www.panasonic.com/business/provideo/AJ-HD1800.asp?category=dvcpro)(сам лет 5-6 назад этим занимался), ну по крайней мере пользовались лет 10 точно. Там один кадр, - это тупо 8 Мб цифры, 30 кадров в секунду - 240 МБ, оно ясное дело легко выдаёт, не ошибается и не глючит, это не аналоговое видео, за ошибку в 1 бит мозг вынесут (оно понятно, они то актёрам платят ;) ). Так я писал управление этим магнитофоном, и над парой кассет мы там издевались чуть не ежедневно и на протяжении 3-4 лет. Дисков за это время выбросили штук 20, а кассеты блин жили.
Оно конечно там трётся, НО не вибрирует )))) такие сложились впечатления, потому наверное и живёт дольше. И потом, кассета не умирает вся сразу и махом. Это может звучит как слабое утешение, но по сравнению с упавшим диском.... Ну и наконец скопировать одну кассету на другую, при наличии двух ЗУ — плёвое дело ;)
Повторюсь, это не те накопители о которых идёт речь, (см. разницу в ценах ;) ) но технология, как таковая, мне кажется не такой уж плохой
хм, вон киношники то, тоже на SS переходят (http://www.panasonic.com/business/provideo/solid-state-recorder-workflow.aspl)..., продукты новые есть (как и бабосы ;) )
-
ну предположим, что всё надежно... а как найти какой-то файл??? я вот ну никак не найду быстрого способа. на диске секторная структура, перемежение отконца к началу - милисекунды... а ленту надо мотать взад и вперед. как по мне, так это мазохизм
-
нуууу конечно, быстро оно не найдёт, тут спору нет (точно даже не знаю, есть там поди индексирование). эт я не знаю ))) в кино там просто timeframe... и мотает он со свистом, натурально ;) замечу, что вся лента при этом не трётся.
Но и назначение всё-таки другое. И его рассматривать, вероятно, стоит не как альтернативу дискам, а дополнение. Скажем 1-2 месяца (года ;) ) давности - на дисках, а старше - можно перемещать на ленту, что-то типа того...
-
лента трется и еще как, только не об считывающую головку, а об соседний виток при перемотке. и чем чаще происходит перемотка, тем больше трется. лев говорил про 20 тб... как ни верти, а файлы один от другого будут в десятках метров и мотать придется много и долго.
неделю назад я оцифровывал видеокассету, записанную в 1999 году. запись была, разумеется, аналоговая. изображение сильно снежит, дрожит, сильно потемнело, некоторые кадры просто пропали. и это так по всей поверхности. конечно покрытие с тех пор улучшили, но и это больше не аналоговая запись. если повреждается хоть маленький фрагмент ленты - повреждается ВЕСЬ файл.
-
это профессиональные решения, с надёжностью там всё ОЧЕНЬ хорошо. это я тебя уверяю. ;]
-
ну, за такие-то деньги... а поиск нужного файла? на винте открыл просмотрщик и ткнул пальцем, а там вряд ли так будет.
-
думаю, и с этим никаких проблем нет. но мне нужен именно БЭКАП. записал резервную копию. положил в сейф. и молишься, чтобы никогда не понадобилось.
поиск файлов меня не интересует, интересует возможность восстановления из архива целых каталогов.
-
вы сейчас путаете просто хранение текущих данных и бэкап. это разные вещи.
-
вы сейчас путаете просто хранение текущих данных и бэкап. это разные вещи.
про это я не забывал. просто я про цену и качество говорил.
есть еще один момент. сколько уже было всяких носителей информации? сиквесты, зипдрайвы, магнитооптика, cd, dvd и т.д. и т.п. всё это требует свою читалку. винт самодостаточный аппарат. конечно, были и разные интерфейсы (scsi, ide и sata)... кто знает где сейчас прочитать магнитооптику или зип? найти комп с scsi намного проще. все эти годы надо будет хранить и читалку тоже. заодно придётся молиться еще и о том, чтобы она не сломалась.
-
конечно, хотя дело хозяйское. ни в коем случае не пытаюсь отговорить, только высказывал свое отношение к вопросу.
-
кабы я точно сам знал ответ - я бы не спрашивал советов. :]
-
Лев, я относительно недавно обсуждал этот вопрос с одним знакомым айтишником, который работает в крупном канадском банке.
Меня тоже интересовало, что очень большие компании используют для бэкапа.
Он спокойно так сказал, что именно ленты, потому что они надёжны и недороги :)
Так что, думаю, ты в правильно направлении смотришь.
-
то, что все крупные корпорации бэкапятся на ленты - это точно.
надо только посчитать примерно стоимость такого решения и приемлима ли она для таких объёмов. возможно крутовато выходит по цене. попробую на неделе сделать исследование.
-
мы (большая корпорация) бэкапимся на ленты.
Я хотел предложить в онлайне бэкапится, но сейчас глянул цены на такие обьемы... и всё таки, дороговато. Но как только найду возможность, залью архив готовых фото на гугл. Там у меня гигабайт 350-400. Цена приемлимая.
-
я бэкаплюсь в онлайн тоже. но вот в последний месяц глючит их специальный клиент. и привет. :(
-
глюки со временем починят. а вот чем в принципе не вариант для хранения? закинул и не надо париться на чем они хранят.
цена, удобство или скорость доступа не устраивает?
-
ну вот если мне надо восстановиться прямо сейчас будет - то фиг. их клиент на моём компе работает минуту и вылетает. а до этого работал стабильно. а сейчас считай что нет этого бэкапа.
-
понятно... ну винты чем не угодили? сыпятся или ещё что?
-
я бэкаплюсь в онлайн тоже.
Лев, какой онлайн сервис используете?
-
понятно... ну винты чем не угодили? сыпятся или ещё что?
да уже их складывать некуда, эти винты. ;(
-
я бэкаплюсь в онлайн тоже.
Лев, какой онлайн сервис используете?
crashplan
дёшево. только вот, как оказалось, нифига не сердито. реинсталл их софта ничего не дал. софтина то не может к ним законнектиться сутками то вылетает через минуту. делать из-за этого реинсталл ОС, который, наверное, поможет, совсем не хочется. в общем, жопа.
-
самые большие винты терабайта по 2. итого 10 винтов + еще столько же бэкап... хорошая куча :kos:
а какая же куча будет в кассетах?
-
я бэкаплюсь в онлайн тоже.
Лев, какой онлайн сервис используете?
дёшево. только вот, как оказалось, нифига не сердито. реинсталл их софта ничего не дал. софтина то не может к ним законнектиться сутками то вылетает через минуту. делать из-за этого реинсталл ОС, который, наверное, поможет, совсем не хочется. в общем, жопа.
можно поставить виртуальную машину и проверить как работает на ней... может не в оси дело.
-
самые большие винты терабайта по 2. итого 10 винтов + еще столько же бэкап... хорошая куча :kos:
а какая же куча будет в кассетах?
зависит от ёмкости лент. есть по 3Тб. ну и они маленькие физически.
винты самые большие из реально продающихся на каждом углу - тоже по 3Тб пока.
-
я бэкаплюсь в онлайн тоже.
Лев, какой онлайн сервис используете?
дёшево. только вот, как оказалось, нифига не сердито. реинсталл их софта ничего не дал. софтина то не может к ним законнектиться сутками то вылетает через минуту. делать из-за этого реинсталл ОС, который, наверное, поможет, совсем не хочется. в общем, жопа.
можно поставить виртуальную машину и проверить как работает на ней... может не в оси дело.
ну, видишь, когда я им деньги платил, я не думал, что мне ещё придётся учиться какие-то виртуальные машины ставить.
-
виртуальная машина это только название такое страшное, а на деле ставишь программу VMware и дальше всё, как на обычном компе
Общие сведения о виртуальных машинах
Виртуальная машина — это полностью изолированный программный контейнер, который работает с собственной ОС и приложениями, подобно физическому компьютеру. Виртуальная машина работает полностью аналогично физическому компьютеру и обладает собственными ЦП, памятью, жестким диском и сетевым адаптером.
Установленная на ней операционная система, а также приложения и другие компьютеры в сети оказываются не в состоянии отличить, имеют ли они дело с виртуальной или физической машиной. Даже сама виртуальная машина считает себя «настоящим» компьютером. Но несмотря на это виртуальные машины состоят исключительно из программных компонентов и не включают оборудование. Это дает им ряд уникальных преимуществ над физическим оборудованием.
-
я бэкаплюсь в онлайн тоже.
Лев, какой онлайн сервис используете?
crashplan
дёшево. только вот, как оказалось, нифига не сердито. реинсталл их софта ничего не дал. софтина то не может к ним законнектиться сутками то вылетает через минуту. делать из-за этого реинсталл ОС, который, наверное, поможет, совсем не хочется. в общем, жопа.
Таже проблема была с ними месяц назад. Клиент вылетал через 15 секунд после запуска. Более того - оказалось что до этого полтора месяца нормально не бекапировалось, так как не сразу проблему заметил.
ticket в поддержку - они попросили логи, дали инструкции в тот же день как клиенту дать побольше памяти. После этого все заработало опять нормально. Видимо когда число файлов переваливает за некоторое число (явно большее чем у большинства) - то клиент просто упирается в лимит предустановленный, который легко повысить.
Мы же им деньги платим - пусть поддержка работает.
реинстал ОСи кстати скорее всего ничего не дал бы.
Вот что они мне тогда написали:
Your client is crashing too quickly. To start with, I would like to resolve the crashing issue by increasing the memory allocated to CrashPlan.
Running Notepad or any other text-editor as an Admin, edit the CrashPlan engine's CrashPlanService.ini file to allow it to use more java memory:
1. Stop the backup engine: http://support.crashplan.com/doku.php/how_to/stop_and_start_engine
2. Locate and edit the below line in C:\Program Files\CrashPlan\CrashPlanService.ini
-Xmx512m
3. Edit to something larger such as 640, 768, 896, or 1024. E.g.:
-Xmx1024m
This sets the maximum amount of memory that CrashPlan can use. CrashPlan will not use that much until it needs it. I would recommend starting out setting it to 768, and go higher only if you continue experiencing problems. You can set it as high as 2048 on 32-bit systems, or even higher on 64-bit systems.
4. Start the backup engine.
Once that is complete, let CrashPlan run for 24 hours before we begin to look for any data loss.
-
у меня началось после того, как забэкапилось 1.2Тб и ещё 6Тб я поставил в очередь
спасибо, я сделал эти изменения. посмотрим, что теперь будет.
-
похоже, помогло. и действительно, прога берёт больше чем 512Мегов, я сейчас посмотрел.
-
у меня началось после того, как забэкапилось 1.2Тб и ещё 6Тб я поставил в очередь
спасибо, я сделал эти изменения. посмотрим, что теперь будет.
Да, у меня где-то 1.3 было залито когда проблемы начались.
-
по поводу флагов (Xmx): не увлекайтесь ими, не ставьте слишком большие значения: может тормозить еще больше )
-
да оно, видишь, не тормозило, а вылетало.
я поменял 512 на 1024. пока вроде полёт нормальный.
-
SerrNovik, всё работает, да. спасибо!
скажи, ты уже сколько туда успел забэкапить? восстанавливать приходилось?
-
глючный этот crashplan да. купил на год безлим. мои 200 гигов туда бекапились 2 месяца. жесть конечно. насчет продлять - подумаю.
-
по скорости у меня проблем нет. у меня сейчас канал из офиса - 25Мегабит на аплоад - ровно на этой скорости и фигачит. подозреваю, что если бы канал был потолще - тоже шло бы на максимуме.
не исключаю, что у них серваки в Эстонии. это обычное дело.
-
глючный этот crashplan да. купил на год безлим. мои 200 гигов туда бекапились 2 месяца. жесть конечно. насчет продлять - подумаю.
У меня тоже долго грузилось на старой сетевой карте
С новой картой полилось в несколько раз быстрей :blob8:
-
кстати, да. старые сетевухи и рутеры иногда играют плохие шутки.
-
новая карта- новый драйвер. а вообще я старые вещи стараюсь своевременно заменить
-
у меня тоже скорость от 20 мегабит. и на фтп на стоки фотки грузятся с большой скоростью... а вот именно крашплан работал со скоростью 20 кбит/с. даже общение с саппортом не помогло. :)
-
У меня крашплан был очень медленный при большой скорости загрузки на стоки на старой сетевой.
До замены частенько штурмовал и крашплан и провайдера своего
На новой крашплан и стоки шуршат довольно таки быстро не сравнить.
Я не думал, что будет такая разница при смене сетевой и дров.
-
Тоже нет проблем по скорости. Да, изначальный терабайт грузился месяца два - но у меня где-то мегабит был. Сейчас побольше - так и грузится быстрее.
Очевидно если тормозит - проблема не в краш плане. Может провайдер режет некоторые протоколы. Некоторые например пытаются торрент-трафик в низкий приоритет ставить. Может краш план туда же попал.
-
а сколько уже залил туда? восстанавливать пробовал?
-
У них есть best practice для тестирования, которую они рекомендуют пройти и попробовать до покупки - помню я это делал - все работало. Там как раз расписаны все сценарии - закачка, востановление, откат до версии в прошлом.
В штатном режиме я часто использую их веб-клиент - чтобы что-то забрать если я в другом географическом месте и что-то надо. Например взял в дорогу фотки атрибутировать, хочешь залить, а релизы забыл. Несколько раз использовал клиенты для мобильных устройств - чтобы что-то кому-то показать. Но это конечно не бекап - а бонусы к основной функции.
Как я и говорил - у меня где-то 1.5 терабайта. И плавно растет по мере новых съемок. После последнего факапа из за ограничений памяти почти все перезалилось. Сегодня только отчет приходил - там девяносто с чем-то процентов. Он почему-то все почти с начала начал перезаливать. На эти полтора терабайта ушло где-то 25 дней часов по 23-24 в сутки. Т.е. если бы за это время упал бы рейд - я бы всеравно востановил - так как в краш плане можно было откатиться на дату в прошлом - и все файлы там были доступны, я их видел и выборочно скачал - проверил, хотя сначала понервничал.
-
А помимо crashplan есть вменяемые варианты? Сервисов куча, но может у кого то есть положительный опыт?
мне на данный момент надо не больше 2Тб бэкапить
-
Поставил попробовать. Грузит со скоростью 0,5-1 Mbps, хотя канал до 10 Mbps. Сделал все, что советуют для повышения скорости, кроме замены карты. Не помогает. Написал в суппорт, посмотрим что ответят.
-
Поставил попробовать. Грузит со скоростью 0,5-1 Mbps, хотя канал до 10 Mbps. Сделал все, что советуют для повышения скорости, кроме замены карты. Не помогает. Написал в суппорт, посмотрим что ответят.
не поможет :)
-
Сделал все, что советуют для повышения скорости, кроме замены карты. Не помогает. Написал в суппорт, посмотрим что ответят.
Это слабое место любого такого сервиса. здесь лучше ищите замену вашему провайдеру например с оптикой и хорошим каналом зарубеж
-
Сделал все, что советуют для повышения скорости, кроме замены карты. Не помогает. Написал в суппорт, посмотрим что ответят.
Это слабое место любого такого сервиса. здесь лучше ищите замену вашему провайдеру например с оптикой и хорошим каналом зарубеж
уж что-то, а канал зарубеж из эстонии толстенный :) тут дело не в канале, просто у крэша, насколько понимаю, такая "политика партии": столько людей бэкапятся, что они вынуждены ограничивать скорость
-
Когда я начинал ими пользоваться влоб задавал вопрос - мне кажется вы режете - они нет, мы нарочно не накладываем никаких искуственных ограничений.
Может их с тех пор уже загрузили как следует из за того что у них очень хорошая цена для предлагаемого продукта...
p.s. Мне лично кажется что 1 мб реальной скорости достаточно для бэкапа.
-
у меня ровно фигачит на 25 Мегабит туда. день и ночь.
-
У меня 5-10 мегабит стабильно
-
а вот нифига. насвистел я. на 2.5 Мегабита. просто я цифры интерпретировал в стиле торрент-клиентов. сейчас прикинул - нет, нет там никаких 25. есть 2.5