forum.dolgachov.com - форум о фотобанках, стоках и продаже фотографий / microstock forum

forum => Фототехника => : Andrejs Pidjass June 11, 2010, 02:59:27 PM

: RAID на скорость
: Andrejs Pidjass June 11, 2010, 02:59:27 PM
Кто знает имеет ли смысл делать RAID на скорость для фотографий? Ну тоесть на нем будут находиться фотографии с которыми я работаю или буду работать. Бэкап не интересует, он у меня другим образом организован. Вопрос именно в целесообразности рейда для увеличения скорости. Будет ли она заметна или это не имеет смысла?
: Re: RAID на скорость
: SerrNovik June 11, 2010, 03:11:21 PM
Зависит от типа рэйда и от конкретного контроллера...

...The purpose of using RAID is to improve reliability and availability of data, ensuring that important data is not harmed in case of hardware failure, and/or to increase the speed of file input/output...

...Basic mirroring can speed up the reading of data, as a system can read different data from multiple disks at the same time, but it may be slow for writing...

...RAID 1+0: mirrored sets in a striped set (minimum two disks but more commonly four disks to take advantage of speed benefits; even number of disks) provides fault tolerance and improved performance but increases complexity.
: Re: RAID на скорость
: dolgachov June 11, 2010, 03:34:16 PM
Кто знает имеет ли смысл делать RAID на скорость для фотографий? Ну тоесть на нем будут находиться фотографии с которыми я работаю или буду работать. Бэкап не интересует, он у меня другим образом организован. Вопрос именно в целесообразности рейда для увеличения скорости. Будет ли она заметна или это не имеет смысла?

а вот хз, товарищ майор.

у меня на той неделе глюкнул один из 4-х винтов в райде. соответственно, оставалось 3 на один-два дня, пока я не разобрался с проблемой. я не копал, как там устроены алгоритмы, но думаю что райд должен был по-уму автоматом уйти в режим "зеркало" из режима "зеркало плюс скорость".

короче говоря, при работе в шопе за эти два дня я никакой ощутимой разницы не заметил. скорость особо не поменялась.

я не дам зуб, что райд на эти два дня уходил в режим "зеркало", а не в режим "только скорость". но процентов на 95 я в этом уверен.

так что, может быть, и нет смысла в райде на скорость при обработке фоток, если комп сам достаточно сильный.
: Re: RAID на скорость
: Dan70 June 11, 2010, 03:47:38 PM
прирост скорости не составит более 10%, а проблем может добавить, когда будете переставлять операционку...

про "зеркало" ИЛИ скорость в установках выбирается сразу... но с полной уверенностью не скажу, надо почитать...
: Re: RAID на скорость
: Andrejs Pidjass June 11, 2010, 04:09:06 PM
Всем спасибо, наверное не буду заморачиваться в таком случае.
: Re: RAID на скорость
: SLY June 11, 2010, 06:14:11 PM
У меня под RAID0-диск отдано только по 50 гиг с двух винтов, без зеркалирования. Получился быстрый раздельчик на 100 гиг для временных файлов. Отписываюсь на него во время работы над фоткой, получается в 1.5-2 раза быстрее чем на обычный раздел. При размере файла 300+ мег выигрышь получается ощутимый. И скрэтчи на него назначены тоже, но это больше для самоуспокоения, первый скрэтс все равно назначен на RAM-диск ;-)
: Re: RAID на скорость
: vitcom June 11, 2010, 06:56:51 PM
У меня под RAID0-диск отдано только по 50 гиг с двух винтов, без зеркалирования. Получился быстрый раздельчик на 100 гиг для временных файлов. Отписываюсь на него во время работы над фоткой, получается в 1.5-2 раза быстрее чем на обычный раздел. При размере файла 300+ мег выигрышь получается ощутимый. И скрэтчи на него назначены тоже, но это больше для самоуспокоения, первый скрэтс все равно назначен на RAM-диск ;-)

с этого момента можно по подробнее - что за операционка, какие харды и как это все размечено на разделы?
: Re: RAID на скорость
: SLY June 12, 2010, 12:50:25 AM
vitcom, основная операционка Win XP SP3. В системе 4 винта, на одном винда, на втором макось, третий и четвертый отформатированы как MS Dynamic Disk. На них отрезано по 50 гиг с начала диска и собран Stripped Volume (RAID0). Остальное пространство отформатировано как обычные NTFS тома. Такой же финт ушами можно сделать и по технологии Intel Matrix Storage, при наличии контроллера ICH9R, ICH10R и т.п. на материнской плате. Но я не стал так делать из-за апаратной независимости первого способа. Винты обычные. Место для Stripped Volume лучше отрезать с начала пространства винтов, потому что там у них максимальная производительность.
: Re: RAID на скорость
: gothic June 12, 2010, 08:14:55 PM
мне кажется для скорости проще взять SSD
: Re: RAID на скорость
: Dan70 June 12, 2010, 10:25:01 PM
а может для скорости поменять проц  ;D и ядер штук 8

а есть еще один финт ушами... как-то можно операционку грузить в оперативную память
: Re: RAID на скорость
: Andrejs Pidjass June 13, 2010, 01:08:16 AM
SSD взял, но для бутабельного диска с системой и программами. Интересовал именно вариант райда для фоток, но видимо не имеет смысла судя по тому, что Лев рассказал.
: Re: RAID на скорость
: SLY June 13, 2010, 01:42:18 AM
мне кажется для скорости проще взять SSD

Дело в том, что с хорошей скоростью записи работают только дорогостоящие накопители. Дешевые SSD (сейчас гдето до $300) имеют массу проблем: падение производительности при большом потоке данных и при заполнении больше чем на 50% и т.п. Один мой знакомый жаловался что с SSD-диском у него временами замирает вся система секунд на 30-40. Недорогие SSD типа Кингстона, по записи дают скорость всего лишь около 40 мегабайт в секунду.  Конечно если есть 300-500 баксов на приличный SSD, то лучше использовать его а не RAID.
: Re: RAID на скорость
: dolgachov June 13, 2010, 02:35:28 AM
SSD взял, но для бутабельного диска с системой и программами. Интересовал именно вариант райда для фоток, но видимо не имеет смысла судя по тому, что Лев рассказал.

cлушай, а я наглючил.

потому что у меня райд из 4х500. на один терабайт.

и когда осталось 3х500, терабайт целиком зеркалиться никак не мог бы.

поэтому, возможно, он остался-таки в этой ситуации райдом на скорость. точнее, не возможно, а неверняка.

: Re: RAID на скорость
: carrida June 15, 2010, 04:42:56 AM
мне кажется для скорости проще взять SSD

Дело в том, что с хорошей скоростью записи работают только дорогостоящие накопители. Дешевые SSD (сейчас гдето до $300) имеют массу проблем: падение производительности при большом потоке данных и при заполнении больше чем на 50% и т.п. Один мой знакомый жаловался что с SSD-диском у него временами замирает вся система секунд на 30-40. Недорогие SSD типа Кингстона, по записи дают скорость всего лишь около 40 мегабайт в секунду.  Конечно если есть 300-500 баксов на приличный SSD, то лучше использовать его а не RAID.

У меня "дешевый" Kingston. На нем система, заполнен больше, чем на 50%. Ничего не замирает даже на 1 секунду. Скорость записи на него с SATAII винта 125Мб/сек. Сам на себя - 250Мб/сек.
: Re: RAID на скорость
: SLY June 15, 2010, 04:08:47 PM
carrida, а что за модель SSD? Как тестировали? Падает ли скорость при записи например 1-3 гигового файла?
: Re: RAID на скорость
: Dan70 June 15, 2010, 04:49:06 PM
carrida, а что за модель SSD? Как тестировали? Падает ли скорость при записи например 1-3 гигового файла?
в один поток может и не будет падения скорости... а если запустить параллельное копирование, тогда может и упасть...
: Re: RAID на скорость
: SLY June 15, 2010, 06:48:54 PM
Dan70, конечно упадет скорость если в три потока, но интересует скорость записи одного потока одно-трех-гигового файла. В начале копирования и в конце.
: Re: RAID на скорость
: carrida June 15, 2010, 08:13:24 PM
Тупо взял фильм 1,4 Gb и включил секундомер. В первом случае около 12 секунд переписывался файл, во втором ~6 секунд. Модель вроде такая (http://www.arvutikeskus.ee/index.php?pid=37&id=177&menyy_id=37&action=look&lookid=92791), точно уже не скажу. Kingston 64 Gb примерно за $200.

Когда эксперементировал с 7 Gb фвйлом и места оставалось меньше 10% - действительно скорость упала до 50-80 Мб/сек (при записи сам на себя)
: Re: RAID на скорость
: Dan70 June 15, 2010, 09:07:55 PM
так ведут себя все "флешки"... начинают тормозить, когда мало места и когда потоков больше одного. при чтении скорость супер, а при записи меньше...
с хдд такого почти нет, особенно если кэш большой
: Re: RAID на скорость
: SLY July 11, 2010, 08:12:45 PM
Прикупил на днях SSD Corsair P64 (CMFSSD-64GBG2D) на контроллере Samsung второго поколения, с поддержкой TRIM и автоматического Garbage Collection (спец метод, чтобы не терялась производительность SSD со временем). Поставил систему, все зашибись быстро работает, фотошоп CS5 запускается примерно за 3 секунды первый раз и за 1.5 из кэша. Для промежуточной записи диск показал результаты хуже моего RAID0-массива из двух WD Green. Система в целом, конечно, работает намного быстрее за счет ничтожно малого времени произвольного доступа к файлам, но именно для отписки больших файлов, с учетом стоимости, лучше подойдет RAID0 или MS Stripped Volume чем SSD. Вот мои результаты тестов на скорость:

(http://img341.imageshack.us/img341/9164/ssdvshdd.jpg)