Компьютер для обработки изображений

[kis]

Нда...
Озаботился сборкой компа под матрицу 
После проведенного по вопросу совещания результат меня не сильно обрадовал 

 раид
 контролер 3ware
4х76 гб SAS в R0
и
2х750 в R1

ну а дальше все вобщем то стандартно за исключением памяти  ( дорогая она зараза ) попробую пока ограничиться 4 гб потом видно будет

[Garmisch]

раид
 контролер 3ware
4х76 гб SAS в R0

Было бы здорово послушать специалистов по Raid, что они порекомендуют ? Честно говоря, я пока не рискую его себе ставить (в Windows предпочитаю раздельные диски, хотя это и дополнительные разделы).

[kis]

Ну дык а с кем ты думаешь я совещание проводил  с дворниками что ли  Это вполне правильная комбинация для данной задачи. Из серии необходимо и достаточно.
Можны было бы даже попроще.

[Max_canaryskies]

Raid 0 * 4 SAS диска последней модели 15000 оборотов одно из самых быстрых решений с разумной ценой, но этот массив надо использовать только для временного хранения и обработки данных, так как надежность хранения на таком массиве довольно низкая.

Для хранения данных дополнительно поставить парочку раздельных дисков не в массиве, с копированием вручную или по расписанию.

[kis]

Ну все правильно ( именно так и планируется )
Только большие диски я буду все равно зеркалом ставить ну а данные съемок исходники и прочее храняться все равно на других компах да еще дублируются на двд.
Так что общая степень надежности сохранения данных вполне достаточна..
У меня там ничего ценного кроме фотографий собственно и нет.  Все5 же я не датацентр строю а домашний комп для обработки фотографий 

[datumn]

Нда...
Озаботился сборкой компа под матрицу 
После проведенного по вопросу совещания результат меня не сильно обрадовал 

 раид
 контролер 3ware
4х76 гб SAS в R0
и
2х750 в R1

ну а дальше все вобщем то стандартно за исключением памяти  ( дорогая она зараза ) попробую пока ограничиться 4 гб потом видно будет

А может, вместо RAID лучше организовать RAM-диск (все на Win x64)?

[lazyBSD]

А может, вместо RAID лучше организовать RAM-диск (все на Win x64)?

Здравая мысль!

[Max_canaryskies]

В RAM-диске возникнут проблемы с его малым размером (или возникнут проблемы с кошельком  )

Есть варианты SSD, но эта технология еще не созрела.

[Mihail Sedyh]

ну а дальше все вобщем то стандартно за исключением памяти  ( дорогая она зараза )

Сергей, а это какую такую дорогую (особенно по сравнению с 4мя САС-дисками) память ты имеешь в виду?

Насчет виртуального диска  не совсем уверен (оперативки и так немного), а вот помниться была какая-то дивайсина в которую втыкались планки памяти и все это в слот мамки для эмуляции диска - там вроде и памяти побольше и система вроде на нем же могла работать.... (Или ее и имели в виду?)
 
Да, насчет экспериментов с сырыми кадрами мня чем-то зацепила простенькая консольная dcraw ( http://www.cybercom.net/~dcoffin/dcraw/index_ru.html ( по ссылкам есть исполняемые файлы)).

[NKV]

дивайсина в которую втыкались планки памяти и все это в слот мамки для эмуляции диска - там вроде и памяти побольше и система вроде на нем же могла работать....

Gigabyte i-RAM (GC-RAMDISK): жесткий диск на базе DDR SDRAM

[mvp]

SSD память имеет ограниченное число циклов чтение/запись, тем более когда при обработке так все свопиться. Тут нужно как говорили выше серверную платку с процами, побольше памяти, хороший контроллер с большим кэшем PCI-X под рэйд 0+1 или вообще 5, ну и самое главное выкинуть Висту нафиг и поставить 2003 или 2008 сервер. Они кстати в отличие от Висты лучше распределяют ресурсы и память для тяжелых процессов. Если уж и этого не хватет, тогда NLB кластер городить переходя на энтерпрайз

[Uselink]

SSD память имеет ограниченное число циклов чтение/запись, тем более когда при обработке так все свопиться. Тут нужно как говорили выше серверную платку с процами, побольше памяти, хороший контроллер с большим кэшем PCI-X под рэйд 0+1 или вообще 5, ну и самое главное выкинуть Висту нафиг и поставить 2003 или 2008 сервер. Они кстати в отличие от Висты лучше распределяют ресурсы и память для тяжелых процессов. Если уж и этого не хватет, тогда NLB кластер городить переходя на энтерпрайз

Да, кстати мысль о 5 рейде очень полезна, прекрасная защита данных плюс непрерывность работы в случае отказов диска. 2008 сервер не нужен  на него пока что без слёз не взглянешь, 2003 очень надёжен и лишних функций (как в 2008 в нём нет).

[Max_canaryskies]

Дохлый этот RAM - диск от гигабайта. Объем маленький, да и скорость передачи данных не очень.

[Evgeniy Zhukov]

Нда...
Озаботился сборкой компа под матрицу 
После проведенного по вопросу совещания результат меня не сильно обрадовал 

Да,Серёга,уж больно резкий переход ты осуществил при выборе приёмника!
Теперь, чтобы адекватно его задействовать, нужно пару лет подождать, пока вменяемое железо для компа появится!
А что делать в горах?
Хотя,я уверен,что все эти проблемы ты преодолеешь!

[Mihail Sedyh]

Дохлый этот RAM - диск от гигабайта. Объем маленький, да и скорость передачи данных не очень.

Ну судя по статье - да, но ей же уже 2 года, да и ДДР1 наверное уже трудно найти. А что никаких более продвинутых аналого с тех пор не появлялось?

[Семен]

вот и покупай после этого ФЛИ 

[datumn]

Насчет виртуального диска  не совсем уверен (оперативки и так немного), а вот помниться была какая-то дивайсина в которую втыкались планки памяти и все это в слот мамки для эмуляции диска - там вроде и памяти побольше и система вроде на нем же могла работать.... (Или ее и имели в виду?)

Ну почему же оперативки немного. Я же говорил о Win x64.

То есть. Берем машину, например, с 16 Гб. OS нужна - с поддержкой EMT64. Процесс там может обращаться с 64-разрядными адресами (это как программа-максимум), но уж до 16 Гб как минимум все пока еще адресуется на практике. И это относится как к задаче, так и к RAM-диску (виртуальному).

Насчет Maxim DL. С ним я последний раз работал 3 года назад. Он, будучи 32-х разрядным приложениям, чувствовал себя нормально в Win x64, в отличие от IRIS - на то время, повторюсь. Здесь было сказано, что Максиму нужен временный файл, с которым он небыстро взаимодействует. Причин, по которым взаимодействие медленное, немало. Среди них - неоптимальное взаимодействие с файлами вообще - как возможная причина. Тогда, конечно, и RAM-диск будет неважным помощником. Но, скорее всего, это не так; и тогда оперативная память даст очень большое преимущество над вращающимися железками

Драйвер 64-битного RAM-диска, например, здесь: http://www.start64.com/index.php?option=com_content&task=view&id=2004&Itemid=73

[Uselink]

А что делать в горах?
[/quote]
В горах понадобиться ещё и соответствующая  система обеспечения бесперебойного питания (APC Матрикс), охранная система и проч...

[mvp]

вот и покупай после этого ФЛИ  Grin

Да уж. Тут решение мягко говоря не любительское. Сомневаюсь что такие объемы данных щас можно комфортно обработать даже на сервере. Где нибудь в ESO вряд ли данные обрабатываются на рабочих станциях. У них там кластер в подсобке на Сане или ХП наверное во всю трудиться, а на рабочих станциях виден только результат, для дальнейшего неторопливого анализа в том же Максиме. Я к чему тут все же узкое место сам софт, ни многопоточности ни клиент-серверной части нет. По этому для таких больших приемников видимо есть API, что бы любая обсерватория могла под себя его (софт) адаптировать.

Ну почему же оперативки немного. Я же говорил о Win x64.

То есть. Берем машину, например, с 16 Гб. OS нужна - с поддержкой EMT64. Процесс там может обращаться с 64-разрядными адресами (это как программа-максимум), но уж до 16 Гб как минимум все пока еще адресуется на практике. И это относится как к задаче, так и к RAM-диску (виртуальному).

Насчет Maxim DL. С ним я последний раз работал 3 года назад. Он, будучи 32-х разрядным приложениям, чувствовал себя нормально в Win x64, в отличие от IRIS - на то время, повторюсь. Здесь было сказано, что Максиму нужен временный файл, с которым он небыстро взаимодействует. Причин, по которым взаимодействие медленное, немало. Среди них - неоптимальное взаимодействие с файлами вообще - как возможная причина. Тогда, конечно, и RAM-диск будет неважным помощником. Но, скорее всего, это не так; и тогда оперативная память даст очень большое преимущество над вращающимися железками Smiley

По моему 64-х разрядная версия виндов кушает примерно вдвое больше памяти чем 32х, но адресует выше 4гиг. Так что выигрыш здесь не большой, а геммороя...

[Uselink]

вот и покупай после этого ФЛИ 

У меня колесо от ФЛИ, так и то без проблемы не обошлось, в комплекте идёт толстенный шнурок длиной метров 5, который на морозе просто превращается в стальной тросс и не гнётся, хотел переделать, так и на колесе и на USB-контроллере стоит разъём как RJ45 только на 10 контактов....