Сообщение от HolyDel
мне же столько оперативы (64 гб) нужно по другой причине. мы часто работаем с большими объемами данных (карты земли, погодные карты, которые вполне могут отжирать и по 20-40гб).
|
Вот у тебя специфика и работа требует.
Работа с большими данными отлично прализируется/hadoop'ится и стримиться при обработке и анализе, нежели грузить такой объём данных и держать их в ОЗУ.
Если обработка является bottleneck'ом, то зачем грузить так много данных наперёд? Если обработка слишком быстрая, то тем более стримингом это всё быстро будет выбрасываться.
Если конечно у вас не было требований по срокам, и мудрить с паралеллизацией времени нет, поэтому проще просто всё грузануть и один раз обработать.
Но я сомневаюсь что у нас ещё кто-то здесь на форуме имеет хоть мало-мальски схожую ситуацию и спец требования такого рода.
Обсуждение хомячье.