Высокопроизводительное многопоточное приложение требует аппаратного обеспечения

Question

Я ищу оборудование, которое должно работать около 256 вычислительно интенсивных в режиме реального времени одновременных задач в режиме 24 часа (одно многопоточное приложение C). Каждая задача занимает около 40-50 MFLOP, поэтому для всех задач требуется около 10 GFLOP. Скорость CPU-RAM незначительна. Все задачи должны управляться ядром Linux (32 бит, с SMP).

Я ищу решение с одной материнской платой с одним многоядерным процессором (если такой ЦП существует). Если такой ЦП не существует, то мне нужно одно решение для материнской платы mulit-socket (с несколькими процессорами).

Можете ли вы, пожалуйста, порекомендовать мне любое профессиональное решение для CPU/материнской платы, которое удовлетворит такие требования? Также очень важно, что проблем с ядром Linux (2.6.25) нет. Нет виртуализации, нет необходимости в огромном ОЗУ или кеш-памяти процессора. Я также предпочел бы архитектуру Intel и хорошо зарекомендовавшую себя стабильность. У меня все еще есть сомнения, что это возможно вообще.

Заранее спасибо.

ОБНОВЛЕНИЕ: Я думаю, что нашел правильный ответ here и here.

Answer 1

UltraSPARC T2 имеет 8 ядер с 8 потоками каждый. Встроенная память с высокой пропускной способностью и IO. T5140 переносит два из них на 128 аппаратных потоков.

Теоретическая максимальная производительность 8 блоков с плавающей запятой составляет 11 Giga flops в секунду (GFlops/s). Однако огромным преимуществом по сравнению с другими реализациями является то, что 64 потока могут совместно использовать единицы, и, таким образом, мы можем достичь чрезвычайно высокого процента теоретического пика. Наши эксперименты достигли почти 90% от 11 Гфлоп/с. - (http://blogs.oracle.com/deniss/entry/floating_point_performance_on_the)

Answer 2

1. Возьмите несколько узлов Amazon EC2.

2. Обновлено: А как насчет PS3? NASA использует их для своих имитационных двигателей.

3. Возможно, использовать CPU + GPU на коммерческих серверах?

4. Построить его вокруг FPGAs: в настоящее время некоторые варианты включают процессоры, которые могут запускать Linux.

Answer 3

Получите кучу четырех- или восьмиъядерных машин и разделите обработку на машинах с помощью своего рода сетки или программного обеспечения для кластеризации. Возможно, посмотрите на Beowulf.

Как вы упомянули, 10GFlops точно не чихается, поэтому на одной машине это будет дорого. Там также проблема, что вы делаете, когда машина ломается, у вас вряд ли будет вторая машина аналогичной спецификации. Если вы создаете кластер с использованием товарного оборудования, вы немного более устойчивы, и легче найти сменные машины.

Answer 4

Не архитектура Intel, но они запускают Linux и имеют 64 ядра на одном кристалле.

TILEPro64

Answer 5

Несмотря на то, что вы дали нам спецификации вы думаете, что вам нужно, мы могли бы быть в состоянии помочь вам лучше, если вы сообщите нам, что приложение предназначено для выполнения, и как это было реализовано.

Возможно, существует лучший способ разделить работу или решить проблему, а не ваше текущее решение.

Answer 6

Я вижу, что вы предпочли бы разведданные, но если вам нужен один чип, я снова предложить процессор Cell - его теоретическая пиковая производительность arount 25GFlops - ядро ​​2.6.25 было для него поддержку уже.

Вы можете попробовать предустановленную игрушку 3 для экспериментов (это будет стоить вам немного) или получить серверное решение примерно в 8 долларов США - вам придется переписывать и точно настраивать свои потоки возьмите преимущество сопутствующих процессоров SPU, но вы можете достичь своих вычислительных потребностей, не разбивая пота с помощью одного CELL (1 PPC core + 8 SPU)

NB: с playstation 3 у вас будет только 6 доступных сопроцессоров - но вы не видите, чтобы быть в бюджете с этим проектом. Итак, вы могли бы хотя бы попробовать набор разработчика ячеек IBM, который предлагает эмулятор, чтобы узнать, можете ли вы закодировать свое решение для запуска на нем ,

Тра являются коммерчески доступными ЭЛЕМЕНТАМИ продуктов, как в качестве автономных серверов в виде лопатки фабрике, и PCI Express надстройки плат для рабочих станций ПК от Mercury Computer Systems: http://www.mc.com/microsites/cell/products.aspx?id=6986

Mercury не перечисляют никаких цен на сайте, но ценовые очки, которые будут вокруг предыдущих, упомянули U $ 8000.00 для этих карт PCI Express.

Игровая приставка Playstation 3 можно приобрести за около $ 300,00 - и позволит вам прототипировать приложение и проверить, соответствует ли оно требуемой производительности. (Я сам получил один, и Fedora 9 работает на нем, хотя я сделал это как хоббист и до сих пор не использовал его для каких-либо расчетов - я также собрал кластер Playstation-3 12 для молекулярных симуляций на Местный университет. Приложенное им приложение не использовало мультимедийные SPU, в то время как я был в контакте с ним. Но даже при этом с тактовой частотой 3,5 ГГц они работали лучше, чем стандартные, по цене ПК, даже учитывая, что PS3 оцениваются в 5 раз выше здесь)

Answer 7

MFLOPS и GFLOPS - очень плохие индикаторы того, насколько хорошо программа может работать на любом CPU. В наши дни кеш-память намного важнее; возможно, точность предсказания ветвления.

Практически невозможно измерить производительность данного приложения на разных архитектурах, не давая ему вращения. И даже тогда вы, возможно, не получите хорошую идею, если вам не повезло, чтобы бессознательно строить с параметрами компилятора, которые разрушили ваш размер кеша, или использовали плохую библиотеку потоков, или любую из ста других вещей.