Суперкомпьютеры России
Текстовую трансляцию онлайн дискуссии "Диалоги о настоящем и будущем", посвященной концепции национальной суперкомпьютерной инфраструктуры, вел портал "Научная Россия". Более подробную информацию можно получить в презентации В. В. Воеводина.
Цитата: hoarfrost от 11.04.2020, 13:55...
Есть и ещё одно, на мой взгляд обстоятельство, о котором, надеюсь, я напишу чуть позже. Продолжение следует! ?
Время пришло. 
Итак, давайте вспомним - а для чего вообще нужны вычисления, а также кому и какие они нужны.
Нужны они, с одной стороны, для фундаментальных исследования (то есть для науки), а с другой - для создания товаров или предоставления услуг (для производства, управления, финансов и т.п.). И традиционно считается, что если в этом коммерческом секторе нет спроса на вычисления - то это плохо, потому что это значит что в его работе не задействован этот очень мощный инструмент. Но именно в этом секторе происходит довольно интересное.
Во второй половине 1990-х годов, после выхода процессора Pentium II, компания Intel сделал его первую серверную версию - Pentium II Xeon, выведя архитектуру x86 на серверный рынок, на котором процессоры, порождённые от обычных дестопных, за несколько лет превратили в редкость системы на других архитектурах - прежде всего Alpha, SPARC и IBM POWER. Причём если процессоры последних двух семейств - ещё вполне присутствуют в современных суперкомпьютерах, то Alpha уже давно превратились в музейный экспонат... одновременно, впрочем многими идеями воплотившись в современных x86!
Но железо бессмысленно без программного обеспечения! Особенно в коммерческом секторе Enterprise-решений для крупных компаний, операторов платёжных систем, крупных торговых сетей, мобильных операторов и банков. В этом секторе, в начале 2000-х очень прочное положение занимали (а где-то занимают и по сей день) системы IBM (те самые мэйнфреймы), системы на Alpha и... Itanium (также Intel-овские, но не совсем и появившиеся, впрочем, как раз где-то в начале 2000-х). И они не просто были, а являлись основой для целых экосистем - из аппаратного обеспечения, OS, СУБД, приложений для формирования отчётности, и пр.пр.пр.
Intel ворвался на этот рынок как лиса в курятник и благодаря Oracle, Microsoft и целому ряду других компаний и просто объединений людей (например таких как Linux Foundation), не просто "взял большую добычу" а передушил всех кроме IBM, позиции которого, может быть и стали слабее (или выросли далеко не так как у Intel), но остались в тех местах, где на них завязана работа очень важного ПО, которое не так-то просто заменить в силу разных причин.
В это же время, на основе отдельных серверов, как из строительных блоков начали производиться кластерные системы "под ключ" - такие ка Teradata, Oracle Exadata, Oracle Database Appliance, Big Data разных видов и т.д. которые позволяли "перемалывать" весьма большие объёмы данных за счёт большочго количества RAM, хорошо организованной дисковой подсистемы, внутренного интерконнекта на основе самых высокоскоростных сетей и, конечно же, довольно большого числа ядер CPU - например нескольких сотен. И они-то по сути, и приняли на себя часть нагрузки, которая раньше могла быть обработана только на, быть может, не очень больших, но суперкомпьютерах кластерной архитектуры с (это важно!) мощной дисковой подсистемой. Одновременно, конечно же, это привело и к некотрому снижению спроса на "обычные суперкомпьютеры", которые производились привычными нам поставщиками таких решений - от IBM до Т-Платформ. Но это не отменяет того, что де-факто такие решения используются. И более того, если к ним присмотреться, то можно сказать, что это не просто кластер, набор серверов и т.д., а новая инкарнация того, что когда называли Business Machine! Да, они вернулись! Просто немного в другом виде.
Цитата: hoarfrost от 27.04.2020, 01:11Цитата: hoarfrost от 11.04.2020, 13:55...
Есть и ещё одно, на мой взгляд обстоятельство, о котором, надеюсь, я напишу чуть позже. Продолжение следует! ?Время пришло. ? Итак, давайте вспомним - а для чего вообще нужны вычисления, а также кому и какие они нужны.
Нужны они, с одной стороны, для фундаментальных исследования (то есть для науки), а с другой - для создания товаров или предоставления услуг (для производства, управления, финансов и т.п.). И традиционно считается, что если в этом коммерческом секторе нет спроса на вычисления - то это плохо, потому что это значит что в его работе не задействован этот очень мощный инструмент. Но именно в этом секторе происходит довольно интересное.
Во второй половине 1990-х годов, после выхода процессора Pentium II, компания Intel сделал его первую серверную версию - Pentium II Xeon, выведя архитектуру x86 на серверный рынок, на котором процессоры, порождённые от обычных дестопных, за несколько лет превратили в редкость системы на других архитектурах - прежде всего Alpha, SPARC и IBM POWER. Причём если процессоры последних двух семейств - ещё вполне присутствуют в современных суперкомпьютерах, то Alpha уже давно превратились в музейный экспонат... одновременно, впрочем многими идеями воплотившись в современных x86!
Но железо бессмысленно без программного обеспечения! Особенно в коммерческом секторе Enterprise-решений для крупных компаний, операторов платёжных систем, крупных торговых сетей, мобильных операторов и банков. В этом секторе, в начале 2000-х очень прочное положение занимали (а где-то занимают и по сей день) системы IBM (те самые мэйнфреймы), системы на Alpha и... Itanium (также Intel-овские, но не совсем и появившиеся, впрочем, как раз где-то в начале 2000-х). И они не просто были, а являлись основой для целых экосистем - из аппаратного обеспечения, OS, СУБД, приложений для формирования отчётности, и пр.пр.пр.
Intel ворвался на этот рынок как лиса в курятник и благодаря Oracle, Microsoft и целому ряду других компаний и просто объединений людей (например таких как Linux Foundation), не просто "взял большую добычу" а передушил всех кроме IBM, позиции которого, может быть и стали слабее (или выросли далеко не так как у Intel), но остались в тех местах, где на них завязана работа очень важного ПО, которое не так-то просто заменить в силу разных причин.
В это же время, на основе отдельных серверов, как из строительных блоков начали производиться кластерные системы "под ключ" - такие ка Teradata, Oracle Exadata, Oracle Database Appliance, Big Data разных видов и т.д. которые позволяли "перемалывать" весьма большие объёмы данных за счёт большочго количества RAM, хорошо организованной дисковой подсистемы, внутренного интерконнекта на основе самых высокоскоростных сетей и, конечно же, довольно большого числа ядер CPU - например нескольких сотен. И они-то по сути, и приняли на себя часть нагрузки, которая раньше могла быть обработана только на, быть может, не очень больших, но суперкомпьютерах кластерной архитектуры с (это важно!) мощной дисковой подсистемой. Одновременно, конечно же, это привело и к некотрому снижению спроса на "обычные суперкомпьютеры", которые производились привычными нам поставщиками таких решений - от IBM до Т-Платформ. Но это не отменяет того, что де-факто такие решения используются. И более того, если к ним присмотреться, то можно сказать, что это не просто кластер, набор серверов и т.д., а новая инкарнация того, что когда называли Business Machine! Да, они вернулись! Просто немного в другом виде. ?
Требуем весь текст огласить! )
Поэтому для построения моделей необходимы суперкомпьютеры. Стоят они дорого, но еще дороже обходится их постоянное поддержание в рабочем состоянии. Учитывая важность создания математических моделей с высоким разрешением, Минобрнауки выделило нам трехлетний грант. В 2019-м он закончился, но нам продлили его еще на год. Безусловно, 30 миллионов ежегодно – сумма большая. Но и потребности немалые. Мы не только оплатили работу примерно 20 человек (включая совместителей), главное – приобрели оборудование: переоснастили наш кластер, персональные компьютеры и программное обеспечение.
Благодаря мегагранту и помощи института, подчеркну этот факт, теперь у нас есть пусть и небольшой, но суперкомпьютер. И все же многие расчеты приходится выполнять в зарубежных вычислительных центрах.
Как видите, мощностей пока не хватает. Все надежда на новую госпрограмму.
Цитата: DimOK от 04.05.2020, 14:52Поэтому для построения моделей необходимы суперкомпьютеры. Стоят они дорого, но еще дороже обходится их постоянное поддержание в рабочем состоянии. Учитывая важность создания математических моделей с высоким разрешением, Минобрнауки выделило нам трехлетний грант. В 2019-м он закончился, но нам продлили его еще на год. Безусловно, 30 миллионов ежегодно – сумма большая. Но и потребности немалые. Мы не только оплатили работу примерно 20 человек (включая совместителей), главное – приобрели оборудование: переоснастили наш кластер, персональные компьютеры и программное обеспечение.
Благодаря мегагранту и помощи института, подчеркну этот факт, теперь у нас есть пусть и небольшой, но суперкомпьютер. И все же многие расчеты приходится выполнять в зарубежных вычислительных центрах.
Как видите, мощностей пока не хватает. Все надежда на новую госпрограмму.
Мы говорим об очень разных вещах. Институт океанологии РАН - это одни люди и одна сторона скажем так "проблемы", а те, кто более всего говорит о том, что у нас мало суперкомпьютеров потому, что из мощность "уступает тем-то и тем-то", (обратите внимание на принципиальную разницу в постановке вопроса!) - это уже совсем другие люди. И от того, что деньги дадут вторым, совершенно не факт, первым станет лучше.
Подозреваю, что проблема нехватки мощностей на самом деле существует (правда, это как-то не стыкуется с почти полным отсутствием проектов РВ от России), но надо понимать, что решение совсем другой проблемы, совсем других людей (т.е. малого числа заказов на суперкомпьютеры), совершенно не обязательно улучшит ситуацию с нехваткой мощностей, если не будут предприняты, какие-то организационые меры.
Суммарно текущие пятьдесят лидеров рынка дали прирост производительности в 7,2 PFlop/s по сравнению с предыдущим набором – 20 PFlop/s против 12.8 PFlop/s в 2019 году. Общая пиковая производительность также повысилась с 20.9 PFlop/s до 30.6 PFlop/s.
Области применения суперкомпьютеров, по большей части, остаются неизменными. Наибольшую актуальность сохраняет сфера науки и образования – ее обслуживают 23 системы, тогда как в прикладных исследованиях используются 10 суперкомпьютеров (на три меньше, чем в предыдущей версии топа). Промышленность по-прежнему слабо охвачена последними достижениями техники – на ее нужды работают только три машины из пятидесяти. Кроме того, в рейтинге фигурируют проекты, предназначенные для таких задач, как сейсмические прогнозы, IT-услуги, облачное хранение, обслуживание коммерческого и финансового секторов.
Источник - Обновлен ТОП50 (рейтинг суперкомпьютеров СНГ): динамика и тренды
Промышленности нет никакой нужды добавлять свои системы в список TOP50. Поэтому просто аппелирование к его содержимому, как и ряду других "исключительно "валовых" показателей - и вызывает определённый скепсис.
hoarfrost, я не аппелирую к этому списку, просто решил добавить очередную новость.
Цитата: DimOK от 05.05.2020, 09:09hoarfrost, я не аппелирую к этому списку, просто решил добавить очередную новость.
Я имею ввиду фразу из самой новости: "Промышленность по-прежнему слабо охвачена последними достижениями техники – на ее нужды работают только три машины из пятидесяти".
А еще в списке ТОП50 нет суперкомпьютера Минобороны под названием NDMC Supercomputer:
Стоит отметить, что упомянутый вычислитель на текущий момент не фигурирует ни в одном из российских или международных рейтингов мощнейших суперЭВМ. Ни одна из публичных российских суперкомпьютерных компаний объявлений о сотрудничестве с Минобороны на данном направлении не делала. Определить по сайту госзакупок, какие именно проведенные тендеры имели отношение к суперкомпьютеру ведомства, не представляется возможным.