Сальников А.М. и др. Введение в параллельные вычисления. Основы программирования на языке си с использованием интерфейса MPI

М.: ИПУ РАН, 2009. - 123 с. Рассматривается архитектура многопроцессорных вычислительных систем. Приводится обзор современных суперкомпьютеров. Описывается работа на суперкомпьютерах кластерного типа и особенности параллельного программирования на языке Си с использованием интерфейса MPI. Среди рассматриваемых вопросов уделяется внимание необходимым навыкам разработки программ в операционной системе Linux. Изложенный материал адаптирован применительно к суперкомпьютеру ИПУ РАН.
Научное издание рассчитано на научных работников, аспирантов, студентов и разработчиков прикладных программ. Содержание
Архитектура многопроцессорных вычислительных систем
Введение
Традиционная классификация вычислительных систем
Классификация многопроцессорных вычислительных систем
Векторно-конвейерные системы
Симметричные многопроцессорные системы (SMP и NUMA)
Системы с массовым параллелизмом (МРР)
Кластерные системы
Программирование для многопроцессорных вычислительных систем
Программирование для систем с общей памятью
Программирование для систем с распределенной памятью
Параллельное программирование
Оценка эффективности распараллеливания программ
Проблемы оптимизации программ
Суперкомпьютер ИПУ РАН
Операционная система GNU/Linux
Инструментарий разработчика
Основы программирования на языке Си с использованием интерфейса MPI
Инициализация MPI
Прием/отправка сообщений с блокировкой
Прием/отправка сообщений без блокировки
Объединение запросов на прием/отправку сообщений
Барьерная синхронизация
Группы процессов
Коммуникаторы групп
Функции коллективного взаимодействия
Типы данных
Литература