Все новости от 19 января 2005 г.

Проект BigTux демонстрирует масштабируемость Linux до 64 процессоров

Во вторник НР продемонстрировала на своем оборудовании Superdome масштабируемость Linux вплоть до 64 процессоров. Тем самым компания старается произвести впечатление на заказчиков, которые все чаще обращаются к Linux при внедрении корпоративных приложений.

На трех разных тестах Superdome со стандартным дистрибутивом Linux на базе ядра 2.6 продемонстрировал линейное улучшение скорости компиляции ядра, пропускной способности подсистемы памяти и общего показателя HPL производительности суперкомпьютера.

Масштабируемость операционной системы важна для компаний; без нее при добавлении процессоров для ускорения решения задачи общая отдача системы будет уменьшаться. При удвоении числа процессоров должна удваиваться и производительность.

На компьютере Superdome, демонстрируемом в лаборатории НР в Бёблингене (Германия), процесс компиляции ядра с использованием одного процессора Itanium 2 занял около 19 минут (в этой задаче компилируется около 20 тыс. файлов).

Так как процесс компиляции состоит из последовательных задач, при решении которых один процессор периодически проверяет работу, при задействовании всех 64 процессоров Itanium 2 производительность увеличилась в 26 раз. Без последовательных задач производительность увеличится в 64 раза, заверил технический руководитель проекта Себастьян Кабаньес.

В ходе теста STREAM пропускная способность подсистемы памяти выросла с 5 Гбайт/с с одной «ячейкой» из четырех процессоров до 10 Гбайт/с с двумя ячейками и продолжала удваиваться до 64 процессоров — или 16 ячеек, при которых была достигнута пропускная способность 80 Гбайт/с.

Тест HPL, который используется для измерения производительности при решении больших линейных уравнений, привел к аналогичным результатам с повышением производительности с 18 гигафлопс с одной ячейкой из четырех процессоров до 277 гигафлопс со всеми 16 ячейками.

«Это стандартное распределение для Linux, — сказал Кабаньес. — Ядро определяет топологию системы и обнаруживает память в структуре NUMA».

NUMA (non uniform memory architecture) означает ячеистую архитектуру Superdome, в которой 64 процессора и отведенная для них память разбиваются на 16 ячеек. В демонстрационной машине половина всей памяти емкостью 256 Гбайт была отведена под ячейки в качестве локальной памяти, а другая половина — под общую память.

«Ядро 2.6 „знает” архитектуру NUMA, — сказал Кабаньес. — Некоторая доработка, конечно, потребовалась, но все поправки, созданные для проекта BigTux, перешли в основное ядро Linux и включены в стандартные дистрибутивы».

Ева Бек, руководитель направления Linux в HP Europe, сказала, что в последние полтора года в компанию обращаются заказчики, которые применяют Linux для серверов приложений. «Сегодня это универсальная среда, — сказала она, имея в виду, что Linux используется на серверах всех типов, от веб-серверов и серверов электронной почты до технических приложений, а теперь и корпоративных приложений. — С клиентской стороны мы тоже наблюдаем существенное повышение интереса, спровоцированное главным образом внедрениями в государственном секторе. В число тех, кто сейчас демонстрирует повышенный интерес к Linux на рабочих станциях, входят банки и страховые компании». 

 Предыдущие публикации:

Обсуждение и комментарии

	Rover 19 Jan 2005 3:10 PM
это был кластер, разница думаю понятна???
	Михаил Елашкин - imhoelashkin.com 19 Jan 2005 3:19 PM
А теперь запускаем на всем этом безобразии приложение...
	Михаил Елашкин - imhoelashkin.com 19 Jan 2005 3:21 PM
Кстати, надо посмотреть от НР информацию. А то половина памяти ccNUMA, а половина не она. Это как? Партиционирование что-ли запустили? Очень странная конфигурация.
	Desperado 19 Jan 2005 4:07 PM
2Rover это не кластер: Initially, Pennington said, the system will use two images of Linux -- one per 512 processors -- while it's being tested and configured. Later, all 1,024 processors will address one image of the SGI Advanced Linux operating system being used. That operating system is based on Red Hat Enterprise Linux. ... SGI uses a proprietary NUMAflex shared-memory architecture that allows memory to be shared across multiple commodity processors and SGI ProPack for Linux, an application package that allows Linux to scale to larger requirements, according to a statement from the company. http://www.linuxworld.com.au/index.php/id;1463359743;fp;512 ;fpid;1061566025 2Михаил: помнится было обещано тут выложить ислодование по RAC ;) и что за проблема может быть у приложения если для него это будет единая память для всех процов?
	-//- 19 Jan 2005 4:27 PM
2Desperado я так понял вот основное в этой новоссти(и SGI это проприентарные прибабахи) «Ядро 2.6 „знает” архитектуру NUMA, — сказал Кабаньес. — Некоторая доработка, конечно, потребовалась, но все поправки, созданные для проекта BigTux, перешли в основное ядро Linux и включены в стандартные дистрибутивы».
	Desperado 19 Jan 2005 5:15 PM
основное то что SGI _продает_ системы на линухе уже сейчас, эти системы уже сейчас имеют по 256 itanium2. это не кластер а какая-то NUMAflex, и судя по новости скоро будут продавать и 1024 варианты. чем отличается NUMAflex от HPшной NUMA хз ...
	Alexander S. 19 Jan 2005 6:19 PM
Ещё одно убедительное доказательство победы Линукса на десктопе в 2005 году.
	hrun 19 Jan 2005 8:41 PM
вроде как количество десктопов на линуксе удвоилось за 2004
	Alexander S. 19 Jan 2005 8:53 PM
То-то и оно, что вроде-как.
	tstone - saldomail.ru 20 Jan 2005 7:56 AM
Не поймешь эту НР. Вроде разработки по Итаниуму они сворачивает, вроде как "не перспективные". А машины на нем продолжают лепить. 2 Alexander S.: "И вы еще спрашиваете причем здесь пиво Сокол?!"
	Desperado 20 Jan 2005 10:41 AM
2tstone HP свернуло десктопы (рабочие станции), а сервера будут клепать и дальше.
	Skull - sibskullmail.ru 20 Jan 2005 12:34 PM
2hrun: "вроде как количество десктопов на линуксе удвоилось за 2004" - практически так. С 3,2% до 5,87%: рост 83%. :)
	snickers 20 Jan 2005 4:00 PM
2Desperado: Руслан, дай мыло или homepage где обитаешь
	СтранниК 20 Jan 2005 5:10 PM
2Desperado основное то что SGI _продает_ системы на линухе уже сейчас, эти системы уже сейчас имеют по 256 itanium2. это не кластер а какая-то NUMAflex, и судя по новости скоро будут продавать и 1024 варианты. чем отличается NUMAflex от HPшной NUMA хз ... === Каждая компания использует свою аржитектуру. То что SGI "клепает" системы с 1000 проц ничего не значит например для пользователей СУБД. В этом регионе достижения у систем от HP 64 проц. максимум для HP-UX и 32 проц для Linux и Win. Данное сообщение следует рассматривать как предпосылку, того что вполне вероятно скоро мы сможем увидеть тесты TPC-C для Linux на 64 проц.
	Desperado 20 Jan 2005 5:46 PM
2snickers а я не Руслан :) 2СтранниК к стате а у HP там NUMA ?
	СтранниК 21 Jan 2005 10:46 AM
2Desperado Я не знаю, врать не буду. Но насколько я помню, да и Михаил Елашкин как-то упоминал что системы у которых больше 16 проц уже не SMP в том виде как мы понимаем например 4-х проц системы. Это как правило один из вариантов NUMA, а как он называется уже не столь важно.
	Alexander S. 21 Jan 2005 6:46 PM
>С 3,2% до 5,87%: рост 83%. :) Что означает, что в среднем один из 15 настольных компьютеров вокруг вас, куда бы вы ни пришли, должен бежать под Линукс. Если верить цифрам, то приходится не верить своим глазам.
	snickers 21 Jan 2005 10:16 PM
2Desperado Судя по коЛЛичеству грамматических ошибок ты Руслан :) Мыло давай редиска... ;)
	A 22 Jan 2005 2:04 AM
2 Alexander S.: > Если верить цифрам, то приходится не верить своим глазам. Плохо учили теорию вероятности ? 50% вероятность события не означает чередования появления события и отсутствия оного :) Вокруг меня, например, в настоящий момент каждый второй десктопный компутер под линухом. Приеду в другой офис - каждый седьмой. В третьем офисе наоборот - win на каждом третьем компутере. Насколько это компенсирует отсутствие линуховых компутеров вокруг вас ? :)
	Desperado 22 Jan 2005 12:08 PM
2snickers ono at inbox.lv
	chkaloff 24 Jan 2005 10:43 AM
2 Alexander S. и A: Вообще 1/15 выглядит действительно не правдоподомно. С другой стороны, у нас в россии на редком десктопе стоит лицензионный W. А если он пиратский, то кто в трезвом уме будет ставить этот L? Другое дело на западе. Там действительно может складываться ситуация, когда из материальных соображений это делают. Более того, вполне вероятно что погоду делают крупные корпорации, лояльные линуксу, типа IBM и т.д., которые заменяют свой парс костоящий из сотен тысяч десктопов с W на L. Еще раз повторюсь, что статистика выгладит не правдоподобной. Вас Alexander A обвинил в том, что выборка по которой вы делаете выводы не репрезентативна. Ок, допустим. Но я имею доступ к статистики некоторых сайтов. Там ведь выборка более менее репрезентативна. По идеи десктопы под L не должны иметь менбшую активность в интернете чем W. С чего бы это. Так вот не на одном сайте в статистике посящений никакими пятью процентами не пахнет даже. Обычно где-то в окрестности 1% вертиться статистика.
	Skull - sibskullmail.ru 24 Jan 2005 1:00 PM
2chkaloff и Alexander S.: у вас есть более точные данные от агентств с мировым именем? BTW, не надо судить по России об общемировом рынке IT. Цитата: "По оценкам Мининформсвязи, в России насчитывается 5 миллионов компьютеров, которыми пользуются 13-14 миллионов человек - 10% населения страны... По уровню распространения компьютеров Россия занимает 78-е место в мире." http://www.asmedia.ru/news/id3826.html О каком Linux можно говорить в России, если "В России, как и в Зимбабве, установлено 87% пиратских программ."?
	Бендер 24 Jan 2005 5:37 PM
2 Alexander S.: >Что означает, что в среднем один из 15 настольных компьютеров >вокруг вас, куда бы вы ни пришли, должен бежать под Линукс. > Если верить цифрам, то приходится не верить своим глазам. А каждый пятый на земле китаец. Вокруг Вас китайцев много?
	Alexander S. 25 Jan 2005 7:12 PM
Б.: А каждый пятый на земле китаец. Вокруг Вас китайцев много? Посмотрел, кто сидит за соседними столами: в поле зрения попали 5 человек, из них одна- китаянка. Понимаю, что случайное абсолютное совпадение, но просто смешно стало от этого совпадения. A.: Плохо учили теорию вероятности ? Не морочьте мне голову. И другим тоже. Если вы уж такой выдающийся математик, то объясните мне, почему в серверных залах куда я вхож цифры пропорции серверов с Линуксом примерно совпадают с широко оглашаемыми и иногда их превышают, а вот в корпоративных офисах что-то не видно десктопов Линукса в указанной пропорции. Моя думает, что все те Red Hat Desktop Linux и Fedora, юзаемые как DHCP/DNS/SMTP сервера- выдаются за десктопы. А как же: ведь на сидюке "Desktop Linux" написано.:)
	Alexander S. 25 Jan 2005 7:13 PM
"DHCP/DNS/SMTP сервера"- и FTP/HTTP сервера тоже.:)