О суперкомпьютерах на Key-VIP
Четверг, Апрель 3rd, 2008Вновь прибывшие авторы часто задают мне один и тот же вопрос: а используются ли в проекте Key-VIP суперкомпьютеры? Даю официальный ответ: пока не используются, потому что проект пока молодой. Зато гиганты индустрии очень активно развивают тему суперкомпьютеров. Вот интернет-компания Yahoo (yahoo.com), самая популярная search engine в США, в сотрудничестве c индийской Вычислительной исследовательской лабораторией CRL, входящей в индийский промышленный концерн Tata Group, предложили бесплатно использовать индийскую суперкомпьютерную лабораторию для разработки проекта Apache Hadoop.
Напомним, что Apache Hadoop представляет собой открытое программное обеспечение для управления масштабными распределенными вычислениями. Проект создается фоном Apache Software Foundation, однако Yahoo является одним из наиболее активных сторонних разработчиков, оказывающих техническую поддержку данному проекту.
В 2007 году разработчики Hadoop достигли аналогичного соглашения с Университетом Карнеги Мелон. В этом случае разработчики получили право использования 4 000-процессорного суперкомпьютера.
Лаборатория CRL владеет суперкомпьютером EKA, находящимся на 4 месте в списке TOP-500 самых производительных компьютеров мира. EKA имеет 14 400 процессоров, 28 терабайт ОЗУ и 140 терабайт дискового пространства. Пиковая производительность машины 180 Тфлоп.
Что касается нового соглашения, то здесь использовать суперкомпьютер также получили право и местные образовательные институты, работающие над проблемой масштабных компьютерных вычислений.