The OpenNET Project / Index page

[ новости /+++ | форум | wiki | теги | ]

Опубликована 48 редакция списка самых высокопроизводительных суперкомпьютеров

14.11.2016 23:55

Опубликован 48-й выпуск рейтинга 500 самых высокопроизводительных компьютеров мира. В новой редакции рейтинга первые четыре лидера сохранили свои позиции. Рейтинг возглавляет китайский кластер Sunway TaihuLight, работающий в национальном суперкомпьютерном центре Китая и демонстрирующий производительность в 93 петафлопс, что в три раза больше показателей другого китайского кластера Tianhe-2, находящемся на втором месте, и в пять раз больше американского кластера Titan, занимающего третье место.

Наиболее интересные тенденции:

  • Самый мощный отечественный кластер Lomonosov 2 сместился с 41 на 52 место в рейтинге. Кластер Lomonosov опустился со 108 на 132 место. Третий по производительности отечественный кластер Tornado опустился со 158 на 226 место. Всего в Top500 вошло 5 отечественных суперкомпьютеров, что на два меньше, чем в прошлом рейтинге.
  • Со 167 до 171 увеличилось число систем в Китае. США, которые в прошлом рейтинге уступили первенство Китаю, сравняли свои позиции и также представлены 171 кластером. Примечательно, что всего полтора года назад в Китае было 37 кластеров, входящих в TOP500;
  • Распределение по количеству суперкомпьютеров в разных странах:
    • Китай: 171 (167 в прошлой редакции рейтинга)
    • США: 171 (165);
    • Германия: 31 (26);
    • Япония: 27 (29);
    • Франция: 20 (18)
    • Великобритания: 13 (12)
    • Польша 7 (6);
    • Италия: 6 (5);
    • Индия: 5 (9);
    • Россия 5 (7);
    • другие страны: 44
  • Распределение по операционным системам, используемым на суперкомпьютерах (в скобках указано изменение по сравнению с прошлой редакцией рейтинга):

    • Linux - 498 (+1), 99.6%
    • Unix - 2 (-1), 0.4%
    • Смешанные - 0 (0), 0%
    • Windows - 0 (0), 0%
    • BSD - 0 (0), 0%
  • Из Linuх-систем 64.2% не детализируют дистрибутив, 12.6% используют CentOS, 8.6% - Cray Linux, 5% - SUSE, 3% - RHEL, 0.6% - Scientific Linux, 0.6% - Ubuntu;

  • Минимальный порог пиковой производительности для вхождения в Top500 вырос за полгода с 285.9 до 349.3 терафлопсов, а для Top100 - с 958.7 до 1258 терафлопсов. Система, замыкающая нынешний рейтинг, в прошлом выпуске находилась на 388 месте;
  • Суммарная производительность всех систем в рейтинге за полгода возросла с 566.7 до 672 петафлопсов (три года назад было 250 петафлопсов). В настоящее время 117 кластеров демонстрирует производительность более петафлопcа (в прошлом рейтинге - 94, три года назад - 31);
  • Общее распределение по количеству суперкомпьютеров в разных частях света выглядит следующим образом: 213 суперкомпьютера находится в Азии (217 в предыдущем списке), 175 в Америке (170 в предыдущем списке) и 104 в Европе (ранее 105);
  • В качестве процессорной основы лидируют CPU Intel - 92.5% (было 91%), на втором месте - IBM Power - 4.4% (было 4.6%), на третьем - AMD - 1.4% (было 2.6%);
  • 31.8% (30.4%) всех используемых процессоров имеют 12 ядер, 15.8% (12.4%) - 8 ядер, 13.4% (15%) - десять, 11.2% (10%) - 16 ядер, 10.2% (13.2%) - шесть. Двух- и одноядерные системы не входят в рейтинг;
  • 86 из 500 систем (в прошлом рейтинге - 93) дополнительно используют ускорители или сопроцессоры, при этом в 52 системах задействованы чипы NVIDIA (было 67), в 21 - Intel Xeon Phi (было 26), в 1 - GPU AMD (было 3), в 3 используются гибридные решения (было 3);
  • Среди производителей кластеров на первом месте компания Hewlett-Packard 22.4% (25.4%), на втором месте - Lenovo 18.4% (16.8%), на третьем месте - Cray 11.2% (12%), на четвёртом - Sugon 9.4% (10.2%), на пятом - IBM 6.6% (7.6%), на шестом - SGI 5.6% (5.2%).

В ближайшее время будет выпущен альтернативный рейтинг кластерных систем Graph 500, ориентированного на оценку производительности суперкомпьютерных платформ, связанных с симулированием физических процессов и задач по обработке больших массивов данных, свойственных для данных систем. Рейтинг Green500 отдельно больше не выпускается и объединён с Top500, так как обеспечение энергоэффективности теперь отражается в основном рейтинге Top500 (учитывается отношение LINPACK FLOPS к потребляемой мощности в ваттах).



  1. Главная ссылка к новости (https://www.top500.org/news/gl...)
  2. OpenNews: Опубликована 47-я редакция списка самых высокопроизводительных суперкомпьютеров
  3. OpenNews: Опубликована 46-я редакция списка самых высокопроизводительных суперкомпьютеров
  4. OpenNews: Опубликована 45-я редакция списка самых высокопроизводительных суперкомпьютеров
  5. OpenNews: Новая редакция списка самых высокопроизводительных суперкомпьютеров
Лицензия: CC-BY
Тип: К сведению
Ключевые слова: top500, cluster
При перепечатке указание ссылки на opennet.ru обязательно
Обсуждение (56) Ajax | 1 уровень | Линейный | Раскрыть всё | RSS
  • 1.5, Аноним (-), 01:00, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • +5 +/
    датацентры АНБ и англии не фигурируют
     
     
  • 2.86, Michael Shigorin (ok), 16:25, 22/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    > датацентры АНБ и англии не фигурируют

    Наши тоже не все, положим.

     

  • 1.9, Анонимус 223 (?), 01:46, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • –3 +/
    Линукс победил
    Россия в попе (кризис, увы)
    Центось рулит хотя крайне скудный репозиторий штатный, но можно наконпелять самому
    Нафига китайцам суперкомпы?
     
     
  • 2.23, Mail (?), 06:35, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    > Нафига китайцам суперкомпы?

    как всегда берут не умением, а числом ))

     
  • 2.29, Аноним (-), 09:53, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    >Центось рулит хотя крайне скудный репозиторий штатный, но можно наконпелять самому

    Удивляет низкий процент Scientific Linux, т.к. кластеры, прежде всего, для научных и около того расчётов.

     
     
  • 3.44, Аноним (-), 14:04, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +4 +/
    Числодробилки это одно, ПО для анализа это другое
     
  • 3.92, Evgueni (?), 20:32, 25/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    Это перелициованный красный шляп под нужды CERN. Сейчас CERN с RedHat вроде как обратно договорился. Ничего специально научного в Scientific Linux не было.
     

  • 1.15, Аноним (-), 02:35, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • –1 +/
    Не ожидал увидеть тут SGI. Как?..
     
     
  • 2.49, Void (??), 15:08, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • –1 +/
    Сам не пойму.
     
  • 2.87, Michael Shigorin (ok), 16:28, 22/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    > Не ожидал увидеть тут SGI. Как?..

    Лет десять тому они уже вполне себе занимались большими интеловыми системами на линуксе: http://lkml.iu.edu/hypermail/linux/kernel/0611.0/1400.html

     

  • 1.16, Аноним (-), 03:18, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • +1 +/
    Хххфлопс не склоняется
     
  • 1.26, Sfinx (ok), 08:59, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • +3 +/
    Распределение просто радует глаз ;)

    "Linux - 498 (+1), 99.6%
    Unix - 2 (-1), 0.4%"

     
     
  • 2.27, ryoken (ok), 09:26, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +7 +/
    > Распределение просто радует глаз ;)

    Ещё более радует вантуз = 0. (Что доказывает, что с их помоями нормальные люди не связываются).

     
     
  • 3.33, hoopoe (ok), 10:05, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +14 +/
    а ты попробуй на 400 системах нажать Ok... :D
     
  • 3.38, Аноним (-), 11:08, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • –4 +/
    клоун: Там лицензирование на каждое ядро и низкая приспособленность к такому количеству ядер и памяти.

    Каждой задаче свой инструмент: автобус возит людей, а самосвал щебёнку. И никак не наоборот.

     
     
  • 4.41, ryoken (ok), 13:15, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +1 +/
    > Каждой задаче свой инструмент: автобус возит людей, а самосвал щебёнку. И никак
    > не наоборот.

    "In Soviet Russia"...

     
     
  • 5.85, блабла (?), 08:02, 22/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    Люди возят автобус, щебенка самосвал...
     
  • 4.42, тоже Аноним (ok), 13:18, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +4 +/
    То-то этот "самосвал" настырно лезет на мобильные устройства (эпично сливая) и сервера (где за счет завендорлоченного ПО еще более-менее держится).
    Нет, чтобы "возить щебенку" геймеров и не отсвечивать...
     
     
  • 5.46, Аноним (-), 14:06, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    > То-то этот "самосвал" настырно лезет на мобильные устройства (эпично сливая) и сервера
    > (где за счет завендорлоченного ПО еще более-менее держится).
    > Нет, чтобы "возить щебенку" геймеров и не отсвечивать...

    AIX конечно не "вендорлочен" :) но живее всех живых...

     
  • 4.76, scorry (ok), 15:07, 16/11/2016 [^] [^^] [^^^] [ответить]  
  • +3 +/
    > Каждой задаче свой инструмент: автобус возит людей, а самосвал щебёнку. И никак
    > не наоборот.

    Абсолютно согласен. Все же знают, для чего нужен вантуз?

     
  • 4.78, Аноним (-), 04:51, 17/11/2016 [^] [^^] [^^^] [ответить]  
  • +2 +/
    > Каждой задаче свой инструмент: автобус возит людей, а самосвал щебёнку. И никак
    > не наоборот.

    До тебя стало доползать что у нас вообще нет ни самосвала, ни автобуса? У нас полкило нанороботов, которые могут собрать нам и самосвал, и автобус и даже звездолет какой, покуда ваш мелкософт лечит что автомобиль может быть только черный.

     
  • 4.88, Michael Shigorin (ok), 16:32, 22/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    > клоун: Там лицензирование на каждое ядро и низкая приспособленность к такому количеству
    > ядер и памяти.

    Непонятно только, какого лешего пытались с такими вводными пихать winhpc.  Более того, к бездисковой загрузке в кластерном контексте это поделие тоже не приспособлено от слова "вообще" (коллеги имели глупость угробить на ЭТО два человеко-месяца).

    > Каждой задаче свой инструмент: автобус возит людей, а самосвал щебёнку.
    > И никак не наоборот.

    Передайте своим хозяевам -- пущай на носу зарубят.

     
  • 3.77, Аноним (-), 03:49, 17/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    > Ещё более радует вантуз = 0. (Что доказывает, что с их помоями
    > нормальные люди не связываются).

    Windows server обгоняет Linux. А новость тому пруфлинком :D.

     

  • 1.28, darkshvein (ok), 09:36, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • +2 +/
    Из Linuх-систем 64.2% не детализируют дистрибутив,
    а накой в гридах дистр? линукс, гнуутилс и готово.
     
     
  • 2.89, Michael Shigorin (ok), 17:27, 22/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    > а накой в гридах дистр? линукс, гнуутилс и готово.

    Не, не готово.  И каждый раз фигачить заново устали в т.ч. и ТП лет восемь тому, если не больше.

     

  • 1.30, Аноним (-), 09:54, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • –6 +/
    > Unix - 2 (-1), 0.4%
    > Смешанные - 0 (0), 0%
    > Windows - 0 (0), 0%
    > BSD - 0 (0), 0%

    это говорит про то что эти системы не прожорливые и и задачи супер ПК можно решать на десктопе

     
  • 1.31, Аноним (-), 09:58, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    А где Нигерия?
     
     
  • 2.35, Мимокрокодил (?), 10:09, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +16 +/
    В Африке
     

  • 1.37, via (??), 11:03, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • –1 +/
    млять, как погоду не могли точно предсказать, так и не могут
     
  • 1.39, Лютый жабист (ok), 11:45, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    Знакомый сейчас в Китае живёт. Говорит, что пол Инета отрублено. Дык, что самое интересное - openvpn наружу не коннектится даже на нестандартные порты, т.е. они там весь трафик на седьмом уровне инспектируют? Понятно для чего столько кластеров понадобилось :)))))) их бы энергию да в мирное русло.
     
     
  • 2.40, ОлдФак (ok), 12:05, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    А если знакомому попробовать GoVPN? У него вроде один из основных качеств это невозможность идентифицировать что траффик именно его.
    А также интересно режутся ли ICMP да DNS туннели?

    Чисто в исследовательских целях было б интересно сервак в китайской зоне интернета иметь.

     
     
  • 3.45, Аноним (-), 14:04, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    клоун: блокировка условна. В любом (!) китайском магазине мобильной техники и на ресепшене большинства приличных гостиниц вам установят VPN, который всё будет открывать.

    Особенно доставляет сайт компании CTrip (одно из двух крупнейших китайских тур.агенств), которое в английской версии сайта использует карты Google и они открывают без каких-либо VPN и средств обхода. Открываете ctrip.com, поиск гостиниц, открыть карту, дальше можете забить на гостиницы (хотя на ctrip цены ниже, чем на ресепшене; пару раз нагло просил на ресепшене незнакомого отеля Wi-Fi и бронировал через ctrip, получая цену на 30-100% ниже) и просто смотреть привычные карты.

     
     
  • 4.79, Лютый жабист (ok), 05:08, 17/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    "получая цену на 30-100% ниже)"

    Нахаляву в гостиницу селили? Да ты Чак Норрис просто.

    "блокировка условна. В любом (!) китайском магазине мобильной техники и на ресепшене большинства приличных гостиниц вам установят VPN, который всё будет открывать"

    Знакомый не красноглазик, я ему рабочий конфиг openvpn отправлял, у него не получилось. Поэтому спорить не собираюсь. То, что китаёзы умеют ставить VPN не значит, что там нет подводных камней.

     
  • 2.80, Аноним (-), 05:49, 17/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    У них хитрее На более низких уровнях выделяются подозрительные потоки Они от... текст свёрнут, показать
     

  • 1.50, Аноним (-), 16:20, 15/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • –1 +/
    А где можно почитать чем заняты эти ваши суперкомпьютеры? Что считают?
     
     
  • 2.51, Аноним (-), 16:24, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +1 +/
    > А где можно почитать чем заняты эти ваши суперкомпьютеры? Что считают?

    Майнят биткоины, конечно. Все остальное - просто суета

     
     
  • 3.52, Аноним (-), 16:56, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • –2 +/
    Такая мощь, направленная в volunteer computing, позволила бы просчитать лекарства от рака, спида и алцгеймерства. Причем завтра. ))
     
     
  • 4.53, Аноним (-), 17:21, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • –1 +/
    > Такая мощь, направленная в volunteer computing, позволила бы просчитать лекарства от рака, спида и алцгеймерства. Причем завтра. ))

    А можно было средства, затраченные на организацию и оборудование вычислительных центров направить на увеличение велфера угнетаемому темнокожему меньшенству, тем самым облагоденствовав человечество

     
     
  • 5.56, Аноним (-), 17:43, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    Средства-то тут причем, я про вычислительную мощность. Которая как раз и переводится в средства, т.е. в разные *коины, не очень чистыми на руку админами.
     
  • 5.61, Аноним (-), 20:02, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • –1 +/
    "запрещено в России" ™ менщЕнству помогите ещё.


     
  • 5.90, Michael Shigorin (ok), 17:41, 22/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    > угнетаемому темнокожему меньшинству

    Вы преувеличиваете проблему the lame duck, как мне кажется...

     
  • 4.58, Аноним (-), 19:10, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • –5 +/
    клоун Ты ещё на SETI предложи её потратить поиск сообщений инопланетной цивили... текст свёрнут, показать
     
     
  • 5.60, Аноним (-), 19:23, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +2 +/
    Клоун - очень уважаемая мной профессия, не надо так называть, я недостоин.

    SETI, кстати, близок к завершению. Они замутили какую-то Nebula.

    >сегодня технология себя исчерпала

    folding@home, boinc

    Ваши знания по болезням исчерпывающи. Можете не утруждать себя дальнейшим изучением.

     
     
  • 6.62, 11111 (?), 21:12, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +1 +/
    > Клоун - очень уважаемая мной профессия, .., я недостоин.

    Расслабься, это у него просто шабанг такой.

     
     
  • 7.66, Аноним (-), 21:47, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • –1 +/
    Ок.
    Клоун, ай эм сорри. Но может как-нибудь иначе обозначать: !#клоун или типа того?
     
  • 6.67, Аноним (-), 21:49, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • –2 +/
    клоун: folding@home работает с 2000 года, результатов ноль.

    SETI - с 1999 г. Результатов ноль. Nebula - это ещё один алгоритм поиска сигналов.

    За 16 лет другие достигли ГОРАЗДО большего. Начинаешь догадываться почему крупные университеты и богатые спонсоры проигнорировали эти проекты?

     
     
  • 7.69, Аноним (-), 22:17, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +1 +/
    >folding@home работает с 2000 года, результатов ноль.

    https://foldingathome.stanford.edu/papers-results/
    Странная у вас математика.

    >SETI - с 1999 г. Результатов ноль.

    А чего ты ждал, бро? Это же космос. Он как бы бесконечен. Но, как минимум, именно исследователи SETI@Home несколько раз аргументированно одергивали астрономов, якобы обнаруживших ET.

    >За 16 лет другие

    Какие такие "другие"?

    >почему крупные университеты и богатые спонсоры проигнорировали эти проекты?

    Богатым спонсорам выгоднее считать биткоины. А насчет университетов, залезьте хотя бы в вики на folding@home и boinc.

     
     
  • 8.71, Аноним (-), 23:12, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    клоун Хорошо, разжую Цель проекта folding home - найти лекарство от нескольких... текст свёрнут, показать
     
     
  • 9.72, Аноним (-), 23:40, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Не смешно, бро Не смотришь американский стендап А зря, было бы смешнее Тоже м... текст свёрнут, показать
     
     
  • 10.82, Аноним (-), 06:36, 17/11/2016 [^] [^^] [^^^] [ответить]  
  • +1 +/
    А это смотря для какой экономики Да, замшелым банкам с их майнфреймами, блокиро... текст свёрнут, показать
     
  • 4.63, Led (ok), 21:30, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +1 +/
    > Такая мощь, направленная в volunteer computing, позволила бы просчитать лекарства от рака,
    > спида и алцгеймерства. Причем завтра. ))

    А если к ним подпустить школьников-маминыхкакеров-оверклокеров, то ещё вчера.

     
     
  • 5.65, Аноним (-), 21:44, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • –1 +/
    Ну конечно же, взрослые дяди-майнеры никого к своим шахтам не подпустят.
     
  • 2.64, redwolf (ok), 21:38, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • +3 +/
    Полагаю, что эти суперкомпьютеры заняты теми численными экспериментами в области химии, физики, биологии, математики и тп, которые требуют параллельных вычислений.
    Если сильно примерно, то тем же, чем вычислительные сопроцессоры в рекламах их производителей (Nvidia а-ля Tesla, Intel Xeon Phi и тп).

    Например, таким:
    https://arxiv.org/pdf/1107.5463v1.pdf

    Или как в рекламе нвидии таким:
    http://www.nvidia.com/object/gpu-applications.html

     
     
  • 3.70, Аноним (-), 22:44, 15/11/2016 [^] [^^] [^^^] [ответить]  
  • –2 +/
    Наверное, так и есть. Но, все же хотелось бы видеть списком.

    На таком-то суперкомпьютере выполнены такие-то работы, теми-то. Опубликованы в таком-то журнале, тогда-то.

    Расчет занял столько-то времени, столько-то флопсов.

     
     
  • 4.83, redwolf (ok), 13:14, 17/11/2016 [^] [^^] [^^^] [ответить]  
  • +3 +/
    Помнится мне, что японцы публиковали статистику на свой Tsubame. Когда-то ещё предлагали его мощности для открытых исследований с условием публикаций. Искать где-то тут: http://www.gsic.titech.ac.jp

    Тащемта обычно всех больше интересует научная составляющая исследования, чем то, как это всё моделировали и сколько флопсов оно скушало. Это только всякии нвидии в рекламах пишут, что их карты ускорили те-то и те-то вычисления в 8-40 раз. В общем-то они квази-бесплатно поставляют железо командам, чтобы получать такие данные.

    А с чем связан интерес?

     

  • 1.75, Андрей (??), 11:53, 16/11/2016 [ответить] [﹢﹢﹢] [ · · · ]  
  • –2 +/
    Есть проба одного из таких на РОСЕ:

    https://linux-hardware.org/index.php?probe=9036136416

     
     
  • 2.91, Michael Shigorin (ok), 17:46, 22/11/2016 [^] [^^] [^^^] [ответить]  
  • +/
    > Есть проба одного из таких на РОСЕ:

    А на "Ломоносове" вздымали производное альта (на "Чебышеве" и ещё кое-где он и работает).

     

     Добавить комментарий
    Имя:
    E-Mail:
    Текст:



    Спонсоры:
    Слёрм
    Inferno Solutions
    Hosting by Ihor
    Хостинг:

    Закладки на сайте
    Проследить за страницей
    Created 1996-2019 by Maxim Chirkov
    Добавить, Поддержать, Вебмастеру