Однако с ростом числа ядер маршруты на пути данных начали удлиняться, и это стало вызывать серьёзные проблемы. Для обеспечения слаженной работы многоядерных процессоров Intel даже пришлось перейти к схеме с разделением ядер на два кластера и внедрением двух кольцевых шин, связанных между собой двумя буферизирующими мостами. Но такое соединение ядер, контроллеров памяти и контроллеров ввода-вывода внутри процессора уже не могло похвастать былой эффективностью. В случае если возникала необходимость в передаче данных между точками, находящимися в различных кластерах, латентности сильно страдали. И в конечном итоге Intel пришла к ситуации, когда кольцевая шина стала препятствием на пути увеличения пропускной способности и снижения задержек при внутрипроцессорных операциях с данными.
Поэтому в серверных процессорах Skylake-SP (и родственных с ними HEDT-процессорах Skylake-X), где число ядер может достигать 28 штук, Intel перешла к иной схеме межъядерных соединений – ячеистой сети, которая уже хорошо обкатана в Intel Xeon Phi (Knights Landing). Число соединений в ней гораздо больше, поскольку все ядра на кристалле пронизаны сквозными горизонтальными и вертикальными линками. Но за счёт этого маршруты, необходимые для связи ядер и прочих функциональных узлов, заметно упрощаются, уменьшая латентности и уравнивая задержки, которые возникают при различных взаимодействиях внутри такой сети. Кроме того, такая сеть обеспечивает более высокую суммарную пропускную способность.Данное изменение позволяет установить частоту этой сети ниже частоты кольцевой шины, сохранив при этом высокие показатели пропускной способности. А это значит, что новая ячеистая структура соединени не только хороша сбалансированностью и масштабируемостью, но и выигрывает с точки зрения потребления ресурсов.
Естественно, всё это важно в первую очередь для серверных процессоров с большим числом ядер, однако Skylake-X оказались заложниками ситуации: в них ячеистая сеть тоже заменила собой кольцевую шину. И в сравнительно простых случаях, когда число ядер не столь велико, латентности при межъядерном взаимодействии по сравнению с Broadwell-E ухудшились. Для проверки мы измерили латентности, возникающие при передаче данных от одного ядра к другому для десятиядерного Broadwell-E и Skylake-X. Оба процессора для чистоты эксперимента работали на одной и той же частоте 4,0 ГГц.
#77