Обзор инженерных систем ЦОД: Теория и практика SDDC: Микросхемы Huawei для массивов All-Flash

Что такое all-flash

All-Flash — система хранения данных, которая использует диски с флэш-памятью. Например, износостойкие и высокопроизводительные SSD. Если очень просто, это большие шкафы, куда вставляют диски. Их называют контроллерами.

В системах All-Flash Dorado от Huawei применяют NVMe-накопители — более быстрый вид SSD. Они способны эффективно распараллеливать работу с данными, за счёт чего обеспечивают ещё более высокую производительность.

К одному блоку системы хранения данных (контроллеру, который управляет дисками) можно подключить до 200 дисков. Если памяти недостаточно, вставить новый диск можно в любое время, не прерывая работу системы. Один контроллер — это более 6000 ТБ данных:

А если перестанет хватать и этого, к первому блоку-контроллеру можно подключить ещё несколько. Всего связать вместе можно до 32 контроллеров.

Размером один такой блок — не больше чемодана: в среднем от 50 до 80 см в длину, 45 см в ширину и 20 см в высоту. Система не занимает много места и работает тихо. Тем не менее, для неё требуются строгие климатические условия, поэтому размещать её нужно в специальном серверном помещении.

Система энергоэффективна — использование собственного управляющего чипа позволяет оптимально распределить нагрузку и в разы снизить потребление энергии по сравнению с обычными дисковыми массивами.

Huawei полностью контролирует производство своих систем хранения данных: компания сама производит и чипы, и диски,. Это помогает добиться максимально возможной производительности: вся аппаратная часть изначально создаётся для работы в системах All-Flash, а разработчики создают алгоритмы для оптимизации и ускорения работы системы, ориентируясь на особенности «железа».

Cnews: huawei storage

Серия СХД OceanStor 18000F V5 на флеш-накопителях станет отличным решением для обработки и хранения данных важных корпоративных приложений.

Система хранения, созданная на архитектуре SmartMatrix 2.0, отличается высокой производительностью, увеличенной за счет применения флеш-технологий, и превосходной масштабируемостью. Решение, готовое к использованию в гибридном облаке, оптимально для хранения и обработки данных предприятия.

Система хранения OceanStor 18000F V5 соответствует требованиям к реализации проектов крупных баз данных OLTP/OLAP и облачных вычислений и станет отличным решением для финансового сектора, сферы государственного управления и телекоммуникации, а также обрабатывающей промышленности.

Industry-leading all-flash storage is all-huawei — huawei enterprise

New Horizons: You’re listening to New Horizons, the podcast channel for Huawei’s ICT Insights Magazine. Join us as we talk to innovators and thought leaders from around the world.

Well hi everyone, today we’re back with Ron Raffensperger who’s the CTO of Huawei Enterprise Storage Solutions. Hi Ron, thanks for coming back on the program.

Ron Raffensperger: Thanks for having me.

New Horizons: You bet. Today, I’d like to ask you a few questions about our All-Flash solutions. To get started, what makes Huawei’s All-Flash Storage the best in the market today?

Ron Raffensperger: I think the thing that characterizes Huawei’s All-Flash Storage is that it’s all Huawei. Other vendors, they certainly make the controller, they make the software for the storage system, but they buy the disks from other people. In the case of Huawei, because we actually create our own All-Flash disks. In fact, our chip design organization called HiSilicon, is really our secret sauce in the All-Flash array business. Not only did they make the controller for the flash disks that Huawei makes, but they also make chips that go inside of our controllers that improve the performance and really it’s all about end-to-end. By being able to control the controller itself, the software that’s in it, as well as the link that goes to the SSD disk. Here, Huawei is unique in that all of our All-Flash Dorado systems utilize NVMe, which is the fastest links technology out there that we’ve talked about before, and then the controller on the disk itself. That end-to-end allows us to do things that other manufacturers simply can’t do.

New Horizons: Are there any specific technologies that we’ve developed that kind of help us maintain our market lead in the industry?

Ron Raffensperger: All together, when you put them together, we call it Flash Link. Flash Link has a number of components. One is that it has the controller algorithms that are on the disks themselves that do wear levelling, and anti-wear levelling. There’s a BMC chip in the controller that helps with management. We’ve actually done a number of unique software things within both the controller on the disk, as well as within the controller that’s in the Dorado system, to do things that guarantee that we will have the very, very high performance and very low latency. So that even though the disks get old, even though you increase the load on them, our performance continues to be very stable.

New Horizons: I’ve read specifications that our latency is half a millisecond, to a third of a millisecond?

Ron Raffensperger: Yes, that’s right. The thing is that right out of the box of the brand new system, most all-flash systems will give you pretty good performance. Really, the proof is when they get a little longer in the tooth, because as you know, the solid-state storage, each of the storage chips has a certain read and write life cycle. It’s very critical as the systems change, and as data changes, right? Because usually you’re using these systems for database kinds of access where you have lots of reads, lots of writes. You want that speed. But what that means is that over time, the chips within the solid-state disk start to wear out. If you haven’t done a lot of work to prioritize I/O to be able to do creative things around how you store things, hot storage, cold storage, how you separate metadata, all of this will impact what’s called garbage collection, that old solid state disks do; which is to go around and reclaim space that you don’t have anymore. Huawei has done things that make that much, much faster and much more stable. It’s really the life cycle is the key here.

New Horizons: What currents trends in enterprise storage are you seeing these days? Any predictions for the future?

Ron Raffensperger: We’re already seeing what people call 3D-type of storage. A year ago, the highest density that we were shipping was a six terabyte. Now, we’re shipping a 16. Pretty soon we’ll be shipping a 32. That’s because the storage chip vendors are using new technologies that give us much higher densities and even increased speeds. These are areas that will really make a huge difference in the amount of data, and the effectiveness of All-Flash systems going forward.

New Horizons: What industries are going to benefit the most from All-Flash storage solutions?

Ron Raffensperger: The uses for All-Flash have really been evolving. Historically it was mostly about online transaction processing systems, banks, large versions that have lots of transactions per second. But we’re seeing, as the growth of big data becomes much stronger, that people need the evaluation capabilities of their big data platforms to be much faster. Particularly on the data warehouse side of things, where data warehouses are moving from being a ‘put a stack of papers on your desk every morning from the analysis,’ to giving the executives a dashboard that says, in the next 20 minutes you better make this decision. Flash is really extending its usefulness beyond just the, ‘I got real fast databases,’ to all areas of enterprise storage.

Больше про Хуавей:  Connect With Miassistant Xiaomi как включить телефон

New Horizons: On our last talk we were talking about the cost differential between spinning hard drives versus solid state. Have they reached parity yet?

Ron Raffensperger: We already had reached parity for what we’re called high-speed disks. A solid-state gets compared to the traditional hard drives where you have platters that are spinning around. The fastest you used to be able to spin platters was 15,000 RPMs. Those disks have now disappeared because flash is much less expensive, same capacities. The 10,000 RPM disks, I think are going to shortly go that same way because particularly with this 3D technology, right now, it’s more expensive because the yields — it’s a very complex manufacturing process. But the things we’ve seen about silicon and Moore’s Law is once you’ve figures out how to get it on to chips, then it’s just a process problem. How do you get the yields up, how do you get the production up? We’re starting down that curve now. That’s going to have a huge impact on the spinning disk industry.

New Horizons: Any case studies that you can think of that are a good example of real-world application of our All-Flash solutions that have been deployed?

Ron Raffensperger: One interesting one we have is actually here in China, although it has ramifications outside of China, is the electric-vehicle manufacturer BYD. BYD has grown just enormously. I think they’re quite famous outside of China because Warren Buffett is one of their key investors. They have lots of different lines of business. In fact, one part of their business assembles Huawei’s smart phones. But they make very high capacity batteries similar to what Elon Musk is doing with his Giga factory for the Teslas. They are the leading manufacturer of electric vehicles. Not just cars, but lots of different kinds of electric vehicles here in China. They are a major manufacturer of bus technology, including in the US. They have a factory down near L.A.. One of their key issues is their Enterprise Resource Planning, ERP system. As they’ve grown, it’s just really been explosive growth. The number of cars that are powered by electricity in China has just exploded. Their demand on that ERP system, they just couldn’t keep up with traditional kinds of storage systems. By putting in Dorado All-Flash Storage System, they were able to speed up, I think, overall, about a ten-times improvement. They’ve been able to keep up with the demands that are being put on them. I think it’s interesting because these Dorado All-Flash Storage Systems are completely compatible with your traditional Storage Area Networks. You can just drop them in, and get an immediate improvement. That’s really helpful for businesses that are growing quickly.

New Horizons: Well it’s pretty impressive, the advancements that we’ve been able to make in just a short amount of time. Anything else you’d like to add?

Ron Raffensperger: Stay tuned. There are new technologies that are coming. The storage-class memory is another one that’s going to, in 2020 I think, it’s going to start to make an impact, where you have memory like the random-access memory that goes on server mother boards, that will become able to keep data even when the power is turned off. There are a lot of new potential applications in how you can change the way the things are stored. The other things is, and I think we’ve mentioned it on the first podcast is, there’s no reason that we need to continue to think about solid-state storage as though it were spinning disks. There are no heads. There are no sectors that you have to a have head seek to. There are no platters. The way that the software talks to disks could really change and give us another huge amount of improvement. There’s a lot of work that we’re doing in that area. Stay tuned. There are a lot of fun things coming.

New Horizons: All right, the future looks promising. Well Ron, thanks for joining us again. We’re looking forward to having you on again soon.

Ron Raffensperger: My pleasure.

New Horizons: All right, thanks.

Thanks for listening to this episode of New Horizons. For more information on today’s guest, and a full transcript of this interview, just click the link below. If you enjoyed it, please be sure and share it on social media. Once again, thanks for listening.

Biography

Ron Raffensperger is the CTO of Huawei Enterprise Storage Solutions. Based in Shenzhen, he has demonstrated expertise in marketing, sales, services and development in both large and small technology companies with a particular expertise for developing corporate strategies in emerging markets.

В отличие от облачных хранилищ

  • All-Flash безопаснее: все данные лежат в хранилище в вашем центре обработки данных или серверной.
  • Она не зависит от подключения к интернету. Можно продолжать работать с данными, даже если у провайдера проблемы.
  • Она быстрее — за счёт того, что не нужно обмениваться информацией со сторонним серверами.

Каким компаниям пригодится all-flash

All-Flash подходит компаниям, которым:

  • Приходится обрабатывать большие (и, возможно, постоянно растущие) объёмы данных.
  • Делать это быстро — потому что даже небольшая задержка может критически повлиять на результат.
  • Важна надёжность её работы.

Это, например, банки и платёжные системы, которым приходится обрабатывать множество транзакций, компании-разработчики систем видеонаблюдения и компьютерного зрения, и в особенности системы, работающие с большими данными в реальном времени: например, для персонализированного таргетинга рекламы на основе последних действий, управления устройствами интернета вещей или определения зон бедствий.

Надёжность системы All-Flash от Huawei обеспечивают благодаря подключению к двум источникам питания (если один отключится, продолжит работать второй), «умной» системе распределения нагрузки, которая помогает снизить износ контроллеров и дисков, автоматической проверке данных и возможности проводить бэкапы информации в облачное хранилище. Восстановление 1 ТБ информации на такой системе занимает не больше получаса.

Флеш-система хранения данных OceanStor Dorado V3 ускоряет работу приложений в три раза благодаря использованию интеллектуальных чипов, архитектуры NVME и технологии Huawei FlashlinkTM.

Она подходит для работы с базами данных, виртуальными рабочими столами и обмена файлами. И будет полезна компаниям, работающим в сфере финансов, производства и телекоммуникаций.

Микросхемы huawei для массивов all-flash

23 октября 2020 г. | Категория: Теория и практика SDDC, Программно-определяемые системы хранения

Больше про Хуавей:  Как отсканировать QR код мобильным телефоном Samsung

Многих интересует вопрос, почему компания Huawei решила разрабатывать собственные микросхемы для своих СХД? Avago приобрела LSI, Cavium приобрела QLogic, а Broadcom приобрела Brocade, чтобы получить технические возможности их микросхем. Так почему компания Huawei, вопреки ожиданиям, решила разрабатывать собственные микросхемы вместо того, чтобы просто приобрести компанию-производителя микросхем?

Стимул для разработки собственных микросхем

Деятельность предприятий во всем мире сопровождается большими потоками информации, а это означает, что хранилища данных должны быть очень производительны и высокоэффективны. Технология All-Flash способствует цифровым трансформациям в силу врожденной производительности, придающей новые силы критически важным сервисам.

Флеш-память быстро развивается, ведь количественные параметры накопителей данных становятся качественными, (быстродействие накопителей 3D XPoint в 1000 раз превышает таковое у NAND). Основным требованием для развития носителей информации и приложений, таких как AR/VR, является более низкая задержка в сети.

Стабильный период удваивания производительности процессоров равный 18 месяцам согласно закону Мура, теперь расширяется по мере замедления роста производительности процессора (увеличивается разрыв между вычислительной мощностью и возможностями обработки).

Отвечая на вызовы революции в технологиях хранения данных, компания Huawei предложила для новых решений взять All-IP в качестве основы, а All-Cloud и All-Flash в качестве движущей силы. Это позволит оптимизированным микросхемам, сетевому оборудованию и вертикальной интеграции в приложениях сыграть дополнительную роль для оправдания ожиданий пользователей услуг.

Инновации в технологии самостоятельно разработанных микросхем

В 2020 году компания Huawei выпустила новое поколение СХД OceanStor Dorado V3 на базе флеш-памяти, отличающихся производительностью до 4 миллионов IOPS при сохранении стабильной задержки в 0,5 мс. Новые массивы Dorado способны в полной мере использовать эффективность флеш-памяти, чтобы удовлетворить требования к обработке для критически важных сервисов в условиях высокой нагрузки.

Huawei осуществила комплексную оптимизацию своих микросхем, включая клиентские микросхемы обработки протоколов, микросхемы ускорения обработки операций ввода-вывода и микросхемы управления SSD-накопителями, с целью ориентировать их на использование в платформах хранения данных на базе флеш-памяти. Данная оптимизация позволит на 200% повысить производительность сквозной передачи.

1. Микросхемы обработки протоколов

1.1. Интеграция нескольких протоколов на плате Huawei SmartIO, сокращение количества соединительных кабелей, упрощение создания сетей и снижение TCO

На платах SmartIO используются микросхемы производства компании Huawei, выполняющие обработку таких протоколов, как 8G/16G FC, 10G FCoE, 10GE и iWARP. Клиенты могут комбинировать трафик данных IP и FC на одной интерфейсной микросхеме.

Возможности конвергенции на уровне сети обеспечивают использование 10GE для поддержки протоколов FCoE/iSCSI/iWARP/CIFS/NFS без замены каких-либо физических компонентов. В сети стандарта FC 10GE или 8/16 ГБ потребуется замена только компонентов оптического модуля (без замены плат, с поддержкой преобразования любого протокола).

1.2 Технология RDMA снижает задержки каналов связи на 60%

Удалённый прямой доступ к памяти (Remote Direct Memory Access, RDMA) – функция, которая позволяет компьютеру напрямую передавать данные в память другого компьютера по сети без влияния на работу операционной системы. Это значит, что для завершения данной операции возможности обработки компьютеров не используются, пространство шины освобождается, и циклы процессора сокращаются, таким образом повышая производительность системы приложений.

Микросхемы обработки протоколов хранения производства Huawei поддерживают на аппаратном уровне RDMA, передачу данных и коммутацию между несколькими контроллерами памяти посредством RDMA, в результате чего задержка канала сокращается на 60% и более, а также значительно повышается эффективность обработки в условиях высокой нагрузки на услуги и одновременного доступа.

1.3 Снижение перегрузки в глобальной сети (WAN) с оптимизацией параметров для увеличения пропускной способности при выполнении удаленной репликации в сложных сетевых сценариях

Оптимизация WAN направлена на уменьшение объема данных, передаваемых по таким сетям, путем применения различных технических подходов. Передача данных оптимизирована и использование ресурсов полосы пропускания увеличено. Оптимизацию можно реализовать с одной стороны или с двух сторон (при односторонней оптимизации используется функция управления трафиком и технология оптимизации TCP, в то время как при двусторонней оптимизации используется кэш и технологии сжатия).

Микросхемы обработки протоколов хранения данных компании Huawei имеют встроенные функции контроля трафика QoS и предотвращения перегрузки TCP. В сложных сетевых сценариях (например, в случае подключения многочисленных вычислительных и коммуникационных сетей удаленно через LAN или MAN или даже через большой географический район) охватываемая область может варьироваться от нескольких десятков до нескольких сотен километров при подключении объектов связи в разных городах.

Информация, собранная в режиме реального времени, о задержке времени оборота (RTT) сетевых пакетов, коэффициенте потери пакетов, ECN и других характеристиках в сочетании с различными алгоритмами предотвращения перегрузки TCP используется для настройки стратегий приема и передачи, включая повторную передачу, окно буфера приема/передачи и интеллектуальный контроль трафика.

Настройка стратегий дает возможность предотвратить перегрузку определенных каналов, а также выполнить сброс вручную и динамически, в результате чего сетевые платы смогут работать быстрее, чем обычно. Ускорение работы повышает производительность на 65–400% в сложных сетях WAN.

2. Микросхема ускорения процесса обработки ввода-вывода

В эпоху облачных сервисов объемы данных растут быстрее, чем ожидалось, а также увеличивается количество дублированной информации. Дублированные данные, как правило, имеют ограниченную ценность для организаций. Они занимают большое пространство в системах хранения, увеличивают расходы на электроэнергию и охлаждение, а также могут снижать производительность доступа.

Для решения этой проблемы в отрасли широко применяются технологии дедупликации и сжатия. Однако эти функции потребляют много ресурсов ЦП из-за выполнения многочисленных алгоритмов определения, сжатия и восстановления характерных фрагментов данных. Использование этих функций приводит к снижению качества обслуживания.

Кроме того, клиенты замечают отсутствие изменения объема зарезервированного пространства для хранения их данных, а также отсутствие экономии денежных средств относительно стартовых инвестиций. Также недостатком является уменьшение срока службы SSD в зависимости от количества записанных данных.

Микросхемы ускорения процесса обработки ввода-вывода производства Huawei имеют интегрированные механизмы алгоритмов сжатия и восстановления данных, которые снимают с процессоров задачи, потребляющие большое количество вычислительных ресурсов, уменьшая их загрузку.

3. Микросхемы управления твердотельными накопителями (SSD)

В SSD-накопителях компании Huawei используется новое поколение собственных микросхем управления с процессорами Cortex-A9. Эти микросхемы поддерживают оперативную память DDR4 и до 18 каналов флеш-памяти NAND. Аппаратная технология FTL (Flash Translation Layer) позволяет ускорить процесс обработки ввода-вывода и обеспечивает ведущий в отрасли показатель 200 000 IOPS.

Справочные данные по производительности для твердотельных накопителей производства Huawei

3.1 Аппаратная технология FTL сокращает время задержки на 20% по сравнению со средними показателями в отрасли при небольшой загрузке системы

Утилита FTL является неотъемлемой частью структуры SSD. Она предназначена для установления соответствия между LBA пользователя и физической страницей в SSD. Когда пользователь считывает и записывает данные, FTL передает адрес LBA. После того, как SSD получает адрес, запрашивается таблица FTL для чтения данных с соответствующей физической страницы адреса LBA.

Для сравнения, когда данные считываются с обычных SSD, встроенное программное обеспечение управления находит соответствующий физический адрес LBA, а затем считывает данные из флеш-памяти и передает их на хост. При записи данных таблица соответствия FTL обновляется после того, как программное обеспечение завершит запись.

SSD-накопители производства Huawei обеспечивают ускорение управления таблицами FTL на аппаратном уровне. Все операции чтения и записи в FTL выполняются аппаратным обеспечением, что сокращает количество программных операций и задержку ввода-вывода. При небольшой загруженности системы задержка сокращается до 40 мкс (на 20% ниже среднего показателя в отрасли).

3.2. Технология FlashLink обеспечивает предсказуемую задержку в 0,5 мс во всем флеш-массиве

Технология FlashLink была реализована в ходе разработок твердотельных накопителей и операционной системы компании Huawei. Она обеспечивает вертикальную оптимизацию управления между аппаратным и программным обеспечением, а также стабильность задержки в 0,5 мс во всей системе хранения данных OceanStor Dorado V3 на базе флеш-памяти.

Больше про Хуавей:  HyperTerminal в Windows 7 | Windows для системных администраторов

Техническая диаграмма FlashLink

При классификации наиболее востребованных («горячих») данных и менее востребованных («холодных») данных информация записывается в разные разделы. Собственные операционные системы хранения данных обладают функцией определения «температуры» данных и маркировки при доступе к ним на SSD-накопителях.

Микросхемы управления SSD-накопителями направляют данные по определенному пути хранения в соответствии с метками «горячие»/«холодные», тем самым уменьшая объем данных, которые необходимо перемещать при удалении, и предотвращая увеличение объема записи примерно на 40%, а задержку – на 20%.

Функция планирования приоритетов ввода-вывода предоставляет множество возможностей для обеспечения низкой и стабильной задержки. Операционная система производства Huawei определяет уровень приоритета ввода-вывода. Например, хост определяет, что приоритет запроса на чтение данных выше, чем приоритет запроса на очистку кэша.

Приоритет запроса на очистку выше, чем запроса на асинхронную репликацию фоновых копий. Приоритет ввода-вывода передается на SSD вместе с запросами на чтение и запись. Далее микросхема управления SSD-накопителями обрабатывает операции ввода-вывода в соответствии с приоритетами, тем самым обеспечивая комплексное управление приоритетами ввода-вывода. Приоритетным услугам гарантируется первоочередная обработка при чтении и записи данных.

Заключение

Компания Huawei намерена и далее инвестировать средства в разработку своих собственных микросхем, которые позволят организациям взять под контроль потоки рабочей информации и добиться цифровой трансформации.

Микросхемы обработки протоколов, в которых реализована концепция «All-IP», участвуют в процессах на стороне клиента и на стороне сервера, в коммутации, репликации и сети со схемой «активный-активный», обеспечивая, при этом, низкую задержку всей конструкции.

Микросхемы ускорения процесса обработки ввода-вывода, в которых используется подход SOC, обеспечивают функции ускорения хранения и передачи данных в сочетании с постоянной оптимизацией возможностей вычисления, хранения и пропускной способности сети.

Компания Huawei пытается изо всех сил устранить нестабильность показателей работы процессоров, накопителей и сети за счет непрерывных инноваций и вертикальной оптимизации аппаратных и программных микросхем (чипов). Узнайте, какие продукты и решения компании Huawei помогут обеспечить стабильность и высокую производительность вашего оборудования. Продукты Huawei – правильный выбор для достижения успеха в бизнесе!

Теги: Huawei, SSD

Наньянский технологический университет оптимизирует научно-исследовательскую деятельность с помощью системы хранения данных all-flash huawei — истории успеха huawei enterprise

Лидирующий в мировом научно-исследовательском сообществе Наньянский технологический университет (Nanyang Technological University; NTU)
был основан в 1955 году в Сингапуре. Школа информационных технологий и вычислительной техники (School of Computer Science and Engineering; SCSE)
в ведомстве университета заняла в 2020 году первое место в Академическом рейтинге университетов Азии в области информационных технологий
и вычислительной техники. Для укрепления лидерских позиций и ускорения научных исследований по различным дисциплинам руководство
школы приняло решение заменить изолированные системы хранения данных продуктами Huawei. Это облегчило работу преподавателей и исследователей.
Теперь они легко получают доступ к информации и обмениваются ею, повышая общую эффективность и продуктивность выполнения образовательных задач.

Обзор инженерных систем ЦОД: Теория и практика SDDC: Микросхемы Huawei для массивов All-Flash


Потребности в передовых технологиях для проведения исследований одновременно во многих областях

Убежденный новатор в области образования по дисциплинам информационных технологий и вычислительной техники SCSE стала первой в Сингапуре школой,
предложившей программу Computer Engineering. На сегодняшний день SCSE — единственная в Сингапуре школа, обучающая студентов по направлениям
«информационные технологии» и «вычислительная техника».

Это объясняет тот факт, что преподаватели школы вместе с аспирантами и научными работниками добились столь высоких достижений в исследованиях в широком спектре предметов. Вот неполный перечень созданных по направлениям исследовательских групп: Аппаратные средства и встроенные системы, Кибербезопасность и компьютерно-техническая экспертиза, Аналитика данных и управление, Вычислительный интеллект.

Однако устаревшая информационная инфраструктура школы, поддерживавшая два типа кластеров, не справлялась с задачей многодисциплинарных исследований, которые необходимы разработчикам. Ограничение в вычислительных ресурсах также постоянно приводило к длительному ожиданию выполнения поставленных в очередь задач, что отрицательно сказывалось на продуктивности.

Для того чтобы научные работники могли эффективно и результативно использовать современные технологии для доступа к материалам исследований,
необходимо организовать хранение всей документации в едином пуле ресурсов, через который можно обмениваться информацией.
Такой пул должен скоординировать действия и объединить усилия участников научно-исследовательского процесса.

Более того, направления, в которых ведутся исследования в рамках школы, многообразны и зачастую сочетают в себе элементы других направлений.
Для реализации некоторых программ требуются «толстые» узлы (узлы с большой емкостью памяти) и высочайшая вычислительная производительность.

Следует принять во внимание активное сотрудничество научных работников в ходе исследования, а также тот факт,
что выполняемые ими задачи сильно различаются в величине рабочей нагрузки в пиковые и непиковые периоды времени,
а потребности в ресурсах быстро меняются. Для достижения данных целей школе потребовалась облачная ИТ-платформа
с возможностью гибкого деления на разделы и быстрого конфигурирования.


Замена множества систем одним решением

Руководство школы приступило к поиску оптимального решения и заменила имеющиеся в огромном множестве
традиционные системы одним объединённым решением, способным удовлетворить потребности как преподавателей, так и исследователей.

Данная система должна иметь достаточную емкость и возможность расширения в любое время. Кроме того, вычислительный узел должен поддерживать работу занимающих много памяти последовательных программ, программ OPENMP и Message Passing Interface (MPI). И наконец, решение должно обеспечить более высокую плотность при меньшей площади физического пространства и одновременно быть энергоэффективным.

Став партнёром SCSE в деле внедрения новых технологий и трансформации деятельности школы, компания Huawei развернула серверную систему
KunLun 9016 и СХД OceanStor, которые создали фундамент аппаратной платформы. За счет реализации как физического,
так и виртуального деления на разделы для развертывания высокопроизводительных вычислительных приложений различные группы могут
одновременно пользоваться данной системой, получая преимущества многодисциплинарных исследований.


Получение централизованного пула ресурсов

Для создания пула научно-исследовательских ресурсов руководство школы выбрало флеш-систему хранения Huawei OceanStor и серверную платформу KunLun среди множества других, имеющихся на рынке предложений. Растет число научно-исследовательских проектов, в которых ресурсы вычисления и хранения объединяются в единый пул, создающий удобную среду для обмена информацией и продвижения проектов.

Платформа Huawei KunLun — оптимально подходит под потребности школы и поддерживает работу последовательных программ, программ OPENMP и MPI, сильно нагружающих систему. Это решение предназначено для сценариев организации работы основных баз данных и мощных высокопроизводительных вычислительных узлов, консолидации сервисов и приложений, вычислений в оперативной памяти.

На каждом сервере KunLun работают по несколько HPC-приложений, в том числе высокопроизводительные базы данных, приложения машинного обучения и облачных вычислений, службы анализа больших данных. Благодаря гибкой комбинации методов физического и виртуального деления на разделы решение подходит как для мелких, так и крупномасштабных приложений, требующих разные вычислительные мощности, что упрощает и повышает эффективность использования сотрудниками университета централизованного пула ресурсов.

Руководство школы полностью признает, что всесторонний обмен ресурсами станет в дальнейшем основным фактором будущих научных исследований и взращивания талантливых специалистов. Повышенная эффективность обучения и проведения научных исследований позволит университету достичь новых высот.

1 Звездаслабоватона троечкухорошо!просто отлично! (1 оценок, среднее: 4,00 из 5)
Загрузка...

Расскажите нам ваше мнение:

Ваш адрес email не будет опубликован. Обязательные поля помечены *