Entrega Email: quatro passos para obter mais e-mail para a caixa de entrada
DataDirect Networks impulsionou suas já grandes, média e rápida de dados SFA12K grandes / arrays de armazenamento de HPC para ir mais rápido ainda com o produto SFA12KX, rodando a até 48GB/sec partir de um único aparelho.
Anteriormente a SFA12K rápido poderia correr até 40GB/sec, como pode ser visto no complexo supercomputador Titan , que utiliza 36 delas.
O problema crescente, de acordo com o DDN, é que grandes volumes de dados e aplicações de HPC são executados através de centenas de processadores que possuem múltiplos núcleos e muitos segmentos. Um sistema de arquivo de destino tem que lidar com "o acesso a centenas ou milhares de arquivos simultaneamente, através de um único namespace do sistema de arquivos - ou o efeito de milhares de tópicos que escrevem um único arquivo [e isso] exige operações de metadados POSIX substanciais que exigem alta velocidade aleatória IOPS para a resposta ideal. " (Excerto do DDN papel branco, 20 páginas PDF .)
DDN nos diz: "Top supercomputadores tem mais de 1,5 milhão de núcleos de CPU em seus clusters de computadores, resultando em potencialmente centenas de milhares de arquivos em simultâneo escreve durante as operações de ponto de verificação."
E vai piorar. Fora do mundo da supercomputação rarefeito os principais sites têm que lidar com "centenas de milhares de acessos a arquivos por segundo", e de arquivo aleatório acessa nisso. Não há streaming de alívio dados disponíveis.
Matriz em massa aleatórios dados de acesso aumenta a velocidade só pode vir da redução do número de HDD acessa necessário para obter um pedaço de dados lidos ou gravados. DDN diz que seu uso de "um estado da arte, multi-threaded motor a integridade dos dados" para fazer isso, um belo pedaço de jargão.
DDN SFA12KX arquitetura de controlador RAID
O motor do SKA12KX RAID, mecanismo de cache, motores de dados, drivers e programadores são Paralelizada e multi-threaded. Há controladores Ativo / Ativo com roteamento dinâmico em vez de bloqueio distribuído. Bloqueios de arquivos não são enviados entre os controladores usam uma ligação inter-controlador:. "Cada unidade lógica é on-line para ambos os controladores, mas apenas um controlador toma posse primária para uma determinada unidade lógica em um determinado momento o controlador que domina a caches de unidade lógica dados para a unidade lógica e acessa os discos físicos que contêm os dados da unidade lógica. "
Processamento RAID foi acelerado: "Há duas instâncias paralelas do mecanismo de armazenamento:. Um processador RAID (RP) 0 e um em RP1 Assim, o SFA12KX tem dois, motores RAID multi-threaded paralelas que trabalham simultaneamente em cada controlador para um total de quatro processadores RAID entre o par de controlador redundante ".
"Além disso", continua DDN ", cada processador RAID executa vários tópicos que gerenciam o cache SFA, os cálculos de integridade de dados e motores de E / S. Assim, como o número de núcleos do sistema de armazenamento são aumentados, processos paralelos adicionais podem ser executados simultaneamente e ambos IOPS e largura de banda vai aumentar em conformidade. "
DDN também usa flash para acelerar o acesso aos dados LUN com o seu armazenamento Fusão Accelerator (SFX): "cache SFX pode ser atribuído a um número de unidade lógica (LUN), que refere-se a um disco lógico criado a partir de um grupo de discos reais, ou pode ser compartilhado entre vários LUNs. Ele tem o efeito de front-terminando o LUN com algum esconderijo muito rápido e grande, sem ter que dedicar drives SSD caro para um único LUN ".
Combine isso com um cache DRAM grande eo número de acesso HDD é reduzido.
DDN afirma o SFA12KX "entrega aleatória IOPS [de] mais de 1,7 milhões de ruptura para o cache e mais de 1.4M sustentado IOPS 4K para SSDs. Desempenho de largura de banda bloco seqüencial é 48GB / s para leitura e gravação simultânea. "
Ele suporta até 1.680 unidades, com uma combinação de SAS, SATA ou SSD.
A linha SKFA12KX usa processadores Intel Ivy Bridge e há o suficiente deles para executar aplicativos do sistema dentro do array. O anfitrião SFA OS "atua como um hypervisor, usando tecnologias como ccNUMA e KVM para controlar o processador, core, memória, I / O e alocação de disco virtual".
Tanto o sistema de arquivos Lustre e GPFS pode ser executado dentro de máquinas virtuais no SFA12KXE. DDN diz que isso reduz o número de servidores, os requisitos de infra-estrutura e conexões de rede e agiliza o I / O, reduzindo a latência, através da remoção de dados "saltos" e eliminando conversões de protocolo de armazenamento.
Estamos disse o SFA12KXE usa essa tecnologia de processamento no armazenamento para executar EXAScaler do DDN (Lustre) e (GPFS) sistemas de arquivos paralelos GRIDScaler ", bem como aplicações de clientes rodando nativamente dentro da matriz de armazenamento. The SFA12KXE oferece até 23Gb / s do desempenho do sistema de arquivos e elimina servidores externos e redes de armazenamento para uma abordagem convergente que produz aquisição significativa e economia de gestão. "
DDN reivindica seus sistemas XE SFA12KX e fornecer tanto alta velocidade IOPS aleatório e de alta largura de banda, usando apenas (!) 21 SKA12KXs para chegar a um 1TB/sec total de rendimento. Ao otimizar a pilha de software, e através do uso criterioso de caches em flash, uma matriz de unidade de capacidade maior pode oferecer grande quantidade de dados aleatórios rapidamente para multi-threaded, multi-tubulares, complexos de computação multi-processador. Estes estão se espalhando a partir de supercomputação e HPC na arena comercial, grandes aplicações de tipos de dados, com massa conjuntos de dados, parece que precisa de processamento analítico.
Você não pode usar arrays all-flash para este, que é muito caro. DDN também gostaria de dizer que você não pode usar principais matrizes de armazenamento de negócios para este quer, eles não têm as otimizações de pilha que DDN aprendeu sobre a partir de anos de implementações HPC.
Leia o white paper SFA12KX aqui (pdf) . O aparelho SFA12KXE estará disponível neste trimestre com o SFA12KX prevista para disponibilidade geral no início de 2014. ®
