Car-tech

Amazon Web Services ospita grandi quantità di storage

Attacking and Defending S3 Buckets - Sapna Singh - leHACK 2019

Attacking and Defending S3 Buckets - Sapna Singh - leHACK 2019
Anonim

Affrontando il mercato in crescita per l'analisi dei big data, Amazon Web Services (AWS) ha introdotto un pacchetto di archiviazione, denominato High Storage, in grado di offrire accesso rapido a grandi quantità di dati.

High Storage, un pacchetto Amazon Elastic Compute Cloud (EC2), è progettato per eseguire lavori di analisi intensiva dei dati, come l'analisi sismica, l'elaborazione dei registri e il data warehousing, secondo l'azienda. È costruito su un'architettura di file system parallela che consente di spostare e spostare i dati su più dischi contemporaneamente, velocizzando i tempi di throughput.

"Le istanze di questa famiglia forniscono densità di storage proporzionalmente più elevate per istanza e sono ideali per applicazioni che beneficiare di elevate prestazioni di I / O sequenziali su set di dati molto ampi, "afferma AWS nella letteratura di marketing online per questo servizio. La società lancia il servizio come complemento del suo servizio Elastic MapReduce, che fornisce una piattaforma per l'analisi dei big data di Hadoop. AWS utilizza le istanze High Storage per alimentare il suo servizio di data warehouse Redshift.

[Ulteriori informazioni: I migliori servizi di streaming TV]

Un'istanza AWS è un insieme di unità di calcolo, memoria, storage e altri servizi configurati per le caratteristiche di un particolare tipo di carico di lavoro. High Storage è il nono tipo di istanza di elaborazione che AWS ha introdotto. Si unisce ad altri tipi istantanei personalizzati per carichi di lavoro particolari, come istanze ottimizzate per l'utilizzo di GPU (unità di elaborazione grafica) o per lavori HPC (calcolo ad alte prestazioni).

L'istanza di archiviazione elevata offre 35 unità di calcolo EC2 (ECU) di capacità di elaborazione e 117 GB di memoria di lavoro. Fino a 48 TB di storage sono distribuiti su 24 hard disk DAS (direct attached storage). Distribuire i dati su più dischi può velocizzare i trasferimenti di dati perché la velocità di lettura e scrittura di un singolo disco non è più un collo di bottiglia. Il sistema può offrire oltre 2,4 GB al secondo di prestazioni di I / O sequenziali.

I clienti possono richiamare istanze di archiviazione elevata dalla console di gestione AWS, dalle righe di comando di EC2 o Elastic MapReduce o dall'SDK di AWS (kit di sviluppo software) o librerie di terze parti. L'istanza High Storage è attualmente disponibile sulla costa est degli Stati Uniti e sarà disponibile in altre parti del mondo nei prossimi mesi. Le istanze High Storage possono essere acquistate su richiesta on-demand o essere prenotate in anticipo a costi ridotti.

Aiutando ulteriormente i potenziali clienti big data, Amazon ha anche attivato la sua pipeline di dati per uso generale, che la società ha annunciato il mese scorso.

Joab Jackson copre le ultime novità del software aziendale e della tecnologia generale per Il servizio News IDG. Segui Joab su Twitter all'indirizzo @Joab_Jackson. L'indirizzo e-mail di Joab è [email protected]