AWS Step Functions introduce l’integrazione del servizio Amazon EMR

Inserito il: Nov 19, 2019

AWS Step Functions è ora integrato in Amazon EMR e accelera la creazione nonché facilita il monitoraggio dei flussi di lavoro di elaborazione dei Big Data EMR.

AWS Step Functions consente di creare flussi di lavoro resilienti utilizzando servizi AWS quali Amazon EMR, Amazon SageMaker e AWS Lambda. Amazon EMR è la piattaforma dei Big Data nativa per il cloud leader del settore e consente ai team di elaborare grandi quantità di dati in modo rapido e conveniente su larga scala. Con Step Functions e Amazon EMR puoi orchestrare flussi di lavoro di Big Data scrivendo di fatto una quantità minima di codice aggiuntivo.  

Con Amazon EMR e AWS Step Functions, puoi ora creare efficienti flussi di lavoro di elaborazione dei dati che ordinano i passaggi di Amazon EMR, gestiscono le dipendenze ed eseguono il lavoro in parallelo. Puoi ridimensionare proattivamente un cluster verso l’alto o verso il basso nell’ambito del flusso di lavoro ETL, ridimensionando correttamente il cluster per l’attività in questione. Puoi anche migliorare la resilienza dei flussi di lavoro di elaborazione dei tuoi dati scegliendo la modalità di gestione delle eccezioni, ritentando lavori non riusciti e segnalando gli errori agli utenti.

Utilizzando l’integrazione del servizio Amazon EMR con i kit SDK per Data Science di AWS Step Functions puoi creare flussi di lavoro di data science end-to-end. L’integrazione del servizio EMR è disponibile in tutte le regioni in cui sono disponibili AWS Step Functions e Amazon EMR. Per un elenco completo delle regioni e dei servizi offerti, consulta la pagina delle regioni AWS.

Per cominciare, rivedi la documentazione e implementa un progetto di esempio in un solo clic che dimostra come creare un flusso di lavoro di elaborazione dei dati con Amazon EMR, quindi inizia a creare il tuo primo flusso di lavoro di elaborazione dei dati.

Ulteriori informazioni: