Publié le: Aug 2, 2018
Vous pouvez maintenant utiliser Apache Flink 1.5.0 et Apache Livy 0.5.0 sur Amazon EMR version 5.16.0. Flink 1.5.0 possède plusieurs nouvelles fonctionnalités, notamment un nouveau modèle de déploiement qui prend en charge l’allocation dynamique des ressources sur YARN pour une utilisation efficace des ressources, prend en charge un état de diffusion permettant la réplication des règles et modèles de configuration à toutes les instances parallèles d’une fonction, un nouveau client CLI pour exécuter des requêtes ad hoc sur les flux de données, la possibilité de stocker des informations d'état sur les disques locaux pour une récupération plus rapide et efficace des pannes et d'autres mises à jour des performances et de débit pour les tâches de streaming. Livy 0.5.0 prend en charge l'interpréteur SparkSQL pour l'exécution de requêtes SQL interactives, la possibilité d'utiliser plusieurs langues et de partager SparkContext en une seule session, la possibilité de partager des variables entre les tâches et d'autres améliorations. De plus, vous pouvez désormais utiliser la version mise à niveau d'Apache Hadoop 2.8.4, Apache Spark 2.3.1, Presto 0.203, Apache Phoenix 4.14.0 et Apache MXNet 1.2.0.
Vous pouvez créer un cluster Amazon EMR avec la version 5.16.0 en choisissant l'étiquette de version « emr-5.16.0 » dans AWS Management Console, l'interface de ligne de commande AWS ou le SDK. Vous pouvez choisir Flink, Livy, Hadoop, Spark, Presto, Phoenix, et MXNet pour installer ces applications lorsque vous lancez votre cluster EMR. Veuillez visitez la documentation Amazon EMR pour obtenir plus de renseignements sur le lancement EMR 5.16.0, Flink 1.5.0, Livy 0.5.0, Spark 2.3.1, Presto 0.203, Hadoop 2.8.4, Phoenix 4.14.0, et MXNet 1.2.0
Amazon EMR 5.16.0 est désormais disponible dans toutes les régions prises en charge par Amazon EMR.
Nous avons ajouté un flux RSS pour les notes de lancement EMR. Votre flux contient un bref résumé de mises à jour importantes et un lien menant aux notes de lancement détaillées. Utilisez l'icône RSS en haut du guide de lancement EMR pour lier l'URL du flux directement à votre lecteur de flux favori (http://docs.thinkwithwp.com/emr/latest/ReleaseGuide/amazon-emr-release-notes.rss)