ENGIE Membangun Common Data Hub di AWS, Mempercepat Transisi Nol-Karbon

Pelanggan ENGIE sangat bervariasi, dari kota ke pelanggan ritel, hingga perusahaan besar, dan seterusnya. Perusahaan semakin mendukung kemampuan pelanggan untuk menghasilkan listrik mereka sendiri dengan aset terdesentralisasi, termasuk panel surya dan pembangkit listrik tenaga angin. Saat ENGIE semakin condong ke arah desentralisasi, ENGIE mendapati bahwa Sistem, Aplikasi, dan Produknya dalam Pemrosesan Data perangkat lunak perencanaan sumber daya korporasi perlu diperbarui. Perusahaan membutuhkan metode pengumpulan dan analisis data yang seragam untuk membantu pelanggan mengelola rantai nilai mereka. “Kami perlu menggunakan data untuk mengukur konsumsi dan mengantisipasi volume produksi listrik tergantung pada prakiraan cuaca, misalnya,” kata Gregory Wolowiec, pemimpin tim teknologi yang memandu pengembangan dan penyampaian program data ENGIE. Wolowiec juga mengutip masalah isolasi dan inkonsistensi di seluruh negara: “Semua solusi berbeda dari satu negara ke negara lain; tidak ada pembagian antara bagian-bagian organisasi yang berbeda. Menjadi sangat penting bagi kami untuk dapat mengumpulkan dan berbagi data dengan cara yang efisien di mana pun di planet ini.”

Yves Le Gélard, chief digital officer di ENGIE, menjelaskan tujuan perusahaan: “Keberlanjutan untuk ENGIE adalah alfa dan omega dari segalanya. Ini adalah alasan utama kami. Kami membantu perusahaan-perusahaan besar dan kota-kota terbesar di dunia dalam upaya mereka untuk bertransisi ke nol karbon secepat mungkin karena itu sebenarnya adalah pertanyaan nomor satu bagi umat manusia saat ini.”

Group chief data officer ENGIE, Gérard Guinamand, menambahkan, “Strategi kami dalam hal data sebenarnya terkait langsung dengan tujuan kami. Jika Anda ingin mendorong dan mewujudkan transisi nol-karbon, Anda harus mengumpulkan data terlebih dahulu tentang apa yang terjadi. Itu termasuk data tentang berapa banyak karbon dioksida yang Anda bakar, di mana Anda membakarnya, dan bagaimana semuanya berkorelasi dengan topik lingkungan seperti cuaca, suhu, dan jumlah orang. Semua data ini perlu disimpan, dikumpulkan, dan dikomputasi sehingga Anda dapat mengukur kemajuan dan mengikuti panduan.”

Metode apa pun yang diadopsi ENGIE harus memiliki tingkat keamanan yang tinggi dan patuh terhadap peraturan di seluruh dunia. Saat perusahaan mengumpulkan bukti konsep, ENGIE mengeksplorasi berbagai solusi dengan penyedia cloud lokal dan global. “Kami yakin bahwa AWS adalah solusi yang baik karena berbagai alasan, termasuk model biaya—dan terutama, dalam hal penyimpanan data,” kata Wolowiec. Jadi, ENGIE mulai menjalankan proyek data besarnya di AWS pada pertengahan 2018.

Wolowiec menggambarkan Common Data Hub sebagai “danau data kolaboratif dan terdistribusi yang memungkinkan ENGIE untuk menyimpan data, berbagi data, dan menciptakan nilai dengan data.” Common Data Hub dibangun menggunakan Amazon Simple Storage Service (Amazon S3), sebuah layanan penyimpanan objek yang menawarkan skalabilitas, ketersediaan data, keamanan, dan performa terdepan di industri. Solusi tersebut juga menggunakan Amazon Redshift, sebuah layanan gudang data berskala petabita dan terkelola penuh di cloud yang dapat melakukan kueri data semi-terstruktur di danau data Amazon S3, mendemonstrasikan pendekatan lake house terhadap penggudangan data.

Karena solusinya menggunakan Amazon Redshift, pelanggan dapat melakukan deployment gudang data dengan aman di lingkungan Common Data Hub mereka dan memanfaatkan analitik. Dengan mengelola klaster Amazon Redshift di Common Data Hub, administrator unit bisnis perusahaan dapat ditambahkan ke proyek Common Data Hub dan dengan mudah mengakses set data di danau data Amazon S3, serta membangun wawasan berharga dari katalog set data lengkap milik Common Data Hub. Common Data Hub menggunakan Amazon Redshift untuk dua tipe akses data yang berbeda. Common Data Hub menggunakan Amazon Redshift Spectrum untuk kueri langsung ke bucket S3 milik Common Data Hub, dan menggunakan Amazon Redshift sebagai gudang data yang disediakan dengan penyimpanan internalnya sendiri. “Kami mengandalkan fitur Amazon Redshift Spectrum untuk menghubungkan antara danau data Amazon S3 yang dikelola oleh Common Data Hub dengan gudang data Amazon Redshift,” kata Wolowiec.

Layanan AWS lain yang terlibat dalam Common Data Hub termasuk Amazon Kinesis Data Streams (Amazon KDS), sebuah layanan streaming data waktu nyata yang dapat diskalakan secara besar-besaran dan tahan lama. Dengan menggunakan Amazon KDS memungkinkan ENGIE untuk dengan mudah mengumpulkan, memproses, dan menganalisis data streaming dari perangkat Internet untuk Segala (IoT) secara waktu nyata, yang berarti ENGIE dapat dengan cepat mengumpulkan informasi yang digunakannya untuk mengembangkan wawasan. AWS Glue—layanan extract, load, transform (ETL) terkelola penuh untuk repositori metadata—lebih lanjut membantu mentransfer dan membersihkan data. Amazon Athena, sebuah layanan kueri interaktif yang memudahkan analisis data di Amazon S3 menggunakan SQL standar, memungkinkan unit bisnis ENGIE melihat data. Untuk mendapatkan wawasan lebih lanjut dari data, ENGIE mengandalkan Amazon SageMaker, sebuah layanan terkelola penuh yang memberi setiap developer dan ilmuwan data kemampuan untuk membangun, melatih, dan melakukan deployment model machine learning dengan cepat.

Untuk memfasilitasi adopsi Common Data Hub yang lancar dan mudah di seluruh dunia, ENGIE menyediakan templat akselerasi dan dokumentasi untuk membantu administrator unit bisnisnya melihat nilai data yang mereka kumpulkan, serta mengakses data di danau data terdistribusi. Common Data Hub juga memungkinkan tata kelola dan keamanan data tingkat tinggi. Produsen data dapat berbagi dan mengontrol akses ke set data dan alur kerja. Konsumen juga dapat meminta akses dan menggunakan data.

Integrasi layanan AWS memberikan solusi yang aman, tangkas, dan dapat diskalakan untuk ENGIE. Sekarang unit bisnis yang berbeda dapat menggunakan kerangka kerja dengan cara yang mereka butuhkan tanpa mengorbankan apa pun yang penting untuk operasi. Kemudahan penggunaan dan otomatisasi memungkinkan unit bisnis ENGIE meningkatkan produktivitas dengan cepat setelah membangun solusi Common Data Hub di AWS. Ada juga dampak lingkungan yang positif: ENGIE menggunakan data untuk mendapatkan jumlah energi maksimum yang dimungkinkan dari pembangkit listrik tenaga angin, membantu meningkatkan efektivitas sumber energi terbarukan yang penting ini. “Kami menyediakan alat yang tepat sehingga entitas dapat fokus pada penciptaan nilai, alih-alih meluangkan waktu untuk menangani masalah teknis,” kata Wolowiec. Sejauh ini, ENGIE telah mengumpulkan 200TB data yang disiapkan di Common Data Hub.

Common Data Hub membentuk tulang punggung strategi berbasis data ENGIE dengan memungkinkan komunitas data antara pengguna teknologi informasi dan bisnis, mempercepat peningkatan literasi data di setiap tingkat ENGIE, dan membantu mengoptimalkan proses internal atau membuat layanan baru berbasis data. Semua unit bisnis kini diberdayakan dengan solusi unik untuk membangun aplikasi yang didorong data lebih cepat. ENGIE saat ini memiliki lebih dari 1.000 proyek yang disiapkan di Common Data Hub yang berjalan di seluruh dunia. Common Data Hub menawarkan solusi yang benar-benar kohesif karena menghilangkan silo dan memungkinkan setiap departemen memperoleh manfaat dari akses yang sama ke kerangka kerja umum.

Dengan metode baru dalam mengumpulkan dan berbagi data, ENGIE melihat peluang untuk mengubah cara bisnisnya—dan perusahaan sedang dalam proses membangun pusat data vertikal untuk melakukan hal itu. ENGIE secara historis memiliki pendekatan bawah-atas, dengan unit bisnisnya menyediakan layanan bagi pelanggan di wilayah masing-masing. Namun, karena banyak layanan energinya sama, hal ini menghasilkan duplikasi pekerjaan yang tidak perlu. “Aktivitas pembangkit listrik kami dan terutama pembangkit energi terbarukan kami pada dasarnya sama di mana-mana,” kata Wolowiec, “Kami dapat menggunakan Common Data Hub untuk membangun kasus penggunaan umum di seluruh dunia. Selanjutnya bagi kami adalah memperkenalkan lebih banyak pendekatan atas-bawah—terutama untuk pembangkit listrik tenaga angin.”

ENGIE menemukan nilai signifikan dengan menggunakan layanan AWS untuk membangun Common Data Hub, memungkinkan unit bisnis globalnya mengumpulkan, berbagi, dan menganalisis data dengan cara yang lebih produktif. Unit bisnis ENGIE masih mempertahankan otonomi, tetapi mereka sekarang dapat memanfaatkan kekuatan data terpusat, mengumpulkan wawasan penting dari kasus penggunaan serupa saat mereka menemukan cara yang lebih baru dan lebih efisien untuk menyediakan energi bagi dunia.