Komputasi Python

Python adalah bahasa pemograman intepreter (high-level) untuk keperluan serbaguna. Komputasi Python mengacu pada penggunaan package Python untuk keperluan komputasi seperti AI, big data, data science, kimia komputasi, dll.

Intro: Komputasi Python di HPC

Secara umum komputasi Python dirancang untuk komputer personal sehingga membutuhkan penyesuaian pada komputer komunal seperti ALELEON Supercomputer.

Package Python dan Instalasinya

Python menyediakan fungsi modul atau framework dalam rupa "package" (contoh untuk AI ada PyTorch, TensorFlow, AutoGluon, Keras, dll). Di HPC pada umumnya termasuk ALELEON, user melakukan instalasi dan manajemen package (uninstall, update, version control) sendiri menyesuaikan kebutuhan.

Site-packages Python

Python menaruh instalasi package di direktori tersembunyi bernama site-packages. Pada praktiknya, Python juga "menyembunyikan" kontrol atas site-packages ini sehingga menyebabkan banyak masalah seperti konflik instalasi package, instalasi berantakan, dan konsumsi storage membengkak karena cache tersembunyi.

Environment Python

Solusi atas masalah diatas serta menjadi praktik baik komputasi Python adalah menggunakan environment Python untuk isolasi site-packages.

Pilihan Environment Python

ALELEON Supercomputer menyediakan opsi environment Python berikut yang menjadi basis tutorial menjalankan komputasi (job submission). Silahkan pilih sesuai preferensi.

[Conda Environment]
User membuat "ruang isolasi" bernama conda environment. User menginstal package yang dibutuhkan di conda env yang dibuat. Gunakan conda env tersebut untuk menjalankan komputasi.
---

[Container Apptainer]
Menggunakan image container untuk menjalankan komputasi Python. Image container dijalankan melalui platform Apptainer. Tersedia opsi image siap pakai dan user menyediakan image sendiri.
---