Menggunakan ALELEON Supercomputer via EFIRO

Dari ALELEON by EFISON

Revisi sejak 15 Februari 2023 05.36 oleh WilsonLisan (bicara | kontrib) (formatting menghilangkan sub header yang bloated)

0 - Pendahuluan

Halaman ini menjelaskan penggunaan ALELEON Supercomputer melalui EFIRO: layanan web service dengan grafis (GUI) untuk memvisualisasikan penggunaan ALELEON Supercomputer.

Kompetensi User

EFIRO dapat digunakan untuk user pemula HPC (terutama yang belum bisa atau lancar dalam mengoperasikan terminal Linux). Akan tetapi kami tetap menyarankan untuk perlahan belajar menggunakan terminal Linux.

Sesi Interaktif Services

Selain visualisasi penggunaan HPC pada umumnya (job submission), EFIRO menawarkan fitur sesi interaktif services bagi yang membutuhkan seperti desktop session dengan ALELEON Desktop, Jupyter Notebook / Lab, dll. Lihat subbab 3B dan seterusnya.

1 - Login Web EFIRO

Sebelum login, user harus terhubung ke jaringan VPN ALELEON Supercomputer untuk dapat melakukan login ke ALELEON Supercomputer.

Apabila sudah terhubung ke VPN ALELEON, lakukan tahap berikut:

2 - Halaman Dashboard EFIRO

Setelah login, user masuk ke halaman dashboard EFIRO yang berada di Login Node. Berikut adalah daftar menu beserta penjelasannya (klik Expand atau Kembangkan):

DAFTAR MENU PADA DASHBOARD EFIRO
Efiromenubarbig3.png

Jobs > Job Composer

  • Halaman untuk membuat sesi job submission dan menjalankan komputasi di Compute Node ALELEON Supercomputer.
  • Job Composer berisikan serangkaian template, formulir, dan script untuk menjalankan software komputasi.
  • User dapat melihat semua job yang pernah dijalankan beserta hasilnya pada halaman Job Composer ini.
Halaman Job Composer

Jobs > Active Jobs

  • Menampilkan status dan antrian job komputasi semua user yang sedang berjalan.
  • Terdapat dua opsi yaitu All Jobs untuk melihat antrian semua job dan Your jobs untuk melihat status job user saja.
Halaman Active Jobs

Interactive Apps

  • Menampilkan daftar service software yang bisa diakses secara interaktif (langsung) oleh user.

My Interactive Sessions

  • Menampilkan daftar sesi interaktif user yang sedang aktif dan sudah selesai.

Clusters > Aleleon Shell Access

  • Halaman terminal Linux (shell) ALELEON Supercomputer. Untuk kegiatan yang membutuhkan terminal.
Terminal ALELEON Supercomputer

Files > Home Directory

  • Menampilkan isi direktori HOME user.
  • User dapat melakukan manajemen file seperti upload, download, copy, rename, delete, dll.
Halaman Home Directory dan menu manajemen file

3A - Menjalankan Komputasi ke Compute Node via Job Composer

User menggunakan halaman Jobs > Job Composer untuk menjalankan komputasi di Compute Node yang merupakan bagian server utama menjalankan job komputasi user. Halaman Job Composer memvisualisasikan SLURM, yaitu program manajemen untuk mengatur alokasi dan antrian resources job submission user di Compute Node. Berikut adalah langkah mengggunakan Job Composer:

LANGKAH MENGGUNAKAN JOB COMPOSER UNTUK JOB SUBMISSION
1 Buka menu dashboard EFIRO Jobs > Jobs Composer

2 Pilih New Jobs > From Template

3A Berikutnya user memilih template software komputasi yang diinginkan:
  • Pilih template job yang diinginkan.
  • Isi Job Name sesuai keinginan user, kemudian klik Create New Job.
Isi atau ganti Job Name sesuai keinginan user, kemudian klik Create New Job.
Note:
  • Template job dibuat oleh admin EFISON serta disesuaikan dengan nama software komputasi dan versinya. User dapat meminta bantuan admin untuk pembuatan template melalui email support@efisonlt.com.
3B User dapat melihat daftar lengkap template software komputasi dan tutorial penggunaannya pada ALELEON Supercomputer pada:

Daftar Software Komputasi dan Tutorial Penggunaan

4 Setelah itu user menyiapkan keperluan untuk menjalankan job seperti upload file input, dll:

Jcjoboption.png

Terdapat tiga opsi untuk mempersiapkan job:

  • Edit Files: Manajemen file melakukan upload / download / editing file untuk menjalankan job komputasi user.
    • Fitur upload pada laman Edit Files mempunyai batasan ukuran upload 2GB per file. Gunakan aplikasi FTP apabila user hendak mengupload file tunggal diatas 2GB.
  • Job Options: Mengganti nama job komputasi
  • Open Terminal: Membuka terminal pada direktori job tersebut, ketika user membutuhkan perintah terminal untuk menyiapkan komputasi user.
5A User melengkapi Submit Script yaitu script bash yang berisikan alokasi kebutuhan komputasi (CPU, RAM, walltime, output, dll) dan alur jalannya program komputasi user.

Melalui Open Editor, lengkapi Submit Script dengan mengganti bagian yang di tandai 4 garis miring (////) supaya job dapat berjalan dengan benar.

  • Template menyediakan penjelasan tentang apa dan mana bagian yang harus dilengkapi.
  • Jangan lupa klik Save setiap sekali mengubah script.
5B Pengenalan dasar Submit Script dan aturan menentukan alokasi kebutuhan komputasi di ALELEON Supercomputer:

SLURM Script ALELEON Supercomputer

6A

Apabila Submit Script sudah diedit sesuai kebutuhan, jalankan job dengan klik tombol Submit.

Berikut penjelasan kolom Status, pantau dengan refresh halaman job:
Status Arti
Not Submitted Job belum pernah dijalankan.
Running Job berjalan.
Queue Job mengantri dan belum berjalan.
Completed Job selesai berjalan.
Failed Job berhenti di tengah jalan, Bisa karena di Stop atau Delete oleh user.
6B

Untuk menghentikan job yang tengah berjalan, klik tombol Stop.

Stop.png

7A Hasil output job yang selesai dapat dilihat pada kolom Folder Contents atau membuka halaman Edit Pages.
User dapat melihat semua file output yang keluar di kolom Folder Contents.
atau dengan membuka menu Edit Files.
7B

User dapat menjalankan ulang ruang job yang sama (misalkan ketika ada koreksi file input atau Submit Script) dengan mengklik kembali tombol Submit.

3B - Menjalankan Sesi Interaktif ALELEON Desktop

Aleleondesktop.png

ALELEON Desktop adalah sesi interaktif virtual desktop yang berjalan di Interactive Node AELEON Supercomputer. Berikut adalalah langkah memulai sesi ALELEON Desktop (klik Expand).

LANGKAH MENJALANKAN SESI ALELEON DESKTOP
1 Buka menu dashboard EFIRO Interactive Apps > ALELEON Desktop
2 User mengisi formulir untuk memulai sesi ALELEON Desktop:
  • Partition: pilih salah satu
    • Torti: hanya ada CPU
    • Tilla: terdapat tambahan 1x GPU RTX 3090
  • Number of CPU Cores: isi sesuai keinginan user.
  • Number of GPUs: isi sesuai keinginan user
  • Number of hours: isi sesuai keinginan user

Apabila sudah selesai, klik Launch.

3 Tunggu hingga sesi ALELEON Desktop siap. Apabila status sudah menunjukkan Running, klik Launch Aleleon Desktop.
ALELEON Desktop menunjukkan status Running.
User dapat mengatur kualitas gambar ALELEON Desktop melalui slider Compression dan Image Quality.

3C - Menjalankan Sesi Interaktif Jupyter (Notebook dan Lab)

(coming soon)