Menggunakan ALELEON Supercomputer via EFIRO: Perbedaan antara revisi

Dari ALELEON by EFISON
Baris 51: Baris 51:
Berikut adalah tutorial umum menggunakan halaman Job Composer ''(klik Expand atau Kembangkan)'':
Berikut adalah tutorial umum menggunakan halaman Job Composer ''(klik Expand atau Kembangkan)'':
{| class="wikitable mw-collapsible mw-collapsed"
{| class="wikitable mw-collapsible mw-collapsed"
! colspan="2" |Langkah Umum Menggunakan Job Composer
! colspan="2" |Langkah Menggunakan Job Composer
|-
[[Berkas:Efirojobcomposer3.png|nirbing|500x500px]]
|'''0'''
|Bagi akun perseorangan, disarankan untuk mengecek sisa [[Core Hour|'''Core Hour''']] sebelum menjalankan komputasi.
[[Berkas:Shellaccess.png|nirbing|200x200px]]
*Buka terminal melalui menu '''<code>Clusters</code> > <code>Aleleon Shell Access</code>'''.
*Jalankan perintah
$ '''sausage'''
|-
|-
|'''1'''
|'''1'''
|Buka menu dashboard EFIRO '''<code>Jobs</code> > <code>Jobs Composer</code>'''
|
[[Berkas:Efirojobcomposermenu.png|nirbing|300x300px|al=]]
=====Membuka Job Composer dan Memilih Template Job=====
*Buka menu '''<code>Jobs</code>''' > '''<code>Jobs Composer</code>''' pada dashboard EFIRO.
*Pilih '''<code>New Job</code>''' > '''<code>From Template</code>'''
[[Berkas:Efirojobcomposermenu.png|nir|jmpl|Menu '''<code>Jobs</code> > <code>Jobs Composer</code>''']][[Berkas:Jcnewjobmarked.png|al=|nir|jmpl|220x220px|Menu '''<code>New Jobs</code>''' > '''<code>From Template</code>''']]
|-
|-
|'''2'''
|'''2'''
|Pilih '''<code>New Jobs</code> > <code>From Template</code>'''
|[[Berkas:Jcselecttemplate3.png|nirbing|600x600px]]
[[Berkas:Jcnewjobmarked.png|al=|nirbing|180x180px]]
*PIlih template software yang diinginkan.
*Isi atau ganti kolom '''<code>Job Name</code>''' sesuai keinginan user.
*Apabila sudah selesai, klik '''<code>Create New Job</code>'''.
|-
|-
|'''3'''
|'''3'''
|[[Berkas:Jcselecttemplate3.png|al=|nir|jmpl|Pilih template software komputasi yang diinginkan. Isi atau ganti <code>'''Job Name'''</code> sesuai keinginan user, kemudian klik <code>'''Create New Job'''</code>.|400x400px]]
|
=====Menyiapkan File Komputasi=====
[[Berkas:Jcjoboption3.png|nirbing|600x600px]]
 
Gunakan menu <code>'''Edit Files'''</code> untuk upload file komputasi yang dibutuhkan.
*Laman Edit Files juga dapat melakukan download / edit / rename / delete file.
*Fitur upload pada Edit Files mempunyai limit kapasitas '''2GB per file'''.
**Gunakan [[Upload File dengan Aplikasi FTP|'''aplikasi FTP''']] untuk upload file tunggal diatas 2GB.
Gunakan menu '''<code>Open Terminal</code>''' apabila membutuhkan terminal.
|-
| rowspan="2" |'''4'''
|
=====Melengkapi Submit Script =====
Submit Script adalah "formulir" untuk menjalankan job komputasi user.
*Lengkapi Submit Script melalui menu '''<code>Open Editor</code>'''.
*Ikuti petunjuk NOTES di dalamnya.
*Jangan lupa klik <code>'''Save'''</code> setiap sekali mengubah script.
[[Berkas:Jceditor3.png|al=|nirbing|500x500px]]
|-
|
{| class="wikitable"
|-
! colspan="5" |Keterangan tambahan
|-
|-
|'''4'''
| colspan="5" |
|[[Berkas:Jcjoboption3.png|nirbing|600x600px]]
*'''Untuk akun perseorangan dengan Kredit Core Hour:'''
Gunakan menu '''<code>Edit Files</code>''' untuk upload file yang dibutuhkan'''.'''
**SLURM akan menahan job apabila:
*Laman Edit Files juga dapat melakukan view / download / edit / rename / delete file.
***ntasks * time (jam) lebih besar dari sisa CPU Core Hour user.
*''Fitur upload pada laman Edit Files '''mempunyai batasan ukuran upload 2GB per file'''.''
***gpus * time (jam) lebih besar dari sisa GPU Hour user.
**''Gunakan [[Upload File dengan Aplikasi FTP|'''aplikasi FTP''']] apabila user hendak mengupload file tunggal diatas 2GB.''
**Cek sisa Kredit Core Hour melalui menu '''<code>Open Terminal</code>''' dan jalankan perintah:
$ '''sausage'''
[[Berkas:Jcjoboption4.png|nirbing|600x600px]]
*Info SBATCH lebih detail lihat laman [[Submit Script ALELEON Supercomputer|'''Submit Script ALELEON Supercomputer''']]
|}
|-
|-
|'''5'''
|'''5'''
|[[Berkas:Jceditor3.png|al=|nirbing|300x300px]]
|
Melalui '''<code>Open Editor</code>''', lengkapi Submit Script dengan mengganti bagian yang di tandai 4 garis miring (////).
=====Menjalankan Job Komputasi=====
Jalankan job dengan klik tombol '''<code>Submit</code>'''.


* Submit Script adalah 'formulir' untuk menjalankan job komputasi user.
*''Jangan lupa klik <code>'''Save'''</code> setiap sekali mengubah script.''
*Template ini bersifat referensi, user dapat mengubah bagian yang sekiranya perlu diubah.
*Info Submit Script lebih detail lihat laman [[Submit Script ALELEON Supercomputer|'''Submit Script ALELEON Supercomputer''']]
|-
|'''6A'''
|Jalankan job dengan klik tombol '''<code>Submit</code>'''.
[[Berkas:Jcsubmit2.png|al=|nirbing|600x600px]]
[[Berkas:Jcsubmit2.png|al=|nirbing|600x600px]]
Berikut penjelasan kolom '''<code>Status</code>,''' pantau dengan refresh halaman job''':'''
{| class="wikitable"
{| class="wikitable"
|+''Penjelasan kolom '''<code>Status</code>,''' pantau dengan refresh halaman job''
!Status
!Status
!Arti
!Arti
|-
|-
|'''<code>Not Submitted</code>'''
|Not Submitted
|Job belum pernah dijalankan.
|Job belum pernah dijalankan.
|-
|-
|'''<code>Running</code>'''
|Running
|Job berjalan.
|Job berjalan.
|-
|-
|'''<code>Queue</code>'''
|Queue
|Job mengantri dan belum berjalan. Untuk melihat detail status antrian:
|Job mengantri dan belum berjalan.
 
{| class="wikitable mw-collapsible mw-collapsed"
* Buka <code>'''Jobs > Active Jobs'''</code> pada dashboard EFIRO.
!Langkah melihat status job ketika queue
* Ubah opsi ke <code>'''Your Jobs'''</code> sesuai gambar dibawah ini.
|-
* Klik simbol '''>''' untuk melihat detail job submission.
|Buka <code>'''Jobs > Active Jobs'''</code> pada dashboard EFIRO.
* Lihat isi kolom '''Reason'''.
*Lakukan langkah sesuai gambar dibawah ini
** Arti Reason lihat laman '''[[Daftar Reason NODELIST ALELEON Supercomputer]].'''
[[Berkas:Efiroqueueedit.png|al=|jmpl|''Halaman Active Jobs. Ubah opsi '''<code>Your jobs</code>''' untuk melihat status job user saja. Klik simbol '''>''' untuk melihat status  job pending pada kolom '''Reason'''. Arti reason lihat laman '''[[Daftar Reason NODELIST ALELEON Supercomputer]].'''''|kiri]]
 
|}
[[Berkas:Efiroqueueedit.png|al=|jmpl|''Halaman Active Jobs. Ubah opsi '''<code>Your jobs</code>''' untuk melihat status job user saja. Klik simbol '''>''' untuk melihat detail job submission.''|kiri]]
|-
|-
|'''<code>Completed</code>'''
|Completed
|Job selesai berjalan.
|Job selesai berjalan.
|-
|-
|'''<code>Failed</code>'''
|Failed
|Job berhenti di tengah jalan, bisa karena di Stop atau Delete oleh user.
|Job berhenti di tengah jalan, bisa karena di Stop atau Delete oleh user.
|}
|}
|-
=====Menghentikan Job Komputasi=====
|'''6B'''
Untuk menghentikan job yang tengah berjalan, klik tombol '''<code>Stop</code>'''.
|Apabila ingin menghentikan job yang tengah berjalan, klik tombol '''<code>Stop</code>'''.
 
[[Berkas:Stop.png|nirbing|600x600px]]
[[Berkas:Stop.png|nirbing|600x600px]]
|-
|-
|'''7A'''
|'''6A'''
|Hasil output job dapat dilihat pada kolom '''<code>Folder Contents</code>''' atau membuka halaman '''<code>Edit Files</code>.'''[[Berkas:Jcfoldercontentsedit.png|al=|nir|jmpl|User dapat melihat semua file output yang keluar di kolom '''<code>Folder Contents</code>'''.]][[Berkas:Jcjoboption3.png|nir|jmpl|atau dengan membuka menu '''<code>Edit Files</code>'''.]]
|
=====Melihat Output Komputasi=====
User dapat melihat output file komputasi pada kolom '''<code>Folder Contents</code>'''
*Atau dengan membuka '''<code>Edit Files</code>'''
[[Berkas:Jcfoldercontentsedit.png|al=|nir|jmpl|Kolom '''<code>Folder Contents</code>'''.]]
|-
|-
|'''7B'''
|'''6B'''
|User dapat '''menjalankan ulang ruang job yang sama''' dengan mengklik kembali tombol '''<code>Submit</code>'''.
|User dapat '''menjalankan ulang ruang job yang sama''' dengan mengklik kembali tombol '''<code>Submit</code>'''.
|}
|}

Revisi per 12 Januari 2024 11.58

Halaman ini menjelaskan tutorial web EFIRO: layanan web service untuk menggunakan ALELEON Supercomputer.

1 | Login Web EFIRO

Sebelum login, user harus terhubung ke jaringan VPN ALELEON Supercomputer.

2 | Halaman Dashboard EFIRO

Efiromenubarbig3.png

Setelah login, user masuk ke halaman dashboard EFIRO yang berada di Login Node. Berikut adalah daftar menu beserta penjelasannya:

Daftar Menu Dashboard EFIRO
Files > Home Directory
  • Menampilkan isi direktori HOME user.
  • User dapat melakukan manajemen file seperti upload, download, copy, rename, delete, dll.
Halaman Home Directory dan menu manajemen file
Jobs > Job Composer
Halaman Job Composer
Jobs > Active Jobs
  • Menampilkan status dan antrian job komputasi semua user yang sedang berjalan.
Halaman Active Jobs. Terdapat dua opsi yaitu All Jobs untuk melihat antrian semua job dan Your jobs untuk melihat status job user saja.
Interactive Apps
  • Menampilkan daftar sesi interaktif untuk menjalankan komputasi seperti sesi Jupyter atau virtual desktop.

My Interactive Sessions

  • Menampilkan daftar sesi interaktif user yang sedang aktif dan sudah selesai.
Clusters > Aleleon Shell Access
  • Halaman terminal Linux (shell) ALELEON Supercomputer. Untuk kegiatan yang membutuhkan terminal.
Terminal ALELEON Supercomputer

3 | Menjalankan Komputasi ke Compute Node via Job Composer

Pada web EFIRO, user menjalankan job komputasi ke Compute Node melalui menu Job Composer yang memvisualisasikan penggunaan program manajemen atau scheduler SLURM.

Tutorial Spesifik per Software Komputasi

User dapat melihat tutorial menjalankan komputasi masing-masing software komputasi di laman Daftar Software Komputasi dan Tutorial Penggunaan:

Daftar Software Komputasi dan Tutorial Penggunaan

Tutorial Umum

Berikut adalah tutorial umum menggunakan halaman Job Composer (klik Expand atau Kembangkan):

Langkah Menggunakan Job Composer

Efirojobcomposer3.png

1
Membuka Job Composer dan Memilih Template Job
  • Buka menu Jobs > Jobs Composer pada dashboard EFIRO.
  • Pilih New Job > From Template
Menu Jobs > Jobs Composer
Menu New Jobs > From Template
2 Jcselecttemplate3.png
  • PIlih template software yang diinginkan.
  • Isi atau ganti kolom Job Name sesuai keinginan user.
  • Apabila sudah selesai, klik Create New Job.
3
Menyiapkan File Komputasi

Jcjoboption3.png

Gunakan menu Edit Files untuk upload file komputasi yang dibutuhkan.

  • Laman Edit Files juga dapat melakukan download / edit / rename / delete file.
  • Fitur upload pada Edit Files mempunyai limit kapasitas 2GB per file.

Gunakan menu Open Terminal apabila membutuhkan terminal.

4
Melengkapi Submit Script

Submit Script adalah "formulir" untuk menjalankan job komputasi user.

  • Lengkapi Submit Script melalui menu Open Editor.
  • Ikuti petunjuk NOTES di dalamnya.
  • Jangan lupa klik Save setiap sekali mengubah script.

Keterangan tambahan
  • Untuk akun perseorangan dengan Kredit Core Hour:
    • SLURM akan menahan job apabila:
      • ntasks * time (jam) lebih besar dari sisa CPU Core Hour user.
      • gpus * time (jam) lebih besar dari sisa GPU Hour user.
    • Cek sisa Kredit Core Hour melalui menu Open Terminal dan jalankan perintah:
$ sausage

Jcjoboption4.png

5
Menjalankan Job Komputasi

Jalankan job dengan klik tombol Submit.

Penjelasan kolom Status, pantau dengan refresh halaman job
Status Arti
Not Submitted Job belum pernah dijalankan.
Running Job berjalan.
Queue Job mengantri dan belum berjalan.
Langkah melihat status job ketika queue
Buka Jobs > Active Jobs pada dashboard EFIRO.
  • Lakukan langkah sesuai gambar dibawah ini
Halaman Active Jobs. Ubah opsi Your jobs untuk melihat status job user saja. Klik simbol > untuk melihat status job pending pada kolom Reason. Arti reason lihat laman Daftar Reason NODELIST ALELEON Supercomputer.
Completed Job selesai berjalan.
Failed Job berhenti di tengah jalan, bisa karena di Stop atau Delete oleh user.
Menghentikan Job Komputasi

Untuk menghentikan job yang tengah berjalan, klik tombol Stop.

Stop.png

6A
Melihat Output Komputasi

User dapat melihat output file komputasi pada kolom Folder Contents

  • Atau dengan membuka Edit Files
Kolom Folder Contents.
6B User dapat menjalankan ulang ruang job yang sama dengan mengklik kembali tombol Submit.

4 | Sesi Interaktif EFIRO

Web EFIRO mempunyai fitur sesi komputasi interaktif berbasis GUI seperti IDE dan virtual desktop melalui menu Interactive Apps. Silahkan lihat daftar sesi interaktif EFIRO berikut:

Sesi Interaktif ALELEON Desktop

Aleleondesktop.png

ALELEON Desktop adalah sesi virtual desktop. Berikut adalalah langkah memulai sesi ALELEON Desktop (klik Expand atau Kembangkan):

Memulai Sesi Interaktif ALELEON Desktop
0 Bagi akun perseorangan, disarankan untuk mengecek sisa Core Hour sebelum menjalankan sesi interaktif.

Shellaccess.png

  • Buka terminal melalui menu Clusters > Aleleon Shell Access.
  • Jalankan perintah
$ sausage 
1 Buka menu dashboard EFIRO Interactive Apps > ALELEON Desktop

Efirojupyternotebooklab.png

2 Isi formulir sesi ALELEON Desktop dengan panduan berikut:
  • Partition
    • pilih salah satu sesuai keinginan user:
      • Torti: sistem CPU
      • Tilla: sistem GPU dengan RTX 3090
  • Number of CPU Cores
    • Alokasi jumlah core CPU yang akan digunakan
    • Minimal: 1, maksimal: 32
  • Number of GPU
    • Kosongkan apabila memilih Partition Torti
    • Isi 1 apabila memilih Partition Tilla
  • Number of hours
    • Durasi sesi ALELEON Desktop dalam satuan jam, isi sesuai keinginan user
    • Minimal: 1, maksimal: 72
3 Apabila sudah selesai, klik Launch.
  • User akan diarahkan ke halaman My Interactive Sessions.
  • Tunggu hingga sesi ALELEON Desktop user siap diakses.
Perhatian:

Sesi akan tertahan di antrian apabila:

  • Number of CPU cores * Number of Hour yang dialokasikan lebih besar dari sisa CPU Core Hour user.
4 Apabila status sudah menunjukkan Running, klik Launch Aleleon Desktop.
  • User dapat mengatur kualitas gambar ALELEON Desktop melalui slider Compression dan Image Quality.
ALELEON Desktop menunjukkan status Running.
Perhatian:
  • Sistem mulai menghitung Core Hour saat status sesi ALELEON Desktop menunjukkan running.
5A User dapat menghentikan sesi ALELEON Desktop yang sedang berjalan dengan klik tombol Delete
Klik tombol Delete untuk menghentikan sesi ALELEON Desktop yang sedang berjalan
5B User dapat kembali mengunjungi halaman sesi My Interactive Sessions melalui menu di dasboard EFIRO.

Interactivesession.png

Sesi Interaktif Jupyter (Notebook dan Lab)

Jupyterefiro.png


EFIRO menyediakan sesi interaktif Jupyter untuk versi Notebook dan Lab.

ALELEON Supercomputer menyediakan tutorial spesifik sesi interaktif Jupyter untuk menjalankan kernel:

5 | Support dan Laporan Kendala Penggunaan

Apabila terdapat masalah teknis dalam menggunakan ALELEON Supercomputer, silahkan lapor dengan klik gambar berikut ini.

Wiki-pelaporankendala.jpg