R: Perbedaan antara revisi
WilsonLisan (bicara | kontrib) (formatting menyesuaikan EOD baru) |
WilsonLisan (bicara | kontrib) (→Interactive Job Jupyter: formatting) |
||
(7 revisi perantara oleh pengguna yang sama tidak ditampilkan) | |||
Baris 45: | Baris 45: | ||
!1 | !1 | ||
|- | |- | ||
|Masuk ke terminal melalui | |Masuk ke terminal melalui '''[https://wiki.efisonlt.com/wiki/Menggunakan_ALELEON_Supercomputer_via_Terminal#Login_SSH Login SSH]''' atau | ||
{| class="wikitable" | |||
*[https://wiki.efisonlt.com/wiki/Menggunakan_ALELEON_Supercomputer_via_EFIRO#Login_Web_EFIRO '''Login ke web EFIRO'''] | | [[Berkas:Pinnedapps terminal.png|nirbing|129x129px]] | ||
Kegiatan ini tidak mengurangi Core Hour user. | | | ||
*[https://wiki.efisonlt.com/wiki/Menggunakan_ALELEON_Supercomputer_via_EFIRO#Login_Web_EFIRO '''Login ke web EFIRO''']; | |||
* Buka pinned apps '''<code>Aleleon Shell Access</code>''' | |||
|}Kegiatan ini tidak mengurangi Core Hour user. | |||
|- | |- | ||
!2 | !2 | ||
Baris 91: | Baris 94: | ||
{| class="wikitable mw-collapsible mw-collapsed" | {| class="wikitable mw-collapsible mw-collapsed" | ||
!Langkah Job Submission Terminal | !Langkah Job Submission Terminal | ||
[[Berkas:Sbatch Terminal.png| | [[Berkas:Sbatch Terminal.png|400x400px]] | ||
|- | |- | ||
!1 | !1 | ||
Baris 109: | Baris 112: | ||
! | ! | ||
|- | |- | ||
| | |Contoh template Submit Script, ikuti petunjuk NOTES didalamnya. | ||
Contoh template Submit Script, ikuti petunjuk NOTES | *''<small>Klik expand / kembangkan</small>'' | ||
{| class="wikitable mw-collapsible mw-collapsed" | {| class="wikitable mw-collapsible mw-collapsed" | ||
!Template R | !Template R | ||
Baris 216: | Baris 219: | ||
</syntaxhighlight> | </syntaxhighlight> | ||
|} | |} | ||
|- | |- | ||
| | | | ||
*''Info script lebih detail lihat [[Submit Script ALELEON Supercomputer|'''Submit Script ALELEON Supercomputer''']].'' | *''<small>Info script lebih detail lihat [[Submit Script ALELEON Supercomputer|'''Submit Script ALELEON Supercomputer''']].</small>'' | ||
*''Untuk SBATCH notifikasi email status jalannya job lihat [https://wiki.efisonlt.com/wiki/Submit_Script_ALELEON_Supercomputer#SBATCH_untuk_notifikasi_email_SLURM '''Slurm Jojo'''].'' | *''<small>Untuk SBATCH notifikasi email status jalannya job lihat [https://wiki.efisonlt.com/wiki/Submit_Script_ALELEON_Supercomputer#SBATCH_untuk_notifikasi_email_SLURM '''Slurm Jojo'''].</small>'' | ||
|- | |- | ||
!3B | !3B | ||
Baris 243: | Baris 244: | ||
|User dapat melihat status jalannya job dengan perintah: | |User dapat melihat status jalannya job dengan perintah: | ||
'''<code>$ squeue -ul $USER</code>''' | '''<code>$ squeue -ul $USER</code>''' | ||
{| class="wikitable | {| class="wikitable" | ||
! colspan="2" | | ! colspan="2" |''Kolom ST atau STATE menunjukkan status jalannya job.'' | ||
|- | |- | ||
! STATE | ! STATE | ||
Baris 286: | Baris 287: | ||
{| class="wikitable mw-collapsible mw-collapsed" | {| class="wikitable mw-collapsible mw-collapsed" | ||
!Langkah Job Submission Web EFIRO | !Langkah Job Submission Web EFIRO | ||
[[Berkas:Efirojobcomposer3.png | [[Berkas:Efirojobcomposer3.png|400x400px]] | ||
|- | |- | ||
!1 | !1 | ||
Baris 294: | Baris 295: | ||
!2 | !2 | ||
|- | |- | ||
| | |[[Berkas:New Pinnedapps jc.png|nirbing|128x128px]]Buka pinned apps '''Job Composer''' di homepage EFIRO. | ||
Pilih menu '''<code>New Job</code>''' -> '''<code>From Template</code>''' | Pilih menu '''<code>New Job</code>''' -> '''<code>From Template</code>''' | ||
Baris 303: | Baris 304: | ||
| | | | ||
{| class="wikitable" | {| class="wikitable" | ||
! colspan="2" |Pilih template | ! colspan="2" |Pilih template R yang diinginkan: | ||
|- | |- | ||
!Nama Template | !Nama Template | ||
Baris 319: | Baris 320: | ||
!4 | !4 | ||
|- | |- | ||
|Upload | |Siapkan file komputasi dan instalasi package R yang dibutuhkan. | ||
*Upload / download / edit file via menu <code>'''Edit Files'''</code> | |||
*Untuk upload file tunggal diatas 2GB gunakan [[Upload File dengan Aplikasi FTP|'''software FTP''']]. | **Untuk upload file tunggal diatas 2GB gunakan [[Upload File dengan Aplikasi FTP|'''software FTP''']]. | ||
* | *Instalasi package R di terminal melalui menu <code>'''Open Terminal'''</code>. | ||
[[Berkas:JC job menu.png|nirbing|500x500px]] | |||
|- | |- | ||
!5A | !5A | ||
|- | |- | ||
|Lengkapi '''Submit Script''' melalui tombol '''<code>Open Editor</code>''' | |Lengkapi '''Submit Script''' melalui tombol '''<code>Open Editor:</code>''' | ||
* Submit script adalah 'formulir' untuk menjalankan job komputasi. | * Submit script adalah 'formulir' untuk menjalankan job komputasi. | ||
*Ikuti petunjuk NOTES didalamnya | **Ikuti petunjuk NOTES didalamnya. | ||
*Klik '''<code>Save</code>''' setiap kali mengubah script. | *Klik '''<code>Save</code>''' setiap kali mengubah script. | ||
| | |||
[[Berkas:Jceditor3.png|al=|nirbing|400x400px]] | |||
|- | |- | ||
| | | | ||
*''Info script lebih detail lihat [[Submit Script ALELEON Supercomputer|'''Submit Script ALELEON Supercomputer''']].'' | *''<small>Info script lebih detail lihat [[Submit Script ALELEON Supercomputer|'''Submit Script ALELEON Supercomputer''']].</small>'' | ||
*''Untuk SBATCH notifikasi email status jalannya job lihat [https://wiki.efisonlt.com/wiki/Submit_Script_ALELEON_Supercomputer#SBATCH_untuk_notifikasi_email_SLURM '''Slurm Jojo'''].'' | *''<small>Untuk SBATCH notifikasi email status jalannya job lihat [https://wiki.efisonlt.com/wiki/Submit_Script_ALELEON_Supercomputer#SBATCH_untuk_notifikasi_email_SLURM '''Slurm Jojo'''].</small>'' | ||
|- | |- | ||
! 5B | ! 5B | ||
Baris 344: | Baris 345: | ||
*Spesifikasi sistem dan software komputasi. | *Spesifikasi sistem dan software komputasi. | ||
Untuk melihat limit, jalankan perintah berikut pada terminal: | Untuk melihat limit, jalankan perintah berikut pada terminal: | ||
'''$ slimit- | '''$ slimit-r''' | ||
|- | |- | ||
!6 | !6 | ||
|- | |- | ||
|Jalankan job dengan klik tombol '''<code>Submit</code>'''. | |Jalankan job dengan klik tombol '''<code>Submit</code>'''. | ||
*Pantau kolom status yang menjelaskan status jalannya job. | *Pantau kolom status yang menjelaskan status jalannya job. | ||
* Apabila ingin membatalkan job yang berjalan, klik '''<code>Stop</code>'''. | * Apabila ingin membatalkan job yang berjalan, klik '''<code>Stop</code>'''. | ||
[[Berkas:JC job runstop.png|al=|nirbing|500x500px]] | |||
{| class="wikitable | {| class="wikitable" | ||
! colspan="2" | Daftar status job: | ! colspan="2" | Daftar status job: | ||
|- | |- | ||
Baris 372: | Baris 372: | ||
|- | |- | ||
|Failed | |Failed | ||
|Job berhenti | |Job berhenti karena error atau di stop user. | ||
|- | |- | ||
| colspan="2" |'''Untuk melihat alasan queue:' | | colspan="2" |'''''Untuk melihat alasan job yang queue:'''''[[Berkas:Active Jobs detail.png|nir|jmpl|300x300px|''Buka pinned apps '''Active Jobs''' di homepage EFIRO. Ubah opsi All jobs ke '''Your Jobs'''. Klik simbol '''>''' untuk melihat status job yang pending pada kolom Reason. Arti reason lihat laman [[Daftar Reason NODELIST ALELEON Supercomputer|'''Daftar Reason NODELIST ALELEON Supercomputer''']].'']] | ||
|} | |} | ||
|- | |- | ||
Baris 384: | Baris 382: | ||
*Atau dengan membuka '''<code>Edit Files</code>''' | *Atau dengan membuka '''<code>Edit Files</code>''' | ||
[[Berkas:Jcfoldercontentsedit.png|al=|nir|jmpl|''Kolom '''<code>Folder Contents</code>'''.'']] | [[Berkas:Jcfoldercontentsedit.png|al=|nir|jmpl|''Kolom '''<code>Folder Contents</code>'''.'']] | ||
|- | |||
!8 | |||
|- | |||
|Untuk menghapus ruang job dan datanya: | |||
*Pilih ruang job yang akan dihapus. | |||
*Klik menu '''<code>Delete</code>''' | |||
[[Berkas:JC delete menu.png|nirbing|500x500px]] | |||
|- | |- | ||
!Tips | !Tips | ||
Baris 393: | Baris 398: | ||
=== '''Interactive Job Jupyter''' === | === '''Interactive Job Jupyter''' === | ||
{| class="wikitable" | {| class="wikitable mw-collapsible mw-collapsed" | ||
!Langkah Interactive Job Sesi Jupyter | !Langkah Interactive Job Sesi Jupyter | ||
[[Berkas:Efirojupyterlab.png | [[Berkas:Efirojupyterlab.png|400x400px]] | ||
|- | |- | ||
!0 | !0 | ||
Baris 405: | Baris 410: | ||
!1 | !1 | ||
|- | |- | ||
|Masuk ke terminal melalui | |Masuk ke terminal melalui '''[https://wiki.efisonlt.com/wiki/Menggunakan_ALELEON_Supercomputer_via_Terminal#Login_SSH Login SSH]''' atau | ||
{| class="wikitable" | |||
*[https://wiki.efisonlt.com/wiki/Menggunakan_ALELEON_Supercomputer_via_EFIRO#Login_Web_EFIRO '''Login ke web EFIRO'''] | | [[Berkas:Pinnedapps terminal.png|nirbing|129x129px]] | ||
Kegiatan ini tidak mengurangi Core Hour user. | | | ||
*[https://wiki.efisonlt.com/wiki/Menggunakan_ALELEON_Supercomputer_via_EFIRO#Login_Web_EFIRO '''Login ke web EFIRO''']; | |||
* Buka pinned apps '''<code>Aleleon Shell Access</code>''' | |||
|}Kegiatan ini tidak mengurangi Core Hour user. | |||
|- | |- | ||
!2 | !2 | ||
Baris 444: | Baris 452: | ||
!2 | !2 | ||
|- | |- | ||
| | | | ||
{| class="wikitable" | |||
|[[Berkas:New Pinnedapps jupyter.png|nirbing|116x116px]] | |||
|Buka pinned apps '''Jupyter''' di homepage EFIRO. | |||
|} | |||
|- | |- | ||
!3 | !3 | ||
Baris 470: | Baris 482: | ||
| colspan="2" |'''Pada akun perseorangan, sesi Jupyter tidak akan berjalan apabila:''' | | colspan="2" |'''Pada akun perseorangan, sesi Jupyter tidak akan berjalan apabila:''' | ||
*Alokasi CPU * hours > sisa CPU Core Hour | *Alokasi CPU * hours > sisa CPU Core Hour | ||
* Alokasi GPU * hours > sisa GPU | * Alokasi GPU * hours > sisa GPU HourCek sisa Core Hour dengan: | ||
# Buka menu '''<code>Clusters</code>''' '''->''' '''<code>ALELEON Shell Access</code>''' | |||
#Buka | #Jalankan perintah | ||
$ '''sausage''' | |||
|} | |} | ||
*'''Choose how to launch Jupyter''' -> Anaconda | *'''Choose how to launch Jupyter''' -> Anaconda | ||
Baris 501: | Baris 513: | ||
!6 | !6 | ||
|- | |- | ||
|Pilih Notebook R untuk memulai sesi notebook R | |Pilih Notebook R untuk memulai sesi notebook R.[[Berkas:JNkernel.png|nir|jmpl|''Gunakan Notebook R untuk menjalankan kernel R di Jupyter Notebook''|al=|281x281px]][[Berkas:Rjupyterlab.png|nir|jmpl|225x225px|''Gunakan Notebook R untuk menjalankan kernel R di Jupyter Lab'']] | ||
|- | |- | ||
!7 | !7 |
Revisi terkini sejak 22 Juli 2024 09.21
R adalah bahasa interpreter yang didesain untuk mengerjakan komputasi statistika. Pada perkembangannya, bahasa R digunakan untuk pengolahan data di bidang data science. Software R didukung oleh The R Foundation for Statistical Computing.
Modul R
Berikut adalah detail versi R yang tersedia secara global di ALELEON Supercomputer:
Versi | Nama modul R | Dukungan hardware | |||
---|---|---|---|---|---|
CPU | GPU | OMP
threading |
MPI
multi-node | ||
4.3.0 "Already Tomorrow" | R/4.3.0-GCC11.3-MKL | V | - | - | V melalui RMPI1 |
Keterangan:
- RMPI dapat dicapai dengan pemrograman R dari pihak user menggunakan wrapper Rmpi.
Langkah Menjalankan Komputasi
Terdapat 2 langkah utama:
- Memlilih modul R yang akan digunakan dan instalasi library package R apabila dibutuhkan.
- Memilih metode menjalankan komputasi -> job submission atau sesi interaktif Jupyter.
Instalasi Library Package R
Instalasi library R pada ALELEON Supercomputer dapat dilakukan dengan dua alternatif cara:
- Melayangkan permintaan instalasi package ke admin melalui email support@efisonlt.com; atau
- Melakukan instalasi mandiri di Login Node dengan langkah berikut:
Langkah instalasi mandiri Library Package R di Login Node | ||
---|---|---|
1 | ||
Masuk ke terminal melalui Login SSH atau
| ||
2 | ||
Aktifkan R dengan memuat modul versi R yang akan digunakan:
| ||
3 | ||
Jalankan R dan lakukan instalasi package dengan format perintah standar:
$ R > install.packages('nama-package-yang-akan-diinstal') Package akan terinstal di direktori HOME user. | ||
Bagi user yang pertama kali melakukan instalasi package R: | ||
Akan ada prompt untuk mengarahkan instalasi ke personal library, jawab yes.
Warning in install.packages("benchmarkme") : 'lib = "/comp/R/4.1.2-GCC10-MKL/lib64/R/library"' is not writable Would you like to use a personal library instead? (yes/No/cancel) yes Kemudian R akan meminta izin untuk membuat personal library di HOME user. Jawab yes. Would you like to create a personal library ‘~/R/x86_64-pc-linux-gnu-library/4.1’ to install packages into? (yes/No/cancel) yes |
Metode Menjalankan Komputasi
User dapat memilih metode menjalankan komputasi sesuai keinginan:
- Job submission terminal
- Berjalan di compute node melalui manajemen Slurm.
- Hanya untuk file R, file ipynb harus diubah ke R.
- Job submission web EFIRO
- Berjalan di compute node melalui manajemen Slurm via web EFIRO.
- Hanya untuk file R, file ipynb harus diubah ke R.
- Interactive job Jupyter
- Sesi IDE Jupyter Lab atau Notebook.
- Berjalan di interactive node.
Job Submission Terminal
Langkah Job Submission Terminal | ||||||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
1 | ||||||||||||||||
Login SSH ke ALELEON Supercomputer. | ||||||||||||||||
2 | ||||||||||||||||
Siapkan file komputasi dan instalasi package R yang dibutuhkan.
| ||||||||||||||||
3A | ||||||||||||||||
Buat Submit Script yaitu 'formulir' untuk menjalankan job komputasi.
| ||||||||||||||||
Contoh template Submit Script, ikuti petunjuk NOTES didalamnya.
| ||||||||||||||||
| ||||||||||||||||
3B | ||||||||||||||||
SBATCH komputasi (ntasks, mem, time, dll) mempunyai limit berdasarkan:
Untuk melihat limit, jalankan perintah berikut: $ slimit-r | ||||||||||||||||
4 | ||||||||||||||||
Jalankan job komputasi dengan perintah:
$ sbatch [nama-submit-script] Contoh: $ sbatch submit.sh | ||||||||||||||||
5 | ||||||||||||||||
User dapat melihat status jalannya job dengan perintah:
| ||||||||||||||||
Apabila user ingin menghentikan job yang berjalan, jalankan perintah:
$ scancel [job-ID] Job ID ada pada squeue diatas. contoh membatalkan job ID 231: $ scancel 231 | ||||||||||||||||
Tips | ||||||||||||||||
Apabila program R gagal selesai karena package R yang belum terinstal:
|
Job Submission Web EFIRO
Langkah Job Submission Web EFIRO | ||||||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
1 | ||||||||||||||||
Login ke web EFIRO ALELEON Supercomputer. | ||||||||||||||||
2 | ||||||||||||||||
![]() Pilih menu | ||||||||||||||||
3 | ||||||||||||||||
Job Name dan klik Create New Job
| ||||||||||||||||
4 | ||||||||||||||||
Siapkan file komputasi dan instalasi package R yang dibutuhkan.
| ||||||||||||||||
5A | ||||||||||||||||
Lengkapi Submit Script melalui tombol Open Editor:
| ||||||||||||||||
| ||||||||||||||||
5B | ||||||||||||||||
SBATCH komputasi (ntasks, mem, time, dll) mempunyai limit berdasarkan:
Untuk melihat limit, jalankan perintah berikut pada terminal: $ slimit-r | ||||||||||||||||
6 | ||||||||||||||||
Jalankan job dengan klik tombol Submit .
| ||||||||||||||||
7 | ||||||||||||||||
Lihat output file komputasi pada kolom Folder Contents
| ||||||||||||||||
8 | ||||||||||||||||
Untuk menghapus ruang job dan datanya:
| ||||||||||||||||
Tips | ||||||||||||||||
Apabila program R gagal selesai karena package R yang belum terinstal:
|
Interactive Job Jupyter
Langkah Interactive Job Sesi Jupyter | |||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|
0 | |||||||||||||
Install package IRKernel apabila pertama kali menggunakan Jupyter untuk R
| |||||||||||||
1 | |||||||||||||
Login ke web EFIRO ALELEON Supercomputer. | |||||||||||||
2 | |||||||||||||
| |||||||||||||
3 | |||||||||||||
Isi formulir untuk memulai sesi Jupyter dengan panduan berikut:
| |||||||||||||
4 | |||||||||||||
Klik tombol Launch untuk memulai sesi Jupyter.
| |||||||||||||
5 | |||||||||||||
Apabila status Running, klik tombol Connect to Jupyter .
Cancel .
| |||||||||||||
6 | |||||||||||||
Pilih Notebook R untuk memulai sesi notebook R. | |||||||||||||
7 | |||||||||||||
User dapat mengunjungi sesi Jupyter yang sedang berjalan pada:
|
Pelaporan Kendala dan Support
Apabila menjumpai masalah teknis dalam menjalankan komputasi R, silahkan lapor dengan klik gambar berikut ini.
---
Bila terdapat pertanyaan lainnya, silahkan hubungi admin EFISON melalui email:
support@efisonlt.com
Kontributor
EFISON mengucapkan terima kasih kepada para kontributor untuk pengujian R di ALELEON Supercomputer yang kemudian menjadi dasar penulisan tutorial di halaman ini:
- Tim Sadasa Academy.