Memahami Cara Kerja Learning Rate Scheduler pada Pytorch

By | June 5, 2024

265 ViewsMetode lr_scheduler digunakan untuk menyesuaikan kecepatan pembelajaran untuk pengoptimal. sementara model pelatihan bisa kita ubah sesuai dengan kecepatan pembelajaran, misalnya pada tahap awal pelatihan, kita memerlukan kecepatan pembelajaran yang sedikit lebih tinggi daripada kondisi selanjutnya. jika pembelajaran kita terlalu sedikit maka model akan membutuhkan banyak waktu untuk dilatih, dan jika kecepatan pembelajaran tinggi pada… Read More »

Stacer System Optimizer & Monitoring

By | May 21, 2024

408 ViewsStacer adalah aplikasi open-source yang dirancang untuk mengoptimalkan dan memantau kinerja sistem operasi Linux. Aplikasi ini menawarkan berbagai fitur yang membantu pengguna untuk mengelola dan mempercepat sistem mereka. Beberapa fitur utama Stacer meliputi: Pembersihan Sistem (System Cleaner): Membersihkan file yang tidak diperlukan seperti cache, log, dan file temporer untuk membebaskan ruang disk. Manajemen Startup:… Read More »

Mencoba Kinerja Model VGG16

By | May 20, 2024

471 ViewsVGG16 adalah salah satu arsitektur jaringan saraf tiruan yang sangat terkenal dalam bidang pengolahan citra. Dikembangkan oleh tim peneliti dari Visual Geometry Group (VGG) di Universitas Oxford pada tahun 2014, VGG16 terkenal karena kegunaannya dalam klasifikasi gambar. Arsitektur VGG16 terdiri dari total 16 lapisan (dari situlah namanya berasal). Ini terdiri dari 13 lapisan konvolusi… Read More »

System Monitoring CPU via CLI

By | May 20, 2024

451 ViewsBila kalian suka tampilan task manager – system monitoring berbasis CLI, kalian bisa menggunakan https://github.com/aksakalli/gtop sudo apt-get install npm kemudian install gtop via npm npm install gtop -g terus kita panggil gtop  

This Simple Desktop Clock Looks Great on Ubuntu

By | May 19, 2024

585 Views Kalian ingin menambahkan jam ke desktop Ubuntu (atau desktop distro Linux apa pun yang menggunakan GNOME Shell)? Jika ya, pasang ekstensi Desktop Clock GNOME Shell. Jam sederhana ini menampilkan waktu dan tanggal saat ini di desktop. Kalian  bisa memposisikan ulang jam ini di mana saja di desktop, dan menyesuaikan tipografinya sesuai selera. Meskipun… Read More »

Operasi Convolution pada Pytorch – Filter – Kernel – Weight

By | May 6, 2024

558 ViewsMembahas mengenani operasi convolution yang merupakan inti dari feature extraction. Operasi konvolusi (convolution) dalam PyTorch, seperti yang biasanya dilakukan dalam jaringan saraf tiruan (neural networks), umumnya dilakukan menggunakan modul torch.nn.Conv2d untuk data 2D dan torch.nn.Conv3d untuk data 3D. Konvolusi adalah proses matematis yang melibatkan penjumlahan produk titik dari bagian-bagian tumpang tindih dari dua himpunan data.… Read More »

Test CPU benchmark Intel I5, M1, Windows dan M1

By | April 11, 2024

559 ViewsBenchmarking CPU (Central Processing Unit) adalah proses pengukuran kinerja CPU yang digunakan untuk membandingkan kinerja relatif dari CPU yang berbeda atau untuk mengukur peningkatan kinerja dari modifikasi perangkat keras atau perangkat lunak. Ada beberapa aplikasi populer yang digunakan untuk benchmark CPU. Berikut ini beberapa contoh: Cinebench: Cinebench adalah salah satu benchmark CPU yang paling populer.… Read More »

Belajar Masked Languange Model Fill Mask

By | March 22, 2024

910 ViewsMasked Language Modeling (MLM) adalah sebuah teknik dalam pemrosesan bahasa alami (Natural Language Processing/NLP) di mana beberapa kata atau token dalam sebuah kalimat diubah menjadi token khusus yang disebut “mask”. Kemudian, model dilatih untuk memprediksi kata-kata asli yang tersembunyi berdasarkan konteks yang diberikan oleh kata-kata sekitarnya. Teknik ini umumnya terkait dengan model berbasis transformer… Read More »

huggingface trainer error PermissionError

By | March 18, 2024

1,363 Viewserror ketika training di huggingface melakukan sesi training, berikut kode yang digunakan from transformers import Trainer, TrainingArguments training_args = TrainingArguments( output_dir=’modelv3′, overwrite_output_dir=True, num_train_epochs=1, #per_gpu_train_batch_size=96, save_steps=1, save_total_limit=2, push_to_hub=False, hub_private_repo = True, #use_mps_device = True #fp16=True, ) trainer = Trainer( model=model, args=training_args, data_collator=data_collator, #use_seedable_sampler= False, train_dataset=dataset) #prediction_loss_only=True,) trainer.train() terjadi error ketika mengubah nama folder yaitu PermissionError:… Read More »

Latar Belakang dan Sejarah BERT

By | March 17, 2024

943 ViewsGoogle pertama kali memperkenalkan model transformer pada tahun 2017. Pada saat itu, model bahasa utamanya menggunakan jaringan saraf rekuren (RNN) dan jaringan saraf konvolusional (CNN) untuk menangani tugas pemrosesan bahasa alami (NLP). CNN dan RNN merupakan model yang kompeten, namun, mereka memerlukan urutan data yang tetap untuk diproses. Model transformer dianggap sebagai perbaikan yang… Read More »