3,201 ViewsKFold Validation merupakan cara baik untuk menghilangkan bias yang terjadi ketika bekerja untuk menguji sebuah model algoritma. Sudah banyak yang menerangkan apa itu kfold validation, tapi disini kita sedikit membahas kfold validation secara lebih mudah tentu menggunakana bahasa R. Split Dataset Split dataset merupakan cara termudah untuk membagi dataset menjadi 2 block yaitu training… Read More »
3,418 ViewsText Cleaning dengan Spelling Bahasa Indonesia – Text cleaning menggunakan library TM yang telah dibahas sebelumnya mengingatkan bahwa urutan cleaning menjadi sangat penting. Hal ini menjadi maklum kerja bahasa itu berkembang sesuai penutur, terdapat banyak istilah-istilah baru sehingga perbaikan kamus mutlak perlu dilakukan. Namun urusan stopword dan stemming tidaklah cukup! karena untuk urusan typo/salah… Read More »
3,892 ViewsText cleaning menggunakan library TM – Artikel ini kelanjutan dari https://softscients.com/2021/02/21/text-preprocessing/ yang memisahkan function pre procesing tersendiri telah dibahas juga cara membuat Term Document Matrix – https://softscients.com/2021/02/16/membuat-document-term-matrix/ serta cara menghitung Term Frequency – Inverse Document Frequency – https://softscients.com/2021/06/05/cara-menghitung-term-frequency-dan-inverse-document-frequency/ Kesemuanya menggunakan library RtextTools yang merupakan turunan dari library TM, nah artikel yang ini akan lebih… Read More »
1,678 Viewscustom metric di keras – terkadang kita butuh sebuah evaluasi atas kinerja deep machine learning sesuai dengan apa kita inginkan. Selama ini kita mengenal ada banyak metrics pengukuran yaitu apa saja??
13,048 ViewsCara menghitung term frequency dan inverse document frequency atau sering disingkat menjadi TF – IDF merupakan nilai yang penting dalam text minning. Nah dalam postingan kali ini, saya akan bahas cara mendapatkan nilai tersebut serta cara menghitung manualnya, tentunya saya anggap kalian sudah baca mengenai document term matrix membuat document term matrix Belajar Statistik… Read More »
5,175 ViewsMenggunakan R dengan RStudio untuk melakukan analisis data menjadi bagian yang kesatuan apalagi ditambah dengan ggplot sebagai plot grafiknya. Namun terkadang terjadi sedikit masalah, hal ini biasa terjadi mengingat ketika memanggil plot grafik di R kurang lengkap sehingga grafik R akan keluar terdistorsi atau bagian-bagian tertentu akan hilang (legenda, garis, dll.). Ini umumnya karena… Read More »
1,791 ViewsFormat ubyte merupakan format binary untuk menyimpan dataset yang terkompresi. Kalian tentu tahu donk dataset MNIST sebagai benchmark dalam menguji algoritma deep learning CNN. Bisa kalian peroleh image dan label nya di googleapis.com melalui link berikut
3,052 Viewsapa itu format TFRecordDataset – merupakan format binary khusus untuk tensorflow, didalam TF Record Dataset akan terdiri dari description (biasanya untuk sharing antar bahasa menggunakan format protobuffer) Sesuai penjelasan dari https://www.tensorflow.org/api_docs/python/tf/data/TFRecordDataset (kalian gunakan Tensorflow 2.0 keatas ya!) TF Record Dataset menggunakan parsing dan decoding yang dimiliknya sendiri! Itu artinya kalian wajib melakukan deklarasi untuk… Read More »
2,201 ViewsProtocol Buffers – Apakah kalian sering menggunakan beragam bahasa dalam membuat aplikasi? Kalau iya, berarti perlunya sebuah standar format serialisasi data sebagai wadah dalam melakukan sharing. Kalau dalam protokol HTTP, kita terbiasa menggunakan format JSON, XML. Bila kalian menggunakan python yaitu pickle. Namun format pickle hanya bisa dibaca untuk python! Bagaimana bila data tersebut… Read More »
1,770 ViewsSegmentation with Mobile Device – Baru-baru ini, tim kami bekerja untuk membuat aplikasi di ponsel pintar dengan sistem android. Aplikasi ini berguna untuk melakukan capture image dan melakukan classification secara onsite sehingga dibutuhkan portable device. Tentu pilihan jatuh terhadap SDK yang sudah teruji, tim kami menggunakan firebase ML sebagai core nya. Didalam contoh SDK… Read More »