Adapun contoh proses preprocessing untuk pemisahan kalimat dapat dilihat pada Tabel 3.1 berikut:
Tabel 3.1 Contoh Pemisahan Kalimat
Sebuah Paragraf Hasil Pemisahan Kalimat
Malaysia memerintahkan penutupan sebagian sekolah selama 2 hari, akibat
kabut asap tebal menyelimuti kawasan Asia Tenggara. Akibat kebakaran
hutan di Indonesia. No
Kalimat
1 Malaysia memerintahkan penutupan sebagian
sekolah selama 2 hari, akibat kabut asap tebal menyelimuti kawasan Asia Tenggara
2 Akibat kebakaran hutan di Indonesia
3.4.2 Case Folding
Proses case folding adalah tahapan pemrosesan teks dimana semua teks diubah ke dalam case yang sama. Pada penelitian ini semua huruf dalam teks
dokumen diubah representasinya menjadi huruf kecil semua[6]. Adapun flowchart dari proses preprocessing case folding dapat dilihat pada Gambar 3.5 berikut:
Mulai
Ubah menjadi huruf kecil
Selesai Data hasil
pemisahan kalimat
Data hasil case
folding Cek apakah
ada huruf kapital
ada tidak
ya
Gambar 3.5 Flowchart Proses Preprocessing Case Folding
Adapun contoh proses preprocessing untuk case folding dapat dilihat pada Tabel 3.2 berikut:
Tabel 3.2 Contoh Case Folding
Sebelum Sesudah Case Folding
Malaysia memerintahkan penutupan sebagian sekolah selama 2 hari, akibat kabut asap tebal
menyelimuti kawasan Asia Tenggara malaysia memerintahkan penutupan sebagian
sekolah selama 2 hari akibat kabut asap tebal menyelimuti kawasan asia tenggara
3.4.3 Filtering
Proses filtering adalah tahapan pemrosesan teks dimana semua teks selain karakter “a” sampai “z” akan dihilangkan dan hanya menerima spasi[6]. Adapun
flowchart dari proses preprocessing filtering dapat dilihat pada Gambar 3.6 berikut:
Mulai
Hapus huruf selain “a”
sampai “z”
Selesai Data hasil
case folding
Data hasil filtering
Cek apakah ada huruf selain
“a” sampai “z” ada
tidak ya
Gambar 3.6 Flowchart Proses Preprocessing Filtering
Adapun contoh proses preprocessing untuk filtering dapat dilihat pada Tabel 3.3 berikut:
Tabel 3.3 Contoh Filtering
Sebelum Sesudah Case Folding
malaysia memerintahkan penutupan sebagian sekolah selama 2 hari, akibat kabut asap tebal
menyelimuti kawasan asia tenggara malaysia memerintahkan penutupan sebagian
sekolah selama hari akibat kabut asap tebal menyelimuti kawasan asia tenggara