Metin verilerini temizlemek için yaygın olarak kullanılan iki yöntemi açıklayın
Metin verilerini temizlemenin yaygın yöntemleri, dize değiştirme, tokenleştirme, köklendirme ve lemmatizasyon ve normal ifadelerdir. Dize değiştirme, belirli sözcüklerin veya tümceciklerin başkalarıyla değiştirilmesini içerir, örneğin tam sözcüklerle kısaltmalar. Simgeleştirme, kırma işlemidir. geniş bir metin dizisini tek tek sözcüklere, tümceciklere ve sembollere ayırır. Kök çıkarma ve lemmatizasyon, sözcükleri temel biçimlerine indirgemek için kullanılan tekniklerdir. Son olarak, metindeki kalıpları belirlemek ve bunları istenen çıktılarla değiştirmek için düzenli ifadeler kullanılabilir.