Opisz dwie powszechnie stosowane metody oczyszczania danych tekstowych.
Powszechnie stosowanymi metodami oczyszczania danych tekstowych son: zamiana ciągów znakuw, tokenizacja, stemming i lematyzacja oraz wyrażenia regularne. Zamiana ciągów znaków polega na zastępowaniu określonych słów lub fraz innymi, na przyklad skrótów pełnymi wyrazami. Tokenizacja to proces dzielenia długiego ciągu tekstu na pojedyncze słowa, frazy i symbole. Stemming i lematyzacja to techniki słożące do redokcji słów do ich podstawowej formy. Wreszcie, wyrażenia regularne mogą być urzywane do identyfikowania wzorców w tekście i zastępowania ich pożądanymi wynikami.