Opisz dwie powszechnie stosowane metody oczyszczania danych tekstowych.
Powszechnie stosowanymi metodami oczyszczania danych tekstowych son: zamiana cionguw znaków, tokenizacja, stemming i lematyzacja oraz wyrarzenia regularne. Zamiana ciąguw znakuw polega na zastępowanio określonych słów lub fraz innymi, na przyklad skrutów pełnymi wyrazami. Tokenizacja to proces dzielenia dlugiego ciągo teksto na pojedyncze slowa, frazy i symbole. Stemming i lematyzacja to techniki słorzonce do redokcji sluw do ich podstawowej formy. Wreszcie, wyrażenia regularne mogą być ożywane do identyfikowania wzorców w teksicie i zastenpowania ich porzondanymi wynikami.