<jupyter_start><jupyter_text>Нормировка  Получение данных<jupyter_code>fileIn = "Data/e_1_SiO2_Al2O3.dat" # Входной файл
fileOut = "Data/n_1_SiO2_Al2O3.dat" # Выходной файл<jupyter_output><empty_output><jupyter_text>Считываем данные из файла fileIn.<jupyter_code>data = pd.read_csv(fileIn, index_col=0, dtype=np.double)
data.head()
data.plot();<jupyter_output><empty_output><jupyter_text>Нормировка<jupyter_code>normalized = normalization.normalize(data, 100, 600)
normalized.plot();<jupyter_output><empty_output><jupyter_text>Экспорт данных Экспортируем призводные от данных в файл fileOut.<jupyter_code>normalized.to_csv(fileOut)<jupyter_output><empty_output>
{'fraction_non_alphanumeric': 0.11649016641452345, 'fraction_numerical': 0.0226928895612708, 'mean_word_length': 11.980392156862745, 'pattern_counts': {'":': 0, '<': 17, '<?xml version=': 0, '>': 17, 'https://': 0, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'chain_length': '4', 'dir': 'jupyter-structured-clean-dedup', 'id': '649909', 'license': 'MIT', 'n_tokens_mistral': 299, 'n_tokens_neox': 301, 'n_words': 31, 'path': 'Examples/3.0.2 - Normalization.ipynb', 'repo_name': 'deverte/IRSorption', 'size': '661'}