<commit_before># Зміст

Це стислий зміст книги.

* [Огляд WebMagic](posts/ch1-overview/README.md)
	* [Філософія](posts/ch1-overview/philosophy.md)
	* [Архітектура](posts/ch1-overview/architecture.md)
	* [Компоненти](posts/ch1-overview/component.md)
* [Збирання](posts/ch2-install/README.md)
	* [Разом з Maven](posts/ch2-install/with-maven.md)
	* [Без Maven](posts/ch2-install/without-maven.md)
	* [Перший проет](posts/ch2-install/first-project.md)
* [Білд з сирцевого коду](posts/ch3-build-source/README.md)
	* [Отримати сирці](posts/ch3-build-source/git-repo.md)
	* [Импорт проекту](posts/ch3-build-source/import-project.md)
	* [Білд та запуск на прикладах](posts/ch3-build-source/compile-code.md)
* [Основні функції у пошукового робота](posts/ch4-basic-page-processor/README.md)
	* [Реалізація PageProcessor -а](posts/ch4-basic-page-processor/pageprocessor.md)
	* [Селективність](posts/ch4-basic-page-processor/selectable.md)
	* [Зберігання результатів](posts/ch4-basic-page-processor/results.md)
	* [Конфігурація та контроль](posts/ch4-basic-page-processor/spider-config.md)
	* [Jsoup та Xsoup](posts/ch4-basic-page-processor/xsoup.md)
	* [Монітор з JMX](posts/ch4-basic-page-processor/monitor.md)
* [Аннотації пошукача](posts/ch5-annotation/README.md)
	* [Написання Model class](posts/ch5-annotation/model.md)
	* [TargetUrl та HelpUrl](posts/ch5-annotation/targeturl.md)
	* [@ExtractBy](posts/ch5-annotation/extractby.md)
	* [@ExtractBy у Class](posts/ch5-annotation/extractby-on-class.md)
	* [Форматування результатів](posts/ch5-annotation/formatter.md)
	* [Життєвий цикл](posts/ch5-annotation/lifecycle.md)
	* [AfterExtractor](posts/ch5-annotation/after-extractor.md)
* [Налаштування компонентів](posts/ch6-custom-componenet/README.md)
	* [Кастомизація конвееру Pipeline](posts/ch6-custom-componenet/pipeline.md)
	* [Планувальник Scheduler](posts/ch6-custom-componenet/scheduler.md)
	* [Завантажувач Downloader](posts/ch6-custom-componenet/downloader.md)<commit_msg>Update SUMMARY.md<commit_after># Зміст

Це стислий зміст книги.

* [Огляд WebMagic](posts/ch1-overview/README.md)
	* [Філософія](posts/ch1-overview/philosophy.md)
	* [Архітектура](posts/ch1-overview/architecture.md)
	* [Компоненти](posts/ch1-overview/component.md)
* [Збирання](posts/ch2-install/README.md)
	* [Разом з Maven](posts/ch2-install/with-maven.md)
	* [Без Maven](posts/ch2-install/without-maven.md)
	* [Перший проет](posts/ch2-install/first-project.md)
* [Білд з сирцевого коду](posts/ch3-build-source/README.md)
	* [Отримати сирці](posts/ch3-build-source/git-repo.md)
	* [Імпорт проекту](posts/ch3-build-source/import-project.md)
	* [Білд та запуск на прикладах](posts/ch3-build-source/compile-code.md)
* [Основні функції у пошукового робота](posts/ch4-basic-page-processor/README.md)
	* [Імплементація PageProcessor -а](posts/ch4-basic-page-processor/pageprocessor.md)
	* [Послідовність `API Selectable` селекторності](posts/ch4-basic-page-processor/selectable.md)
	* [Збереження результатів](posts/ch4-basic-page-processor/results.md)
	* [Конфігурація пошукача, запуск і зупинка](posts/ch4-basic-page-processor/spider-config.md)
	* [Знайомство з інструментами вилучення - екстракцією: Jsoup та Xsoup](posts/ch4-basic-page-processor/xsoup.md)
	* [Монітор з JMX](posts/ch4-basic-page-processor/monitor.md)
* [Використання анотацій при написанні пошукача](posts/ch5-annotation/README.md)
	* [Написання класу Model](posts/ch5-annotation/model.md)
	* [TargetUrl та HelpUrl](posts/ch5-annotation/targeturl.md)
	* [@ExtractBy](posts/ch5-annotation/extractby.md)
	* [Використання @ExtractBy у классі](posts/ch5-annotation/extractby-on-class.md)
	* [Форматування результатів](posts/ch5-annotation/formatter.md)
	* [Життєвий цикл](posts/ch5-annotation/lifecycle.md)
	* [AfterExtractor](posts/ch5-annotation/after-extractor.md)
* [Налаштування компонентів](posts/ch6-custom-componenet/README.md)
	* [Кастомизація конвееру Pipeline](posts/ch6-custom-componenet/pipeline.md)
	* [Планувальник Scheduler](posts/ch6-custom-componenet/scheduler.md)
	* [Завантажувач Downloader](posts/ch6-custom-componenet/downloader.md)
{'fraction_non_alphanumeric': 0.1574957202249939, 'fraction_numerical': 0.01516263145023233, 'mean_word_length': 5.760330578512397, 'pattern_counts': {'":': 0, '<': 3, '<?xml version=': 0, '>': 3, 'https://': 0, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 4, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'dir': 'git-commits-cleaned', 'id': '5123727', 'n_tokens_mistral': 1750, 'n_tokens_neox': 1896, 'n_words': 170}