<jupyter_start><jupyter_text>Loading page source code into PythonLink: https://pt.wikipedia.org/wiki/Ariquemes<jupyter_code>import requests as req
URL = 'https://pt.wikipedia.org/wiki/Ariquemes'
r = req.get(URL)
print(r.content[:2000])
from bs4 import BeautifulSoup

soup = BeautifulSoup(r.content)
print(soup.prettify())<jupyter_output><!DOCTYPE html>
<html class="client-nojs" dir="ltr" lang="pt">
 <head>
  <meta charset="utf-8"/>
  <title>
   Ariquemes – Wikipédia, a enciclopédia livre
  </title>
  <script>
   document.documentElement.className="client-js";RLCONF={"wgBreakFrames":!1,"wgSeparatorTransformTable":[",\t."," \t,"],"wgDigitTransformTable":["",""],"wgDefaultDateFormat":"dmy","wgMonthNames":["","janeiro","fevereiro","março","abril","maio","junho","julho","agosto","setembro","outubro","novembro","dezembro"],"wgRequestId":"019aec98-a4fc-49ab-9622-5c3b90d10cc5","wgCSPNonce":!1,"wgCanonicalNamespace":"","wgCanonicalSpecialPageName":!1,"wgNamespaceNumber":0,"wgPageName":"Ariquemes","wgTitle":"Ariquemes","wgCurRevisionId":59188265,"wgRevisionId":59188265,"wgArticleId":33863,"wgIsArticle":!0,"wgIsRedirect":!1,"wgAction":"view","wgUserName":null,"wgUserGroups":["*"],"wgCategories":["!Páginas com argumentos formatnum não numéricos","!Páginas com citações sem título","!Páginas com citações e URLs vazios","!Imagem loc[...]
{'fraction_non_alphanumeric': 0.20491803278688525, 'fraction_numerical': 0.038748137108792845, 'mean_word_length': 11.435185185185185, 'pattern_counts': {'":': 21, '<': 11, '<?xml version=': 0, '>': 11, 'https://': 2, 'lorem ipsum': 0, 'www.': 0, 'xml': 0}, 'pii_count': 0, 'substrings_counts': 0, 'word_list_counts': {'cursed_substrings.json': 0, 'profanity_word_list.json': 0, 'sexual_word_list.json': 0, 'zh_pornsignals.json': 0}}
{'chain_length': '1', 'dir': 'jupyter-structured-clean-dedup', 'id': '613912', 'license': 'MIT', 'n_tokens_mistral': 556, 'n_tokens_neox': 488, 'n_words': 56, 'path': 'basic_scraping/notebook1.ipynb', 'repo_name': 'LasalJayawardena/Web-Scraping-Projects', 'size': '1342'}