ウェブスクレイピング
ウェブスクレイピング（）とは、ウェブサイトから情報を抽出するコンピュータソフトウェア技術のこと。通常このようなソフトウェアプログラムは低レベルのHTTPを実装することで、もしくはウェブブラウザを埋め込むことによって、WWWのコンテンツを取得する。ウェブスクレイピングはユーザーが手動で行なうこともできるが、一般的にはボットやクローラ()を利用した自動化プロセスを指す。

ウェブスクレイピングは多くの検索エンジンによって採用されている、ボットを利用してウェブ上の情報にインデックス付けを行うウェブインデクシングと密接な関係がある。ウェブスクレイピングではウェブ上の非構造化データの変換、一般的にはHTMLフォーマットからデータベースやスプレッドシートに格納・分析可能な構造化データへの変換に、より焦点が当てられている。また、コンピュータソフトウェアを利用して人間のブラウジングをシミュレートするウェブオートメーションとも関係が深い。ウェブスクレイピングの用途は、オンラインでの価格比較、気象データ監視、ウェブサイトの変更検出、研究、ウェブマッシュアップやウェブデータの統合等である。
Q35127
ウェブサイト
Concept
Q8777
HTTP
Concept
Q466
WWW
Concept
Q45842
クローラ
Concept
Q11338662
ボット
UNK
None
ウェブインデクシング
UNK
Q8811
HTML
Concept
Q821080
ウェブマッシュアップ
Concept
Q665452
ウェブスクレイピング
Concept
Q665452
ウェブスクレイピング
Concept
Q665452
ウェブスクレイピング
Concept
Q665452
ウェブスクレイピング
Concept
Q665452
ウェブスクレイピング
Concept
part of
use
use
use
use
use