エンジニアのエンジニアによるエンジニアのためのサイト
News
07/19 おすすめ情報に 『 【資格取得者速報】 Aさん 「 Microsoft Security, Compliance, and Identity Fundamentals」 』 を追加しました。
WebスクレイピングとはWebページやWebで公開されているデータについて、必要な部分を抽出する技術です。
ソフトウェアで自動化されることがほとんどですが、Webの記述形式はそのページごとで異なるため、
サイトごとに合わせプログラミングをする必要性も多々あります。
Webスクレイピングを活用すれば、手動での手間を大幅に削減することができる上、人的ミスも減ります。
同時に、使い方によっては法に触れてしまう危険性もあり得ますので、告発などされないよう十分な注意が必要です。
参考サイト: 【入門編】Webスクレイピングとは？効率的な導入方法を比較！ – PigData | ビッグデータ収集・分析・活用ソリューション (pig-data.jp)
