データマネジメント|データ分析・データ利活用 問25
競合他社の Web サイトに掲載されている商品の価格を、プログラムで自動的に取得して分析に使いたい。このようなスクレイピングを行うときの留意点として、最も適切なものはどれか。
正解:エ
解説
スクレイピングは、Web ページから必要な情報をプログラムで抜き出す技術です。サイトの利用規約や robots.txt によるアクセス制限を確認し、サーバに負荷をかけ過ぎないようにします。取得したデータの使い方も、著作権などに注意します。
- ア 利用規約で禁止されている場合や、サーバの業務を妨げる方法は、問題になることがあります。
- イ 短い間隔の大量アクセスは、相手のサービスを妨げるおそれがあります。
- ウ 文章や画像は著作物であることが多く、そのまま掲載すると著作権の侵害になるおそれがあります。
- エ 正解。
もう一歩深く
アは誤りで、公開されている情報でも、利用規約で自動の取得が禁止されていることがあります。イは、相手のサーバに大きな負荷をかけ、業務を妨げるおそれがあります。ウは、文章や画像には著作権があるので、そのまま掲載すると著作権の侵害になるおそれがあります。サイトが API(Application Programming Interface)でデータを提供している場合は、スクレイピングより API を使う方が確実で安全です。
当サイトのオリジナル問題です。