Dockerを使ってBeautifulSoupの環境を構築しよう！｜自作で機械学習モデル・AIの使い方を学ぶ

Dockerとは何か、そのメリット

Dockerとは、アプリケーションをコンテナという単位で独立した環境にパッケージ化することができるオープンソースのソフトウェアです。Dockerを使うことで、アプリケーションの依存関係や環境を標準化し、開発者や運用者が同じ環境で作業できるようにすることができます。また、アプリケーションのデプロイやスケーリングも簡単に行うことができます。

BeautifulSoupとは何か、その特徴

BeautifulSoupは、HTMLやXMLなどのマークアップ言語から情報を抽出するためのPythonのライブラリです。BeautifulSoupを使うことで、HTMLやXMLなどの文書をプログラムで扱いやすい形式に変換し、情報を抽出することができます。また、BeautifulSoupは、HTMLやXMLなどの文書を解析する際に、書式が不正でも自動的に修正してくれるなど、柔軟な解析が可能です。

Dockerを使ってBeautifulSoupの環境を構築する手順

以下の手順で、Dockerを使ってBeautifulSoupの環境を構築します。

Dockerをインストールする。

$ sudo apt-get update 
$ sudo apt-get install docker.io

Dockerイメージを取得する。

$ sudo docker pull python:3.7-slim

Dockerコンテナを起動する。

$ sudo docker run -it --name beautifulsoup -v /path/to/local/folder:/app python:3.7-slim /bin/bash

BeautifulSoupをインストールする。

root@xxxxxx:/app
pip install beautifulsoup4

BeautifulSoupの基本的な使い方

以下のコードは、BeautifulSoupを使って、HTMLからタイトルタグの内容を取得する例です。

import requests
from bs4 import BeautifulSoup
url = 'https://www.example.com'
r = requests.get(url)
soup = BeautifulSoup(r.text, 'html.parser')
title = soup.title.string
print(title)

このコードを実行すると、以下のようにタイトルタグの内容が表示されます。

Example Domain

Dockerを使ったBeautifulSoupの応用例

以下のコードは、Dockerを使ってBeautifulSoupを実行する例です。

import requests
from bs4 import BeautifulSoup
url = 'https://www.example.com'
r = requests.get(url)
soup = BeautifulSoup(r.text, 'html.parser')
title = soup.title.string
print(title)

このコードをDockerコンテナ内で実行することで、環境を標準化し、他の環境でも同じ結果を得ることができます。