ラズパイ：Pythonでビットコイン相場をしゃべらせる

PythonのBeautifulSoup4ライブラリを使うと簡単にウェブサイトのスクレイピング（HTMLデータを取得して必要な文字や値を抜き出すこと）が出来ます。

ビットコイン相場が気になる昨今（でもないか？）ですので、今回は、bitFlyer（日本のビットコイン販売業者大手）のサイトにあるビットコイン相場の価格を取得してしゃべらせることをやってみます。

Python：coinbase.comのサイトのビットコイン価格をチェックする

以前作成したPythonのプログラム（以下）が動作しなくなったため新たに作成。プログラムに関して最終的に変数btcには、整数値としてビットコイン価格が取得される。もし、小数点以下も含めた実数で取得したい場合は、btc = int(float...

torisky.com

2019.12.16

beautifulsoup4のインストール

スクレイピングには、Pythonのライブラリbeautifulsoup4を使います。

pipでインストールできます。

pip install beautifulsoup4

または、

pip3 install beautifulsoup4

bitFlyerサイトのHTMLソースコードをみて見る

ChromeやFirefoxなら

でそのサイトのソースコード（HTML部分）を表示できます。
Pythonのbeautifulsorup4を使うと、このHTMLソースコードの中から必要な情報を簡単に取得できます。

まずはbitFlyerのサイトに移動します。

bitFlyerのサイトでは、ビットコイン購入とビットコイン売却の2種類の相場がリアルタイムで表示されています。
今回は、右側に表示されているビットコイン売却の方の価格を取得してみます。

スクレイピングしたい情報は、マウスで選択後に「選択した部分のソースを表示」（Firefoxの場合）、「検証」（Chromeの場合）などとして一部分だけ表示できる機能を使って確認します。

以下画面はFirefox

実際にbitFlyerのビットコイン売却価格部分を選択し右クリックして表示したソースコード

id=”bfPriceBid_1″の部分に注目します。
これをみるとビットコイン売却の価格はidの設定で「bfPriceBid_1」となっていることが分かります。
HTMLをご存知の方は分かると思いますが、idはそのサイトで1か所しか設定が出来ないため、場所の特定が出来ます。
今回は、bitFlyerのサイトのidが「bfPriceBid_1」の部分の文字列を取り出せば、ビットコイン売却の相場が取得できることになります。

Pythonからそのサイトにブラウザと偽ってアクセスする

Pythonとbeautifulsoup4で検索すれば、スクレイピングの方法はたくさん解説されていると思いますが、今回は普通にスクレイピングが出来ませんでした。
ウェブサイトによってはブラウザ以外からのアクセスを禁じているサイトもあるからです。
Pythonを使ってそのサイトにアクセスするとブラウザではないため、はじかれてしまう可能性がある、ということです。
そのためブラウザと偽ってアクセスすることにします。（偽装ですねｗ）

通常は、Pythonならurllib.request.urlopenを使って以下のようにサイトからHTMLデータを取り出すことが出来ます。

ソースを表示
印刷SyntaxHighlighterについて
1
url = "https://twitter.com/realdonaldtrump"
2
response = urllib.request.urlopen(url)

今回は、ブラウザだと偽ってアクセスするため以下のようにします。

ソースを表示
印刷SyntaxHighlighterについて
1
# ブラウザからのアクセスに偽装するためユーザエージェントを偽装
2
#       以下のエージェント文字例はMac bookでChromeブラウザを使った例
3
headers = { "User-Agent": "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36)" }
4
 
5
# HTMLデータを取得する
6
req = urllib.request.Request(url, None, headers)
7
response = urllib.request.urlopen(req)

headersの部分の文字列がユーザエージェントと言われる情報です。（やたら長い文字列ですが、たまたま自分の使っているMacBookのChromeで調べたらこんなに長くなってしまいました。実際はほかのユーザエージェント名でもOKです）

ビットコイン価格を画面に表示してみる

とりあえず、しゃべらせる前にビットコイン価格を画面に表示させてみます。

checkBTC.py

ソースを表示
印刷SyntaxHighlighterについて
1
# -*- coding: utf-8 -*-
2
 
3
'''
4
    bitFlyerのサイトのビットコイン価格をチェックして表示する
5
'''
6
import urllib.request
7
from bs4 import BeautifulSoup
8
 
9
# bitFlyerのサイトURL
10
url = "https://bitflyer.com/ja-jp/"
11
 
12
# ブラウザからのアクセスに偽装するためユーザエージェントを偽装
13
#       以下のエージェント文字例はMac bookでChromeブラウザを使った例
14
headers = { "User-Agent": "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36)" }
15
 
16
# HTMLデータを取得する
17
req = urllib.request.Request(url, None, headers)
18
response = urllib.request.urlopen(req)
19
html=response.read().decode('utf-8')
20
 
21
# HTMLをBeautifulSoupに渡して解析
22
soup = BeautifulSoup(html, 'html.parser')
23
 
24
# ビットコイン価格部分のタグから文字列を取得
25
btc = soup.find(id="bfPriceBid_1").string
26
 
27
# 文字列を整形（411,345 --> 4113451）
28
btc = btc.replace(",", "")
29
talk_string = "現在のビットコイン価格は、" + btc + "円です"
30
 
31
# 画面に表示
32
print(talk_string)

実行イメージ

現在のビットコイン価格は、413422円です

後でしゃべらせる時のことも考慮して、ビットコイン価格の「,」（カンマ）はreplace命令で削除して金額だけの文字列にしています。

AquesTalkを使ってビットコイン相場をしゃべらせてみる

ラズパイならテキストから音声合成をしてくれる無料で利用可能なAquesTalk Piというプログラムがあります。
AquesTalk Piを利用するには、以下の記事のラズパイに天気をしゃべらせるの項目を参考にインストール＆設定してください。

ラズパイ：Pythonで明日の天気をしゃべらせる

2022-01-09 管理人注記本記事で紹介しているライブドアお天気サービスAPIはすでに利用できなくなっています。そのため、本記事で紹介しているプログラムは動作しません。新しく書いた以下の記事を参考にしてください。わたしは自宅のラズパイに...

torisky.com

2018.10.19

基本的に先ほどのビットコイン相場を表示するプログラムと同じですが、AquesTalk Piへのパス設定などがありますので、AquesTalk Piをインストールしたフォルダ名に変更して利用してください。

talkBTC.py

ソースを表示
印刷SyntaxHighlighterについて
1
# -*- coding: utf-8 -*-
2
 
3
'''
4
    bitFlyerのサイトのビットコイン価格をチェックしてしゃべる
5
'''
6
import urllib.request
7
from bs4 import BeautifulSoup
8
import sys, os
9
 
10
# AquesTalkの実行パス
11
aq_pass = "sudo /home/pi2/aquestalkpi/AquesTalkPi "
12
 
13
# bitFlyerのサイトURL
14
url = "https://bitflyer.com/ja-jp/"
15
 
16
# ブラウザからのアクセスに偽装するためユーザエージェントを偽装
17
#       以下のエージェント文字例はMac bookでChromeブラウザを使った例
18
headers = { "User-Agent": "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36)" }
19
 
20
# HTMLデータを取得する
21
req = urllib.request.Request(url, None, headers)
22
response = urllib.request.urlopen(req)
23
html=response.read().decode('utf-8')
24
 
25
# HTMLをBeautifulSoupに渡して解析
26
soup = BeautifulSoup(html, 'html.parser')
27
 
28
# ビットコイン価格部分のタグから文字列を取得
29
btc = soup.find(id="bfPriceBid_1").string
30
 
31
# 文字列を整形（411,345 --> 4113451）
32
btc = btc.replace(",", "")
33
 
34
# しゃべるための文字列に変える
35
talk_string = "現在のビットコイン価格は、" + btc + "円です"
36
 
37
# 画面に表示
38
print(talk_string)
39
 
40
# しゃべる
41
cmd = aq_pass + talk_string + " | aplay"
42
result = os.popen(cmd).readline().strip()

うまくしゃべりましたか？
以上、ラズパイ：Pythonでビットコイン相場をしゃべらせるでした。