Author: 管理

Python独学ならTech-Joho TOP > Python用語辞典 >Pythonのandとor

>>> 1 < x and x < 3

>>> x <=  10 and 20 <= x 

>>> 1 < x and x < 3

>>> 1 < x < 3

>>> x <=  10 and 20 <= x 

>>> 10 or False
10

>>> -1 and 10 > 2
0

Python独学ならTech-Joho TOP > Python入門カリキュラム > 場合によって処理を分ける

If文とは

>や<といった演算子を使ってPythonに式を渡すと、与えられた条件式が成り立つときはTrue(真)、成立しないときはFalse(偽)が返ってきます。
if文は、この診断結果によって、プログラムの流れを変化させることができるものです。

例えば、変数suujiが2より大きいと’2より大きい’、小さいと’2より小さい’と表示するプログラムは以下になります。(下の黒い欄に1行ずついれてみてください。)

>>> suuji = 1
>>> if suuji > 2:
...   print('2より大きい')
... else:
...   print('2より小さい')
... 
'2より小さい'

if suuji > 2:を入れると、>>>となっていたところが…と変化します。
最後の(‘2より小さい’)の行のあとは、1行何もいれないままエンターキーを押して改行してください。

suujiは1なので、常に’2より小さい’が表示されるはずです。

値がその都度変わるものを使わないと、if文のありがたさはわかりません。
ユーザの入力を受け付けるinput関数を使う例をみてみましょう。

input関数の使い方はこちらに書いてあります。

>>> nyuuryoku = input('数字を入力して下さい')
>>> suuji = int(nyuuryoku)
>>> if suuji > 2:
...   print('2より大きい')
... else:
...   print('2より小さい')
... 

else

if のあとに書く、条件が成立しなかった時に、別の処理が実行させるようにするのが、elseです。
上と同じ例ですが、もう一度見て下さい。

>>> suuji = 1
>>> if suuji > 2:
...   print('2より大きい')
... else:
...   print('2より小さい')
... 
'2より小さい'

suujiという変数に代入されたのは、1です。
ifの後にある条件は、「suujiが2より大きい」です。

すると、ifのあとの条件は成立していません。
その場合、
ifのすぐ下に書いた内容ではなく、ifに続いて書いたelseの後の下に書いた内容が実行されます。

elif

elifという、elseとifをくっつけたような文もあります。

上の例を少し変えて、elifという文が真ん中辺りに増えています。
elifの下の部分が実行される条件を日本語にすると、「suujiが2以下で、もし1より大きければ」となります。

>>> suuji = 2
>>> if suuji > 2:
...   print('2より大きい')
... elif suuji > 1:
...   print('1より大きい')
... else:
...   print('1以下')
'2より小さい'

elifは、もし上に書いてある条件が当てはまらかなったら、右に書いてある条件をチェックする、という意味です。
下の例のように、elifをたくさん書くこともできます。

>>> suuji = -2
>>> if suuji > 2:  # 最初の条件
...   print('2より大きい')  
... elif suuji > 1: # 最初の条件が当てはまらかなったらチェックする条件
...   print('1より大きい')
... elif suuji > 0: # 次の条件が当てはまらかなったらチェックする条件
...   print('0より大きい')
... else:  # 上に書いてある条件が全て当ては余らなかったら
...   print('0以下')
'0以下'

この例だと、まず、suujiが2より大きいかをチェックします。(最初の条件)

当てはまらかなったら、suujiが1より大きいかをチェックします。(最初の条件が当てはまらかなったらチェックする条件)

さらに、これも当てはまらかなったら、suujiが0より大きいかをチェックします。(次の条件が当てはまらかなったらチェックする条件)

さらに、これも当てはまらかなったらelseの下に書いてある内容が実行されます。

どんどん下の条件に流れていく感じです。

andとor

ifの後には、andとorで2つの条件を書くこともできます。

>>> suuji = -2
>>> if suuji > 2 and suuji < 5 :
...   print('5と2の間') 
... else: 
...   print('5以上か、2以下')
'0以下'

くわしくはこちら(執筆中….)で解説する予定です。

<< 前へ 第9回 たくさんのデータを1つにまとめる

>> 次へ 第11回 たくさんのデータで同じ処理を繰り返す

Python独学ならTech-Joho TOP > Python用語辞典 > inputで入力を受け付ける

inputで入力を受け付ける

input関数は、その名の通り、ユーザからの入力(input)を受け付ける関数です。
まず、文字で説明するより使ったほうが理解しやすいと思います。
下の黒い欄に、”suuji = input(‘数字を入力して下さい’)”と入力してください。

>>> suuji = input('数字を入力して下さい')

すると、こんな風に、’数字を入力して下さい’と書いたウインドウがでてきます。

入力欄に’1’か何か、数字を入力してOKを押して下さい。
すると、ウインドウが閉じます。

実は、この時点で、suujiという変数に今入力した数値が代入されています。
下のように、print(suuji)と入力してエンターキーを押して下さい。

>>> suuji = input('数字を入力して下さい')
>>> print(suuji)
1

先程入力した数値が表示されます。

input関数の引数

input関数は人間(ユーザ)に入力をさせて、その値を返す関数です。
inputの引数は、入力させるときに表示する文言です。

こうすれば、’何か入力して下さい’と表示されます。

>>> input('何か入力して下さい')

こうすれば、’ああああ’と表示されます。

>>> input('ああああ')

下の黒い欄で自分で試してみてください。

input関数の戻り値

繰り返しになりますが、input関数は人間(ユーザ)に入力をさせて、その値を返す関数です。
inputの戻り値は、人間が入力した関数です。

下のコードでは、my_inputに、ユーザが入力した値を代入します。

>>> my_input = input('何か入力して下さい')
>>> print(my_input)

なので、my_inputをprintすると、ユーザが入力した文字列が表示されます。

ちなみに、input関数の戻り値は常に文字列になります。
なので、数字を入力しても、数値の文字列になってしまいます。

‘1’ * 5 は 5ではなく、文字列’1’を5こくっつけた’11111’になります。

>>> my_input = input('何か入力して下さい') # 1を入力する
>>> print(my_input * 5)
'11111'

数値として計算したいときは、int関数やfloat関数で、文字列を数値に変換しましょう。

>>> my_input = input('何か入力して下さい') # 1を入力する
>>> int(my_input) * 5
5 

intやfloat等、変数の型についてはこちらをみてください。
変数の型について/

ふつうのPythonだとウインドウはでてこない

なお、これまで、input関数を実行するとウインドウがでてきましたが、それはこのサイト上でPythonを実行しているときだけの話です。(正確に言うとBrythonをつかっているときだけ)

自分のPCにPythonをインストールして使っている場合、ウインドウはでず、単にinputの引数にしたメッセージが表示されるので、そのまま黒い画面に入力できます。こんな感じです。

>>> message = input('please input!! : ')
please input!! : はーい
>>> print(message)
'はーい'

Python独学ならTech-Joho TOP > いろいろやってみた > Pythonで、MySQL5.7のJSON型にツイートを保存してみる

取得したツイートを保存したい

前回、ツイッターから特定のキーワードで検索したツイートを取得するPythonプログラムをつくりました。

Twitterで特定のフレーズで検索して結果を表示する

このままだと、検索したツイートは目でみて確認するだけで終わりで、あとで分析することもできません。ツイートを保存する仕組みが必要です。

MySQLのJSON型を使ってみたい

保存するにはデータベースを使います。しかし、データベースを言ってもいろいろな候補があります。

候補1: MongoDB

取得できるツイートはJSON形式で、リツイートの具合などによって構造は微妙に変わります。こういうときはNoSQLで、MongoDBが最初に思い浮かびました。

ただ、MongoDBは、あまりたくさんのデータを保存するのに向いていないところがあります。やたら容量をくって、えらい目にあった経験があり、余り使いたくありません。

他にもCouchDB、Cassandraなんかもちょっと考えましたが、よく知らないのと調べるのが面倒くさかったのでやめました。

候補2: MySQL

しっかりと、列の構造を決めて、ふつうにMySQLに保存するというのも考えました。しかし、モデルを作るのがめんどくさくてやめました。

JSON型

そこで思い出したのですが、MySQLの列のデータ型で、JSON型というのがあります。

単に一つの文字列型の列にJSON文字列を突っ込むように使えますが、検索などの際、JSONのキーで検索できるようです。

一度使ってみたかったのでこれにします。

MySQL5.6の後半から使えるようになったみたいです。

参考

https://www.webprofessional.jp/use-json-data-fields-mysql-databases/
https://www.s-style.co.jp/blog/2017/06/420/

CRATE文

こうなりました。

CREATE TABLE `tweets` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `content` json NOT NULL,
  `created` datetime DEFAULT CURRENT_TIMESTAMP,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_unicode_ci;

datetime型でも、DEFAULT CURRENT_TIMESTAMPで作成時間を入れられるようになったみたいです。
http://dekokun.github.io/posts/2014-05-31.html

MySQLは5.7.21にしました。

Pythonのコード

こうなりました。

from twython import TwythonStreamer, TwythonError
import json
import config
import mysql.connector
import sys


conn = mysql.connector.connect(
    host='localhost',
    port=3306,
    user=config.MYSQL_USER,
    password=config.MYSQL_PASS,
    database='twitter_app'
)

if not conn.is_connected():
    print('could not connect to db')
    sys.exit()
conn.ping(reconnect=True)
cur = conn.cursor()


class MyStreamer(TwythonStreamer):
    def on_success(self, data):
        json_text = json.dumps(data)

        try:
            sql = "insert into tweets (content) values (%s);"
            cur.execute(sql, (json_text,))
            conn.commit()
        except Exception as err:
            conn.rollback()
            print('could not commit inserting:', json_text)
            print('error:', err)
        if 'text' in data:
            print(data['text'])

    def on_error(self, status_code, data):
        print(status_code)


try:
    stream = MyStreamer(config.APP_KEY, config.APP_SECRET, config.ACCESS_TOKEN, config.ACCESS_TOKEN_SECRET)
    stream.statuses.filter(track='AKB')

except TwythonError as e:
    print(e)

configモジュールに、MySQLのパスワードなどいろいろな定数を入れています。

使っているライブラリはmysql-connector-python-rfになりました。mysql-pythonにしようとしたら、変なエラーがでてインストールできませんでした。

$ pip install mysql-connector-python-rf

ツイートの本文だけ取り出す

SELECT
  id,
  content->"$.text" AS `text`
FROM sport_twitter_dev.tweets;

便利です。

Python独学ならTech-Joho TOP > いろいろやってみた > Twitterで特定のフレーズで検索して結果を表示するアプリ

Twitterで特定のフレーズで検索して結果を表示するアプリを作ってみました。

ライブラリ

tweepyはメンテナンスが停止したらしいのでTwthonというライブラリを使います。

Twython公式
https://github.com/ryanmcgrath/twython

Twythonを使う

tweepyについて
http://qiita.com/ogrew/items/0b267f57b8aaa24f1b73

押したキー
http://qiita.com/tobesan/items/d9f4bd543c3a85b49bb2

利用するAPI
Twitter Search
https://developer.twitter.com/en/docs/tweets/search/api-reference/get-search-tweets.html

環境

windows 10
python 3.6.2
virtualenv

準備

 virtualenv有効化

/Users/xxxxxx/.virtualenvs/djangodev/Scripts/activate

Twithonインストール

$ pip install twython

アプリ登録

https://apps.twitter.com/
アプリを登録して、APIキーとAppシークレットを取得
継続的にツイートを取得するためストリームAPIを使いたいなら、アクセストークンとアクセストークンシークレットも取得

コード

.config.py

APP_KEY = 'xxxxxxxxxxxxxxxxx'
APP_SECRET = 'xxxxxxxxxx'
ACCESS_TOKEN = 'xxxxxxxxxxxxxxxxxxxxxxxxxxxxxx'
ACCESS_TOKEN_SECRET = 'xxxxxxxxxxxxxxxxxxxxxxxxxxxxxx'

検索API使うやつ

エンターキーを押すたびに、繰り返し検索する
Search APIを利用
OAuth1が必要

search.py

from twython import Twython, TwythonError
import config

pressed = ''
twitter = Twython(config.APP_KEY, config.APP_SECRET, oauth_version=2)
ACCESS_TOKEN = twitter.obtain_access_token()
twitter = Twython(config.APP_KEY, access_token=ACCESS_TOKEN)

while pressed == '':

　　　　try:
　　　　　　　　results = twitter.search(q='プロ野球')
　　　　　　　　print('tweets num:', len(results))
　　　　　　　　print(results)
　　　　except TwythonError as e:
　　　　　　　　print(e)

　　　　pressed = input("type in enter")

print('finish')

ストリーミングAPI使うやつ

継続的にツイートを取得しフィルターする
Streamimg APIを利用
OAhth2が必要

stream.py

from twython import TwythonStreamer, TwythonError

import config

class MyStreamer(TwythonStreamer):
　　　　def on_success(self, data):
　　　　　　　　if 'text' in data:
　　　　　　　　　　　　print(data['text'])

　　　　def on_error(self, status_code, data):
　　　　　　　　print(status_code)

try:
　　　　stream = MyStreamer(config.APP_KEY, config.APP_SECRET, config.ACCESS_TOKEN, config.ACCESS_TOKEN_SECRET)
　　　　stream.statuses.filter(track='AKB48')

except TwythonError as e:
　　　　print(e)

コードはこちらからもダウンロードできます。
https://github.com/tech-joho-info/GetTweetsByPython