pythonからツイートの保存について – python twitter

質問:


下記のツイートを保存したいのですが上手くいきません。実行中でpython intento.py >> result.dat
を書きました。

#-*- coding: utf-8 -*-
from tweepy.streaming import StreamListener
from tweepy import OAuthHandler
from tweepy import Stream
import json

# Variables that contains the user credentials to access Twitter API
access_token = 'access_token_example'
access_token_secret = 'access_token_secret'
consumer_key = 'comsumer_srcret_example'
consumer_secret = 'consumer_secret_example'


# This is a basic listener that just prints received tweets to stdout.
class StdOutListener(StreamListener):
    def on_data(self, data):
        json_load = json.loads(data)
        texts = json_load['text']
        coded = texts.encode('utf-8')
        s = str(coded)
        print(s[2:-1])
        return True

    def on_error(self, status):
        print(status)

auth = OAuthHandler(consumer_key, consumer_secret)
auth.set_access_token(access_token, access_token_secret)
stream = Stream(auth, StdOutListener())

# This line filter Twitter Streams to capture data by the keywords:                 'python', 'javascript', 'ruby'
OKINAWA = [127.672482, 26.088887, 128.275025, 26.851451]
stream.filter(track=[u'臺灣', ],languages=['ja'], locations=OKINAWA)    

実行
[[email protected] デスクトップ]#python intento.py
0o8m3o1e
ありがとー��
2tNC9CYlGoicJz ひんすーだから少金額からやるのさ残りの口座がくみてみ👐積み上げていけば良いのさ���
�い…��ANS_AMRAI @hanaFFRK 犯すのはまえはなだけにしてください
�じ前の車のクラウン運転してる人頭悪��
python intento.py >> result.dat

デスクトップにあるファイル(result.dat)を開くと、何も表示されません。
もしやり方がわかる方いれば、教えていただけるとありがたいです。
よろしくお願いいたします。 

質問者: Fanny Zhingre

on_dataを下記のように変更して、python intento.py >> result.txtと実行してみてください


    def on_data(self, data):
        print(data[2:-1])
        return True

実行したプログラムをCTRL+Cで止めると出力されるのではないでしょうか?
この場合、print()の出力がバッファリングされているのが原因です。

以下、現象を再現できる最小のサンプルです。

test_print.py

import time

while True:
    print("a")
    time.sleep(1)

python test_print.py >> result.dat で実行して、別のコンソールからtailf result.datで出力を見ても実行中は何も出力されませんが、CTRL+Cで止めると出力されます。

解決方法

print("a", flush=True)とすればprintを呼び出したタイミングで即座に出力されるようになります。

出典

Related Posts:

NameErrorが出る – python
質問: 以下のコードを実行したいのですがエラーが出てしまいます。 解決方法を教えていただけると幸いです。 元のコードはdata-science-from-scratch/nearest_neighbors.pyにあります。 現在Pythonを学び始めたばかりなのですが、したいこととしてはk近傍方でk=1,3,5,7でどのような結果になるのか示したいと認識しています。 import math def knn_classify(k, labeled_points, new_point): """each labeled point should be a pair (point, label)""" # order the labeled ...
【Python3】Beautiful Soupについての質問 – python
質問: Beautiful Soupで <div class="hoge1"> <div class="hoge2"> <p>hogehoge</p> </div> </div> といったHTMLコードから<p>の部分を取得するにはどのようにしたら良いのでしょうか?   質問者: creamroid 下記ではいかがでしょうか。 from bs4 import BeautifulSoup html = """ <div class="hoge1"> ...
tensor flowのバージョンアップを行った結果、checkpointファイルのフォーマットが変更されている – python tensorflow
質問: tensorflowの学習モデルの出力フォーマットが以前のものとは変更されており、 model.ckptだけであったのが model.ckpt-1111.data-00000-of-000001, model.ckpt-1111.index, model.ckpt-1111.meta といった具合に3ファイルに変更されており対処に困っています。 どのckptファイルを参照するのか、またコード例が知りたいです。 ~~~下記は自分が使っているコードの一部です~~~ images_placeholder = tf.placeholder("float", shape=(None, IMG_PIXELS)) keep_prob = tf.placeholder("float") logits = inference(images_placeholder, keep_prob) sess = tf.InteractiveSession() saver = tf.train.Saver() sess.run(tf.global_variables_initializer()) saver.restore(sess, "model.ckpt") 質問者: nyannyan tensorflow r12よりcheckpointファイルのフォーマットが変更されております。 とりあえず過去フォーマットでsaveしたいのならば import tensorflow as tf from ...
jsonのtrueをTrueにしたい [クローズ済み] – python
質問: json = {"Hi":true} このHiのtrueをTrueにして論理演算できるようにしたいです。 質問者: たかなし json.dumps を使ってPythonのオブジェクトに変換できます。 >>> import json >>> d = json.loads('{"Hi":true}') >>> d {'Hi': True} 出典
tkinter の bad geometry specifier “200*100” というエラーの意味がよくわからない – python python3 tkinter
質問: このプログラムを実行しようとすると というメッセージが表示されます。 何が悪いのかよくわからないので一度Pythonをアンインストールして最新のPythonを再インストールしたのですが結果は変わりませんでした。 インストールする前のPathのチェック欄にはチェックを入れました。 すごく初歩的なことで恐縮ですが、お願いします。 質問者: 岸本真人 Kohei TAMURA 200*100ではなく、200x100ではないですかね。 tkinter の使い方は独特な所があり、色々とつまずくかも知れません。 使い方が解らないメソッドなどは help 関数などで説明を読むことができます。今回ですと、Pythonコード内で help(root.geometry) とすると、 Help on method wm_geometry in module tkinter: wm_geometry(newGeometry=None) method of ...
pythonパラメータエラーに関して(スクレイピング) – python
質問: いつもお世話になっております。 再度みなさまの知見をお借りしたく質問させていただきます。 ただいま、pyrhonでスクレイピングに挑戦をしていました。 実践しようとしているのはJRAのページの馬柱をスクレイピングしようとしていました。 url ='http://www.jra.go.jp/JRADB/accessD.html' fetched_dataframes = pandas.io.html.read_html(url) ...
異なるwebページからの情報取得を一本化したい – python
質問: 現在、Pythonを学習しています。 Google検索APIで「東京都 会社概要」と検索し、検索結果の各webページのURLを取得し、 それらのURL先をスクレイピングして会社概要を取得しようと考えています。 当たり前のことですが、各webページのhtmlの書き方が異なっていて、tableタグだったり、liタグだったりで上手く求めている情報を抽出できません。 何かアイデアがあれば教えて頂きたいです。 # コード1.googleAPI検索し、結果をjsonファイルに出力 import json import urllib.request import urllib.parse from urllib.request import urlopen QUERY = u'会社概要+東京都' key = 'KEY' cx = 'CX' NUM = 3 cseurl = 'https://www.googleapis.com/customsearch/v1?' params = ...
tensor flow をjupyter notebookで使っているんですがtensor boardが使えません。 – python tensorflow
質問: 初心者です。 tensor flow をjupyter notebookで使っているんですがtensor boardが使えません。 下記のプログラムをjupyter notebook上で打ち込んでtensorboad --logdir=/path/to/log をターミナルで打ち込みましたがうまくいきません。 教えてもらえると有難いです。 import tensorflow as tf import numpy as np import os LOG_DIR = os.path.join(os.path.dirname("__file__"), 'log') if os.path.exists(LOG_DIR) is False: os.mkdir(LOG_DIR) w ...
サイトが表示されません。 – python linux ubuntu
質問: https://github.com/blobmon/simplechan 上の掲示板をネット上に設置したのですが、ホーム画面は表示されるのですが、そこからクリックをして入ったら本来表示されるべきものが表示されません。クリックしたらこんなものが出てきます。 psycopg2.OperationalError OperationalError: FATAL: Peer authentication failed for user "simplech_role" Traceback (most recent call last) File "/root/simplechan/venv/lib/python2.7/site-packages/flask/app.py", line 2309, in __call__ return self.wsgi_app(environ, start_response) File "/root/simplechan/venv/lib/python2.7/site-packages/flask/app.py", line 2295, in ...
指定した通りに配列の要素を書き換えたい – python アルゴリズム
質問: 二次元配列の要素を、別の配列のデータに従って入れ替えたいです。 今、1つの配列に縦5横6の二次元配列があり、配列(array)の中身は全て "." で埋まっています。つまりarrayは array = [ , , , , # ←① ] となっています。 この "." を str_array 配列の数字に従って書き換えたいです。たとえば str_array が str_array ...
python3のエラー “TypeError: Tensors … that don’t all match” がわからない – python python3 tensorflow
質問: Traceback (most recent call last): File "/Users/oshikawaakinobu/anaconda3/lib/python3.6/site-packages/tensorflow/python/framework/op_def_library.py", line 458, in _apply_op_helper raise TypeError() # All types should match. TypeError During handling ...
pip installコマンドでCould not open requirements file: [Errno 2] No such file or directory:というエラーが出る – python
質問: Colaというプログラムを使って、Weiboの投稿を取得したいです。pip install colaまではうまくいきますが 下記のコマンドを打つとエラーが表示されます。 エラーがなぜ起きるかわかる方がいれば教えてください。 # pip install -r/path/to/cola/app/weibo/requirements.txt Could not open requirements file: No such file or directory: '/path/to/cola/app/weibo/requirements.txt' 質問者: ...
Twitter APIでTwitterアカウントのテーマカラーを変更するには?(PHP) – php api twitter
質問: TwitterのAPIを使ったPHPプログラムで、アカウントのテーマカラーを変更させようと、 $request = $connection->post("http://api.twitter.com/1.1/account/update_profile.json", array("profile_link_color" => "606090")); と書いたのですが、 object(stdClass)#3 (1) { => array(1) { => object(stdClass)#8 (2) { => string(31) "Sorry, that page does not exist" => ...
ループ終了後に、結果を最後にまとめて取得したい – python
質問: 質問内容が分かりづらかったので、コードや欲しい結果を具体的に書きます ・再帰と勘違いしていたので、タイトルも変更しました 最終的にやりたいこと ・このリンク先にあるコード結果を、Bottleを使用してWeb画面上に表示したい 試したこと from urllib.request import urlopen from bs4 import BeautifulSoup import datetime import random import re from bottle import route, view random.seed(datetime.datetime.now()) def getLinks(articleUrl): html = urlopen("http://en.wikipedia.org"+articleUrl) ...
pyenvを使ってpythonをインストールしようとしているのですが。。。 – python
質問: pyenvを使ってMacにPythonの環境を構築する - Qiita このサイトに従ってpyenvを使ってpythonをインストールしようとしているのですがうまくいきません。 OSはmacの10.10.1です。 上記のサイトで言う所のpyenvにパスを通す、というところまではできたのですが、 その次のpyenvでpythonをインストールすることができません。 SSL/TLSが必要と出てきたのでぐぐってみたのですがいまいちよくわかりません。 どうすれば先に進めるでしょうか よろしくお願いします。 質問者: Kazutoshi Shinoda 3100 このあたりが参考になりそう。きっと良くなります。 pyenv のインストールメモ #python #mavericks - jitsu102's blog 出典

You Might Also Like

コメントを残す

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です