непредвиденная ошибка аргумент ожидания предела на скрипт tweepy python - PullRequest
Новая
       9

непредвиденная ошибка аргумент ожидания предела на скрипт tweepy python

0 голосов
/ 23 февраля 2019

Я работал с этим скриптом twitter python несколько месяцев назад, и он работал.Я не знаю, что я мог случайно изменить, но теперь у меня появляется сообщение об ошибке:

Я получил

строка 32, в api = tweepy.API (auth, wait_on_rate_limit= True, wait_on_rate_limit_notify = True) TypeError: init () получил неожиданный аргумент ключевого слова 'wait_on_rate_limit'

ошибка при запуске этого сценария.

Может кто-нибудь помочья понимаю почему?Большое спасибо! 

#!/usr/bin/python
# -*- coding: utf-8 -*-
# vim: tabstop=4 expandtab shiftwidth=4 softtabstop=4


import tweepy
from tweepy import OAuthHandler
import getopt
import json
import time
import os
import sys

# Vecteurs d'accreditation a renseigner
# apres creation dans le gestionnaire d'applications Twitter 
# cf : https://apps.twitter.com/
consumer_key = ""
consumer_secret = ""
access_token = ""
access_token_secret = ""

# Constantes
maxTweets = 10000000   # Nombre de tweet max a recuperer
tw_block_size = 100    # Nombre de Tweet par requete
sinceId = None         # Recuperation des tweets du plus recent au plus ancien

auth = OAuthHandler(consumer_key, consumer_secret)
auth.set_access_token(access_token, access_token_secret)
api = tweepy.API(auth, wait_on_rate_limit=True, wait_on_rate_limit_notify=True)

def usage():
    """
    Display usage
    """
    sys.stderr.write( "Usage: collect.py -s <hashtag> | --search=<hashtag>\n"+
                      "                 [-o <output-dir> | --output-dir=<output-dir>]\n"+
                      "                 [-m <max-id> | --maxid=<max-id>]\n")

def main(argv):
    """
    Collecte des tweets associe a un hashtag.
    """
    tweetCount = 0
    search_query = None
    max_id = -1L
    output_dir = "."

    try:
        opts, args = getopt.getopt(argv, "ho:s:m:", ["help","output-dir=","search=","maxid="])
    except getopt.GetoptError:
        usage()
        sys.exit(1)

    for o, a in opts:
        if o in ("-h", "--help"):
            usage()
            sys.exit(0)
        if o in ("-s", "--search" ):
            search_query = a
        if o in ("-o", "--output-dir" ):
            output_dir = a
        if o in ("-m", "--maxid" ):
            max_id = long(a)

    if not search_query:
        usage()
        sys.exit(2)

    print("Parametres de la collecte :")
    print(" - Hashtag    : {0}".format(search_query))
    print(" - Repertoire : {0}".format(output_dir))
    print(" - Max ID     : {0}".format(max_id))
    print("")

    if not os.path.exists(output_dir):
        os.makedirs(output_dir)

    while tweetCount < maxTweets:
         try:
             if (max_id <= 0):
                 if (not sinceId):
                     new_tweets = api.search(q=search_query, count=tw_block_size)
                 else:
                     new_tweets = api.search(q=search_query, count=tw_block_size, since_id=sinceId)

             else:
                 if (not sinceId):
                     new_tweets = api.search(q=search_query, count=tw_block_size, max_id=str(max_id - 1))
                 else:
                     new_tweets = api.search(q=search_query, count=tw_block_size, max_id=str(max_id - 1), since_id=sinceId)

             if not new_tweets:
                 print("Collecte terminee.")
                 break
             for tweet in new_tweets:
                 day = tweet.created_at.strftime('%Y-%m-%d')
                 with open( "%s/%s_tweets.json" % (output_dir, day), 'a') as f:
                     f.write(json.dumps(tweet._json))
                     f.write('\n')
             tweetCount += len(new_tweets)
             print("{0} tweets téléchargés".format(tweetCount))
             max_id = new_tweets[-1].id
         except tweepy.TweepError as e:
             print("Une erreur est intervenue. Pour poursuivre le processus de collecte, relancer la commande suivante :")
             print("python collect.py -s \"{0}\" -o \"{1}\" -m \"{2}\"".format(search_query, output_dir, max_id))
             print("")
             print("Error : " + str(e))
             break

if __name__ == "__main__":
    main(sys.argv[1:])

1 Ответ

0 голосов
/ 26 февраля 2019

Этот скрипт отлично работает для меня с Python 2.7.15 и Tweepy 3.7.0, убедитесь, что вы используете последнюю версию Tweepy.Ваша ошибка может быть связана со старой версией Tweepy, как указано здесь: TypeError: __init __ () получил неожиданный аргумент ключевого слова 'wait_on_rate_limit'

Чтобы проверить вашу версию Tweepy: pip show tweepy, для обновления: pip install tweepy --upgrade

Обратите внимание, что стандартный API поиска не возвращает статусы старше 10 дней.В официальной документации Twitter API упоминается это: «Имейте в виду, что поисковый индекс имеет ограничение в 7 дней», хотя практический предел, который я испытываю, составляет 10 дней.Чтобы выйти за эти пределы, вы можете использовать веб-скребок, такой как https://github.com/jonbakerfish/TweetScraper, который вообще не использует официальный API.

...