Python Google API资源限制错误

我理解资源的限制，你可以等它出来再去。 所以我编写了一个代码，运行到达到限制，然后等待6分钟，再次运行，等等，只是为了测试时间限制

有时候6分钟就够了，有时候不行。我需要一个一致的方法来突破这个资源限制

counter=0
try:
    for i in range(5000): # high enough to break limit
        client.open(google_sheet).sheet1
        counter+=1
        sleep(.02)
        print counter
except Exception as e:
    print "ERROR"
    if re.search('"code": 429', str(e)): #confirms error is due to resource limit
        sleep(360)
        for i in range(5000): 
            sheets_of_months[1].sheet_object
            counter+=1
            sleep(.02)
            print counter

我让它运行，直到出现错误，等待6分钟，再次运行。打印只是为了避免无意义的等待

---

感谢阅读，感谢所有回复

谷歌建议的管理配额限制的方法是使用。我建议您（通过谷歌）查看此文档：

如果您仔细查看，您会发现不同的库可以帮助您实现指数退避：

• （不再维护，但仍然良好）

看看你的代码，使用韧性你能做的是：

import tenacity


# Wait 2^x * 0.5 seconds between each retry, up to 60 seconds
# 60 seconds afterwards.
# Stops after 30 attempts
@tenacity.retry(stop=tenacity.stop_after_attempt(30),
                wait=tenacity.wait_exponential(multiplier=0.5, max=60))
def call_with_exponential_backoof(client, google_sheet):
    client.open(google_sheet).sheet1

---

好吧，我想出来了，在仔细阅读之后，给不同的代码运行几个小时。当我注意到谷歌的帖子前后不一致时，我真的帮了大忙。但答案指出了一些我需要思考的问题

“算法的重要部分在于其指数性，而不是尝试次数。”

谷歌的医生说在16秒后停止并记录下来

所以我尝试了一些答案

在尝试重新加载页面之前，我先增加睡眠时间。20分钟甚至值得，但有时仍然不起作用。但有时30秒就足够了

我试着在睡眠时间上加上随机的秒数，以保持它与文档中建议的不同和随机，但我相信这更多的是用于联网，而不是一个程序和一张工作表进行通信，并且预计没有其他机器会干扰

我尝试更改页面，可能我打开的页面被锁定，因为我达到了资源限制

我基本上做了一个小while循环，它一次又一次地运行，当它工作时，它会打印出资源限制冷却所花的时间。我不时对这些变量进行测试，得出以下结论

你试图打开的页面永远不会锁定，没有必要切换页面，虽然它似乎对我有用一点，但这只是运气。进一步的研究证明它是无用的

有时它只会说您仍然处于极限，不管这是否是因为它在睡眠期间尝试打开文件做准备，idk。我所知道的只是20分钟的睡眠，但它仍然会说我已经到了极限

随机整数虽然对网络问题很有用，可以防止请求绑定，但对我来说不是问题。因此，多余的代码，意味着摆脱它

这个循环我平均出了30秒，有时是一分钟。但这是工作。感谢所有阅读和关注这篇文章的人。我希望我能很好地解释我的思考过程，并在某种程度上为社区提供帮助

times_page_opened=0
amount_of_seconds_iterating= 2
while True:
    counter=0 
    try:
        for i in range(5000):
            counter+=1
            if counter==2: # This confirms that it has opened a page again at least once already, meaning the limit has reset.
                print "Had to wait %s seconds" % (amount_of_seconds_iterating) # This prints the amount of seconds in the iteration that it took.
                amount_of_seconds_iterating= 2 # This just resets the iteration to 2 seconds for next time.
            client.open(google_sheet).sheet1 # This just opens the actual page.
            times_page_opened+=1
            sleep(.02)
            print times_page_opened # This helps me keep track of how many times the code has succesfully opened the page.
    except Exception as e:
        print "ERROR" # Tells me the code is waiting because it hit the error.
        amount_of_seconds_iterating*=2 # Doubles the waiting time.
        try:
            if re.search('"code": 429', str(e)): # Confirms that it is infact the resource limit error.
                sleep(amount_of_seconds_iterating)
                client.open(google_sheet).sheet1 # Attempts again to re-open the page.
        except:
            print "Double Error" 

一旦实现和简化，它看起来是这样的

def reset_limit():
    iteration= 2
    while True:
        try:
            client.open('Chem Sheet Summary Report DO NOT DELETE').sheet1
            return
        except:
            iteration*=2
            sleep(iteration)

为了使用它，我会尝试执行我将遇到的任何操作，如果它达到资源限制，它将调用reset_limit函数，该函数将仅在资源限制重置后返回，如下所示

while True:
    try:
        client.open(google_sheet).sheet1
    except Exception as e:
        if re.search('"code": 429', str(e)):
            reset_limit()

---

可悲的是，我已经阅读并实现了谷歌的指数退避，但它没有帮助，这是因为我的配额限制应该是每100秒一次。但是，当我等待超过6分钟时，它有时仍然不起作用。我已经尝试添加随机的毫秒数，遗憾的是没有区别。我尝试用一个使用坚韧的例子来改进我的答案。