代码贴不上来,就是遍历6w个id,请求,保存json 现在就是遍历6wid太慢了,后面的工作做完了 |
遍历6万个ID慢? 不至于吧,又不是大数据量 |
这个为毛用Python呢,shell脚本完全可以搞定啊,还是多进程的哟, |
你没说清楚,遍历6w个ID做啥类型的请求? |
慢是因为1个id请求完大概就得半秒 |
post zsbd 太慢了 |
asyncio 异步 请 |
找好代理池,用协程试试看。 |
异步快 |
你没搞懂GIL,不是Python慢,是你玩的不好 |
代码贴不上来,就是遍历6w个id,请求,保存json 现在就是遍历6wid太慢了,后面的工作做完了 |
遍历6万个ID慢? 不至于吧,又不是大数据量 |
这个为毛用Python呢,shell脚本完全可以搞定啊,还是多进程的哟, |
你没说清楚,遍历6w个ID做啥类型的请求? |
慢是因为1个id请求完大概就得半秒 |
post zsbd 太慢了 |
asyncio 异步 请 |
找好代理池,用协程试试看。 |
异步快 |
你没搞懂GIL,不是Python慢,是你玩的不好 |