嘟嘟社区

python多线程


代码贴不上来,就是遍历6w个id,请求,保存json
现在就是遍历6wid太慢了,后面的工作做完了
遍历6万个ID慢? 不至于吧,又不是大数据量
这个为毛用Python呢,shell脚本完全可以搞定啊,还是多进程的哟,
你没说清楚,遍历6w个ID做啥类型的请求?

iiss 发表于 2022-1-11 23:07
遍历6万个ID慢? 不至于吧,又不是大数据量

慢是因为1个id请求完大概就得半秒

J0rmo 发表于 2022-1-11 23:08
你没说清楚,遍历6w个ID做啥类型的请求?

post zsbd 太慢了
这逼我学go啊马得

asyncio 异步 请
找好代理池,用协程试试看。
异步快
你没搞懂GIL,不是Python慢,是你玩的不好