如何不能保证每次都请求成功
生活随笔
收集整理的這篇文章主要介紹了
如何不能保证每次都请求成功
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
? ? ? 最近在做一個爬蟲的項目,每次請求過來之后都去爬取數據,但是有可能出現爬不成功的情況。
? ? ? 那另外開一個go進程每次爬取對應地址的信息,存入mysql。給客戶端的地址直接從mysql里面已經爬好的地址給客戶端。
? ? ?這樣保證每次爬取都會有數據。類型緩存,但是緩存不一定非要存入redis,如果數據較多存入mysql也可。
總結
以上是生活随笔為你收集整理的如何不能保证每次都请求成功的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 写文章比较正规的格式
- 下一篇: 常见套接字类型