获得徽章 9
掘友们,请教一个python问题。我现在做的一个项目中,需要临时存储500万左右的key-value数据,每天会对这key-value进行获取和更新。这个数据是存储在redis中好,还是在Python中用一个全局的dict变量来存储呢?
19
连续签到几个月,又抽到了掘金贴纸,属实非酋了,有一样的掘友吗😂😂
评论
请教诸位大神一个scrapy爬虫问题。当采用异步爬取时,在pipelines中我定义了两个class实现两个功能,一个是数据格式转换,一个是插入mysql。现在是希望插入mysql时,接收到的item是全部的,而不是一个的,即实现item的批量插入,请问如何设置呢?
评论
下一页
个人成就
文章被点赞 2
文章被阅读 3,692
掘力值 75
收藏集
10
关注标签
14
加入于