【用一点kafka解决问题】juejin.im
补充一种情况:
爬取的数据,返回的json或者HTML,其中几个字段没有值,除非找几个特列,不然无法在代码里直接写解析。
直接存入kafka是一种通用的做法,之后再去找到需要的数据,解析入库。
展开
评论