西席节送什么？Python教你挑选礼品

同理，我们也界说一个函数来模仿翻页，代码如下

def next_page(): 
    token = search() 
    num = 0 
    while num != token - 1: 
        driver.get('https://s.taobao.com/search?q={}&s={}'.format(keyword,44*num)) 
        driver.implicitly_wait(10)  #隐式守候 
        num += 1 
        drop_down() 
        get_product() 

翻页编写时，必要留意，我在代码插手了keyword，意思就是可以按照你本身的需求，爬取差异种类的商品信息。

7.将数据生涯至MongoDB

def save_to_mongo(result): 
    try: 
        if db[MONGO_COLLECTION].insert(result): 
            print('储存到MongoDB乐成') 
    except  Exception: 
        print('储存到MongoDB失败') 

8.功效展示

总结

这次用selenium爬取淘宝商品信息，代码逻辑框架如下

因为我手段有限，暂且只能实现这么多成果，下一步筹备对MongoDB储存的数据举办说明，这样就完成了从数据爬取——数据储存——数据说明一个完备的进程。

最后，祝全部的先生们：西席节快乐!

（编辑：湖南网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!