• selenium-自动化测试51job网站(MacOS + Safari)2020年10月6日


    登录 51job ,
    http://www.51job.com

    输入搜索关键词 "python", 地区选择 "杭州"(注意,如果所在地已经选中其他地区,要去掉), 
    搜索最新发布的职位, 抓取页面信息。 得到如下的格式化信息

    Python开发工程师 | 杭州纳帕科技有限公司 | 杭州 | 0.8-1.6万/月 | 04-27
    Python高级开发工程师 | 中浙信科技咨询有限公司 | 杭州 | 1-1.5万/月 | 04-27
    高级Python开发工程师 | 杭州新思维计算机有限公司 | 杭州-西湖区 | 1-1.5万/月 | 04-27

    from selenium import webdriver
    browser = webdriver.Safari()
    browser.implicitly_wait(10)
    
    # 打开51job官网
    browser.get("http://www.51job.com")
    
    # 使用Safari开发模式下的“检查元素”功能,查看各个元素的element id
    ele = browser.find_element_by_id('kwdselectid')
    ele.send_keys('python')
    
    ele = browser.find_element_by_id('work_position_click')
    ele.click()
    
    # 反选已选择的城市,定位城市部分
    eles = browser.find_elements_by_css_selector('#work_position_click_ip_location em[class=on]')
    for ele in eles:
        ele.click()
    
    # 反选已选择的城市,热门城市部分
    eles = browser.find_elements_by_css_selector('#work_position_click_center_right_list_000000 em[class=on]')
    for ele in eles:
        ele.click()
    
    # 选择自己想要选择的城市,如“杭州”
    ele = browser.find_element_by_id('work_position_click_center_right_list_category_000000_080200')
    ele.click()
    
    # 保存城市选择
    ele = browser.find_element_by_id('work_position_click_bottom_save')
    ele.click()
    
    # 点击搜索
    # div class = "ush top_wrap" 下的button
    ele = browser.find_element_by_css_selector('.ush button')
    ele.click()
    
    # 搜索结果分析
    jobs = browser.find_elements_by_css_selector('.j_joblist div[class = e]')
    
    for job in jobs:
        fields = job.find_elements_by_tag_name('span')
        strField = [field.text for field in fields]
        print(' | '.join(strField))
    
    browser.close()
  • 相关阅读:
    d3js 获取元素以及设置属性
    javascript 转义函数
    es6 对象浅拷贝的2种方法
    SwitchyOmega 代理设置
    table 设置边框
    Highcharts 配置选项详细说明
    windows环境下生成ssh keys
    vue 给组件绑定原生事件
    Vue 字面量语法 vs 动态语法
    Vue 2.0 v-for 响应式key, index及item.id参数对v-bind:key值造成差异研究
  • 原文地址:https://www.cnblogs.com/sinodragon21/p/13775641.html
Copyright © 2020-2023  润新知