『昊明有态度』哪类人才和技能最受热捧？，Python爬取近10万条程序员招聘数据( 四 ) 来源：凹凸数据本文约5800字

#job_info[''公司规模''].value_counts()deffunc(x):ifx==''['少于50人']'':return''<50''elifx==''['50-150人']'':return''50-150''elifx==''['150-500人']'':return'150-500'elifx==''['500-1000人']'':return'500-1000'elifx==''['1000-5000人']'':return'1000-5000'elifx==''['5000-10000人']'':return'5000-10000'elifx==''['10000人以上']'':return''>10000''else:returnnp.nanjob_info[''公司规模'']=job_info[''公司规模''].apply(func)11）构造新数据
我们针对最终清洗干净的数据，选取需要分析的字段，做一个数据存储。
feature=[''公司名'',''岗位名'',''工作地点'',''工资水平'',''发布日期'',''学历'',''公司类型'',''公司规模'',''行业'',''工作描述'']final_df=job_info[feature]final_df.to_excel(r''G:8泰迪python_project51_job词云图.xlsx'',encoding=''gbk'',index=None)【『昊明有态度』哪类人才和技能最受热捧？，Python爬取近10万条程序员招聘数据】关于“工作描述”字段的特殊处理
由于我们之后需要针对不同的岗位名做不同的词云图处理，并且是在tableau中做可视化展示，因此我们需要按照岗位名分类，求出不同岗位下各关键词的词频统计。
importnumpyasnpimportpandasaspdimportreimportjiebaimportwarningswarnings.filterwarnings(''ignore'')df=pd.read_excel(r''G:8泰迪python_project51_jobnew_job_info1.xlsx'',encoding=''gbk'')dfdefget_word_cloud(data=https://pcff.toutiao.jxnews.com.cn/p/20200414/None,job_name=None):words=[]describe=data['工作描述'][data['岗位名']==job_name].str[1:-1]describe.dropna(inplace=True)[words.extend(i.split(','))foriindescribe]words=pd.Series(words)word_fre=words.value_counts()returnword_frezz=['数据分析','算法','大数据','开发工程师','运营','软件工程','运维','数据库','java',''测试'']foriinzz:word_fre=get_word_cloud(data=https://pcff.toutiao.jxnews.com.cn/p/20200414/df,job_name='{}'.format(i))word_fre=word_fre[1:].reset_index()[:100]word_fre[''岗位名'']=pd.Series(''{}''.format(i),index=range(len(word_fre)))word_fre.to_csv(r''G:8泰迪python_project51_job词云图bb.csv'',mode='a',indextableau可视化展示
1)热门城市的用人需求TOP10

文章图片
2）热门城市的岗位数量TOP10

文章图片
3）不同工作地点岗位数量的气泡图

文章图片
4）热门岗位的薪资待遇

文章图片
5）热门行业的薪资待遇

文章图片
6）可视化大屏的最终展示

文章图片
7）可视化大屏的“动态”展示

文章图片
说明：这里最终就不做结论分析了，因为结论通过上图，就可以很清晰地看出来。
原文链接：
https://blog.csdn.net/weixin_41261833/article/details/104924038
编辑：于腾凯
校对：洪舒越
—完—
关注清华-青岛数据科学研究院官方微信公众平台“AI数据派”及姊妹号“数据派THU”获取更多讲座福利及优质内容。