大數據挖掘分析平臺和產品的建設。

工作職責：

獨立完成軟件系統代碼的設計與實現；

根據需求完成設計，代碼編寫，調試，測試和維護；

使用Python 語言對后臺業務邏輯進行開發以及維護；

能根據實際需求，利用前沿第三方框架，如 Django、Flask等,實現各種功能。

職位要求：

能夠在 Unix/Linux進行服務器的開發；

精通Python語言；

精通MySQL/PostgreSQL數據庫；

具有良好的溝通能力、團隊合作精神、優秀的分析問題和解決問題的能力。

優先條件：

熟悉PEP8編程規范；

熟悉網頁爬取/數據挖掘/數學建模/算法,熟悉Scrapy等相應的開源組件；

有良好的設計能力，熟悉常用的設計模式和設計原則。

1、參與爬蟲系統的數據抓取架構設計與開發；
2、負責網頁信息抽取、數據清洗等研發和優化工作；
3、參與爬蟲核心算法的策略優化研究，提升網頁抓取的效率和質量。

任職要求：
1、工作認真細致踏實，學習能力強，以解決技術難題為樂趣，有想法，敢于挑戰；
2、熟練使用Python編程語言；
3、有網絡爬蟲、網頁去重、網頁信息抽取等相關經驗者優先；
4、精通Mysql數據庫開發，有對復雜Sql語句和存儲過程等的開發與優化經驗，有大數據量、高并發訪問處理經驗尤佳；
5、有大數據領域工作經驗者優先。

轉載于:https://www.cnblogs.com/ITniu/p/5779934.html

總結

以上是生活随笔為你收集整理的python后端工程师 数据爬虫的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。