写数据分析项目的主要流程以及用到的工具如下:

  1. 提需求

  2. 爬虫
    2.1 抓取网页文本
    urllib requests scrapy selenium
    2.2 提取内容
    正则 beautifulsoup xpath selenium
    2.3 存储
    txt csv excel mysql mongodb

  3. 数据清洗与分析 + 绘图
    numpy pandas matplotlib pyecharts

  4. PPT报告

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐