包含各国从2020年3月份至你下载这天的数据，包含数据爬虫，数据分析与图表处理，以及部分模型建立。童叟无欺，有任何关于代码的问题都可以私信我

基于Python的新浪微博数据爬虫.pdf

基于Python的招聘数据爬虫设计与实现.pdf

对东方财富和网易财经网站爬虫，获取个线数据并存入Mysql数据库。通过Python调用数据并进行基础金融数据分析，在Jupyter Notebook上进行展示。代码通过股票项目说明的简单修改，可以直接在Macos，Linux操作系统的服务器上直接使用。

1. 需求分析     从重庆市政府采购网自动获取所有的采购公告信息，将其项目名称和采购物资通过可读的方式展示。 2. 实现过程 分析页面布局 第一次爬取到“假网址” （1）首先，展示第一次爬取到的“假网址”。通过 xpath 匹配该 div。 （2）尝试采集当前页面的所有二级链接。 import requests from lxml import etree import json def getpage(url, headers): res = requests.get(url, headers=headers) html = etree.HTML(res.text)

智联招聘数据爬虫源码 网络爬虫源码 VB写的，采用Access数据库，值得学习。。。

手动爬取的知乎问题数据，共十万条，已做过简单清洗。 数据集格式描述如下： id | 标题 | 回答数 | 关注数 | 浏览数 | 标签 【仅供学习使用，请勿商用】

大数据-spark-分析可视化自动推荐系统，用于学习大数据，有一系列的流程分析以及实现代码，最新的jar版本

基于Qt5、pyqt5、Qt Designer开发的一款测试版爬虫小软件，有界面。数据接口api获取数据，可获取交易市场数据，可作出kline图分时图，html图由第三方开源库pyechart制作，由requests库硬爬可获取最新实时汇率等。虽然只是测试版本，很粗糙，需要不断完善。 上传目的，只为互相交流学习！ 如需正常运行，需要安装相对于的库，pip即可~ 如有不足，勿喷，仅供交流学习之用！ 谢谢！

美团，饿了么，百度外卖三大外卖平台的店铺，菜品数据爬虫源码 百度外卖： 1，TakeAwayService.java根据起始的gps坐标（百度加密后的），进行地图的重定向，用redis进行了一个深度的递归归，逻辑如下： （1）当前坐标内可获取到的商家经纬度，取最大最小经纬度组成的四点入金额redis； （2）多线程方式pop redis中的坐标做步骤1的逻辑处理，将获取的所有商家id入库； （3）当步骤二中的商家id没有获取到，或者获取到的所有商家id均落在之前已获取的商家列表中，这两种方式都将为递归的结束标志； 2，GetShopInfoByIdThread.java是获取商铺信息及店铺id补充：百度外卖因为对坐标进行了特定的加密，所以对于上述步骤1的初始坐标的录入，对地图进行了遍历方式的切割，以相隔5公里的坐标点作为起点，相互补充获取全量数据 饿了么： 主要两种方式介绍全量shopi