Columns
学习专栏
长文与备考笔记。免费部分可直接读，完整版单篇解锁后永久可读。
共 10 篇
Exam Calendar
按考试月份找专栏
专栏按年度考试月历聚合；点击考试查看相关文章，表外内容归入 12 月「其他」。
4 月
咨询工程师（投资）5 月
监理 · 建筑师 · 二建 · 二造9 月
一建 · 城乡规划 · 设备监理10 月
一造 · 中级注安 · 试验检测10.31–11.1
勘察设计注册工程师11 月
一级注册消防工程师12 月
其他Python数据分析及可视化实例之全国各城市房价分析（含数据采集）
Talk is cheap 更多案例 Python 数据采集 # !/usr/bin/env python # coding=utf-8 import re import os import requests import math imp…
Python基础及爬虫
Python基础 从三通一平开始进场Python Python对象类型之数字 Python对象类型之字符串 Python对象类型之索引与切片 Python对象类型之列表 Python对象类型之元组 Python对象类型之字典 Python对…
2023-5-5 Python requests实现知乎问题评论采集
如题，很早之前写过一个虫子失效了，所以重新整理了一下。 具体功能实现：单个问题或多个问题评论采集+保存为csv或存到mongoDB，可选。 目的：文本二创为视频。 代码：【打赏后获取完整代码压缩包】 import json from jso…
基于Fiddler Selenium Requests的万用爬虫技术
背景 上一期文章爬取了微信文章的阅读数和点赞数，于是，接着很早之前的想法，尝试实现换头输的万用爬虫技术。 Fiddler Selenium用于测试，本主在若干年前，遇到过JS动态加密网页文本的Web，最终祭出大杀器Selenium搞定，缺陷…
利用python request Selenium cookies 交互DIY（爬虫）采集器
我不是在为这个八爪鱼打广告，而是有一个由来已久的副业想法，先看看技术实现。如果你对Python的爬虫技术有一定基础，那么请看： http://chromedriver.storage.googleapis.com/index.html …
Python数据分析及可视化实例之爬虫源码（05）
1.背景介绍 （1）在注册了某网站之后，发现站内个人页面有个关于京杭大运河的征文。再加上之前，九寨沟地震第一时间机器人写了一篇通讯稿。于是我就在想，既然机器可以写通讯稿，那么是不是也可以用来写篇关于京杭大运河的征文？有个大概思路，那么就开撸…
Python数据分析及可视化实例之爬虫源码（04）
1.背景介绍 （1）接上一弹留下的作业，使用Cookies免密码登录今日头条，并针对上一节采集的URL自动POST一条回复，经测试，今日头条的回复频率过快（3条），提交按钮就挂了。所以，本文旨在说明如何进行POST，Login登录也是一个道…
Python数据分析及可视化实例之爬虫源码（03）
1.背景介绍 （1）话说今日头条在我乎挖走了‘三百勇士’，于是就想知道这些勇士中有木有练Py大法的，是不是真的勇士。本着我不入地狱，谁入地狱的精神，注册并体验了一下，我曹，这不就是微信公众号、快手、 秒拍 、斗鱼、陌陌、淘宝客网站的杂交嘛。…
Python数据分析及可视化实例之爬虫源码（02）
1.背景介绍 （1）今天有人问怎么采集这个网站；本打算讲Cookies免密登录今日头条，但一看这个网站刚好是Table表单，顺便讲一下CSV的保存也是不错的，当然Cookies还得预习一下。 （3） 源码重点掌握： Requests请求，B…
Python数据分析及可视化实例之爬虫源码（01）
1.背景介绍 （1）这是随便找的，贴吧不用headers就可以访问： 【美图】杂图_美图吧_百度贴吧 （2）原本也打算抓点妹子图，但我乎这么纯净的界面，还是别污了。 （3） 源码重点掌握： Requests请求，Re正则提取标签，Beaut…