猫步旅人的博客

GDB 调试学习总结

面试题目和思路总结

The Difference Between Git and Github.

What is the ideal growth rate for a dynamically allocated array?

代码风格整理

获取变化的User-Agent和IP代理，避免反爬虫策略

使用session或scrapy模拟登录知乎

本文主要是讲述在 scrapy 爬虫时，发现 Request 函数中的回调函数没有被调用的解决办法

本文介绍了 scrapy 的简单入门，使用 scrapy 爬取网站所有文章，文章结构如下:

1. 分析网页结构
   
2. 使用 css selector 的方法提取元素
   
3. 开始 scrapy 工程
   
4. 获取所有文章url，爬取文章数据
   
5. 下载图片
   
6. 使用 item 和 itemloader
   
7. 将数据导出到 json 格式的文件中
   
8. 将数据保存到 mysql 数据库中

阅读《ZERO TO ONE》，关于竞争的一点思考。