双非 1 本，国贸转的 it 直接学的 Python 。目前在魔都实习，求大佬给一些技术进阶建议，或者其他个人建议。

目前自己特长：能构建基础爬虫分布式，自己造轮子，scrapy 是主攻框架能处理并识别带干扰线数字字母验证码，滑动验证码（ geetest ）。
基本的反爬手段（如字体——汽车之家论坛，价格——去哪儿网。）昨天试试水，requests 单线程爬 4w 静态数据足足 3 小时。QAQ （简单验证码反爬）自制力中等水平。目前在用 Django 搭建自己的 bolg 。刚申请了域名，在 B 站学习。搭建好了会发布

职业规划 1，爬虫工程师 2，Django 后端开发。

虽然薪水低，但很感谢现在公司的知遇之恩。

求大佬给一些技术进阶建议，或者其他个人建议。

爬虫

Python

反爬

验证码

25 条回复 • 2018-05-03 11:12:41 +08:00

rensuperk

2018-04-18 16:16:43 +08:00

刷题，进今日头条。。饿了么也行

earendil1412

2018-04-18 16:47:32 +08:00 via Android

数据结构，算法，网络协议一步一步来

yixiugegegege

2018-04-18 17:05:47 +08:00

@earendil1412 数据结构和算法一直云里雾里，有没有推荐的书籍，博客或者视频呢？大佬

starcraft

2018-04-18 17:12:04 +08:00

爬虫工程师。。。你这岗位怕不是打杂吧。是不是边自学边工作，然后半年左右让你去维护已有项目，做些基本删改，赌个五毛根本没有成长空间。

dengshuang

2018-04-18 17:19:59 +08:00

我跟你环境一样啊，it 运维（网管），不过我有 linux 运维基础，懂得操作一些数据库。
现在在学 python,会简单的使用爬虫，只是库而已，框架没深入学习。
想往 python 数据分析发展。

yixiugegegege

2018-04-18 17:28:24 +08:00

@starcraft 仔细想想，发现还有点和您描述的诡异差不过，，，那爬虫这条路需要转向嘛

yixiugegegege

2018-04-18 17:29:09 +08:00

@dengshuang 数据分析对统计学，线代啥的有要求把

LadyChunsKite

2018-04-18 17:33:04 +08:00

你去看看招聘里面，
好一点的岗位，对爬虫工程师有什么要求，对 Django 开发有什么要求，就知道要学什么了。
多搜集一点，看看有什么共通的要求。
当然，所有的一切要先把基础学好。

dengshuang

2018-04-18 17:33:37 +08:00

@yixiugegegege 那就先学习 python 爬虫，哈哈。慢慢啃后面的

dengshuang

2018-04-18 17:34:20 +08:00

@yixiugegegege 关注我共同学习哈哈

onepunch

2018-04-18 17:37:34 +08:00

勿在浮沙筑高台，如果真心想做软件这行就安心把欠下的基础补全。

nnws2681521

2018-04-18 17:39:00 +08:00 via Android

垃圾

ZX576

2018-04-18 17:39:05 +08:00

和楼主差不多的经历，说下自己从 5000 到 10000 做了哪些事情：

- 爬虫 /web(django)/gui/数据分析，什么都写，前期不一定要深入某个方向，但一定要多写
- 两本书 Fluent Python / algorithm and data structure in python
- leetcode 刷了 60 题
- 标准库文档 /django 文档 /scrapy 文档等等，能看多少看多少。

每天写够 8 小时，一年以后出来薪水 double 是没问题的。虽然仍然是 v2 垫底水平，但是你会看到希望。