[武汉] [上市公司] 招 net 爬虫工程师 [薪资范围 15-20K]

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

已注册用户请登录

外包信息请发到 /go/outsourcing 节点。

不要把相同的信息发到不同的节点

这是一个创建于 1796 天前的主题，其中的信息可能已经有所发展或是发生改变。

岗位职责
1，模拟登录各电商平台下载数据（合规）

专业知识与技能要求
1，熟练使用 Fiddle （ HttpAnalyze，模拟器等）抓取网页，APP，客户端软件数据包；
2，熟练使用浏览器进行 JS 调试；
3，熟练使用 WebBrowser，CefSharp，win32 api 等类似工具组件；
4，熟悉字符验证码常用识别方式（ OCR 识别，在线打码）；
5，熟悉短信常用识别方式（短信猫）；
6，熟悉 IP 限制常用解决方案（代理 IP，拨号服务器等）；
7 、至少了解 1 种其它开发语言：如 java 、易语言、python 等；

公司：武汉福禄网络科技有限公司
沟通方式：wx:top15from

熟练

常用

识别

打码

2 条回复 2021-01-25 22:07:14 +08:00

forgottencoast

2021-01-25 20:59:43 +08:00

我在前公司写过一套非常完整的.Net 框架，大部分通过配置文件就可以实现各种模拟登录，获取数据。

navyChin

2021-01-25 22:07:14 +08:00 via Android

京东有滑动，拼多多有 crawlerInfo 算法，腾讯有 tdc 算法，天猫稍微好点，纯走 http 协议还是有点难度。