Python爬虫工程师面试时的常见问题
一。项目问题： 一般面试官的第一个问题八成都是问一下以前做过的项目，所以最好准备两个自己最近写的有些技术 含量的项目，当然一定要自己亲手写过的，在别的地方看的源码，就算看的再清楚，总归没有自己敲的 了解的多。以下是抽出的几点 1.你写爬虫的时候都遇到过什么反爬虫措施，你是怎么解决的 2.用的什么框架，为什么选择这个框架（我用的是scrapy框架，所以下面的问题也是针对scrapy） 二。框架问题（
工程师
工程师吴畏 . 2019-04-18 1235
爬虫工程师的价值及入门技巧
1. 谈爬虫工程师的价值 大数据时代已到，数据越来越具有价值了，没有数据寸步难行，有了数据好好利用，可以在诸多领域干很多事，比如很火的互联网金融。从互联网上爬来自己想要的数据，是数据的一个重要来源，而且往往是必不可少的来源。所有，目前，爬虫工程师是一个非常吃香的职位，工资往往都不低，就是要耐得住寂寞了。那爬虫工程师的价值也就是能稳定的、高效的和实时的带来数据。 2. 爬虫（或互联网数据采集）怎么入
工程师
工程师吴畏 . 2019-04-04 395
成为网络爬虫工程师需要了解哪些知识
初级爬虫工程师： Web前端的知识：HTML， CSS， JavaScript， DOM， DHTML， Ajax， jQuery，json等； 正则表达式，能提取正常一般网页中想要的信息，比如某些特殊的文字，链接信息，知道什么是懒惰，什么是贪婪型的正则； 会使用re， BeautifulSoup，XPath等获取一些DOM结构中的节点信息； 知道什么是深度优先，广度优先的抓取算法，及实践中的使用
工程师
工程师吴畏 . 2019-03-20 585
- 1