Category四维度空间袋

10个爬虫工程师必备的工具了解一哈

1

工欲善其事必先利其器的道理相信大家都懂。而作为经常要和各大网站做拉锯战的爬虫工程师们,则更需要利用利用好身边的一切法器,以便更快的攻破对方防线。今天我就以日常爬虫流程,给大家介绍十款工具,相信大家掌握之后,必定能够在工作效率上,提升一个量级 爬虫第一部做什么?当然是目标站点分析 1.Chrome Chrome属于爬虫的基础工具,一般我们用它做初始的爬取分析,页面逻辑跳转、简单的js调试、网络请求的步骤等。我们初期的大部分工作都在它上面完成,打个不恰当的比喻,不用Chrome,我们就要从智能时代倒退到马车时代 同类工具: Firefox、Safari、Opera 2.Charles...

程序员的光速指法是如何炼成的?

看过盗梦空间的朋友也许对以下的场景有印象(片中的2分45秒): 但其实小李子这段话只说对了一半,想法是人主动思考后的产物,它之所以根深蒂固,是因为人的惯性思维。而与之对应的非主动惯性,则比主动式思考更具生命力。习惯上我们也将它称为潜意识。潜意识几乎无时无刻都在影响你,小到你的饮食作息,大到你重大的人生决策。但似乎鲜有人注意到它,包括我自己也是如此。   自从上几周了解并熟悉vimium的使用后 张小鸡:神器vimium:比同级程序员成长更快,我主要靠它​zhuanlan.zhihu.com 我开始刻意关注,日常的哪些潜意识的练习,会有效帮助我们提升效率。正好这个时候,因为业务要请教公司的某同事,它在帮我查询的时候,我发现它的一套键盘操作简直堪称华丽。我有一种我还在“马车时代”,他已经在“火车时代”的既视感,请教之后,才发现它早前练习过标准指法。  ...

你们心心念念的typing club中文课程终于来啦

我在六月份分享了一篇了一个指法修正神器,当时还在想要是支持中文得多好啊。时隔小半年,官方终于对China下手了,我详细看了下中文教程内容,可以说是极其有诚意。相当地接地气,手动笔芯! 基础的课程都是按键纠正,基本都是移植了英文课程,不过官方还是很贴心的将视频的配音也修正为中文了,放出来大家看下👇👇👇 typing club的课程质量依然上乘,不仅有针对拼音的字母和音节的支持,而且还有贴心的汉语一二三四级的文章节选。最最最接地气的还有诗歌和成语的章节,小伙伴们练习打字的同时还能顺便熏陶一下文学,岂不美哉! 目前课程的内容如下: 基准键1 – 19 上排字母20 – 45 下排字母46 – 68 特殊符号69 – 78 大写字母79 – 100 手指旅行101 – 118 左右手练习119 – 134...

神器vimium:比同级程序员成长更快,我主要靠它

身处智能时代,时间就是命根子啊。而处在高速迭代开发环境的程序员,就更是如此。掌握点必备的效率神器是很有必要的。这款vimium能够在日常使用搜索引擎时,大大提升我们的效率,勤加练习,假以时日,便可以达到真正的所见即所得的境界。 基础教程掌握,就可以满足绝大部分网页需求的。进阶部分根据需要掌握即可,其实不需要记很多的,只有有意识的练习一下,不出一个礼拜即可炉火纯青。 备注:vimium插件需要Chrome浏览器。可以去插件商店下载,没有梯子的童鞋走下面的传送门。 链接:  密码: r9qx 视频中的v(visual mode), 需要着重讲一下  先用 / 定位,找到想要选择的字符  再按 v ,进入模式  然后使用     j:向下一行     k:向上一行     h:向左一个字符或标点(数字+h,可以移动多个字符)     l:向右一个字符或标点(数字+l,可以移动多个字符)...