在最近的需求中需要对今日头条的数据进行爬取,于是花了两天多的时间,终于爬下来了,下面直接进入正题。 分析思路 在爬取网站之前,按照套路先打开网站分析一下,确定一下整体的思路。 主要是获取web网站主页下的资讯新闻url,再通过url拿到详情页的正文,先打开开发者工具对主页进行抓包 主页的html没有 …

阅读全文 »

写完了开篇,像是举行了一场对以往的结束仪式,另一方面也是开始仪式,而后就要开始新的、充满不确定性的叛逆的阶段(坑)。冷静下来,第一步就是先想想,后面能做些什么?要做些什么? 上篇文章提到,这段时间我一方面是保持了规律的生活节奏,让自己保持好的状态,另一方面也在不停看书,尤其是看完几本传记的书,让我对 …

阅读全文 »

我们身处的世界,是同时存在于客观和主观的世界。在绝对客观的世界里,一切无法改变,你的基因智力身体素质,造成人生的固化。在主观世界,人又存在一定的可塑性,自身的性格素质可以通过后天的行为塑造,人生的路上也会遇到无数个大大小小的选择,这些选择改变你的命运。 很多人的一生都活在大脑构造出来的主观世界,所看 …

阅读全文 »