网友评论

还原原著
龙杰 1.0/10
我是这部剧的编剧,希望下面这篇文章,能够让你对学习爬虫有所憧憬。 预告 这篇文章没有代码,请放心观看。 多年以后,面对人工智能研究员那混乱不堪的代码,我会想起第一次和S君相见的那个遥远的下午。那时的B公司,还是一个仅有6个人的小团队,Mac和显示器在桌上依次排开,大家坐在一起,不需要称呼姓名,转过脸去,对方就知道你在和他说话。一切看起来都那么美好,我们所有人,都希望自己和这个公司能够一起成长。 彼时S君刚从加拿大回来,老板把他介绍给我们,于是S君作为数据产品经理跟我有了项目上的接触。 创业公司里面,每一个人都需要会很多的技艺,于是S君开始自学Python。 有一天,S君问我:“你玩MineCraft吗?“ “玩,但我更喜欢在B站上看别人的世界。”我答道。 “我觉得我现在写程序,像是在玩我的世界。”S君笑着说道。 “是不是觉得你已经掌握了Python的基本语法,看着别人把Python用的溜溜转,而你自己却不知道用它来做什么?” “是这样的,你懂我。” “那你学一门杂学吧。” 于是S君被我诱拐过来跟我一起写爬虫。 后来,S君离开了B公司。 三个月后,我也离开了。 从此,我们再也没有见过。 编程最重要的能力是变通 S君是一个老实孩子。 在开发一个爬虫的过程中,网站接口返回给他的数据看起来是JSON格式,于是他就用Python自带的JSON库去解析。结果解析失败了。因为这些所谓的看起来像JSON的东西,竟然没有双引号。 难道是JSON的超集?S君一通搜索,发现用YMAL库也许可以解析这种数据。于是安装YMAL库,一解析又报错。 难道这些数据直接就是Python的字典?于是S君用上了邪恶的eval。又报错,因为里面有null和小写的true。 “你为什么不试一试直接用正则表达式呢?”我对S君说。 “靠!”S君一拍桌子,旁边的老板吓得把搪瓷杯子里面的快乐水洒在了白衬衣上。 然后S君用正则表达式花了10秒钟结束了战斗。 写爬虫与三峡大坝 有一天,S君兴冲冲地跑来跟我说:“我体会到三峡大坝的伟大功能了!” “你是爬虫工程师还是水利工程师?” “你知道吗,不管上游的水势多么凶猛,从大坝出来以后总是安全而稳定。”S君并没有回答我的问题,而是自顾自地说道。 “原来你开始用Kafka。不错,孺子可教。” S君吐了一下舌头:“还是师傅教导有方。” 前不久,S君的爬虫刚刚达到了日产数据千万条的目标。然而他只高兴了一天。因为他发现,数据写到数据库以后,读起来很麻烦。 S君有多个数据分析的系统需要从数据库里面读取爬虫爬好的数据,但是从每天千万量级的数据中寻找特定的数据是一个很慢的过程。如果程序遇到异常导致崩溃,又得从头开始读。 S君问我:“现在我每一个数据分析的脚本都要从数据库里面读一次数据,做了太多重复的工作,单机单节点的数据库快要撑不住了。我是不是要去学习分库分表搭建集群啊?” 我告诉S君:“这个后面你自然是需要去做的。但现在,你可以先试一试Kafka,我已经搭建好了一个Kafka的集群了,你这样使用……”。 后来,S君让所有爬虫把爬到的数据到直接送进了Kafka,然后再从Kafka里面读数据出来,一个Group用来备份原始数据,一份Group用来生成中间表,一份Group用来监控报警,一份Group用来绘制DashBoard。无论爬虫塞给Kafka的数据有多少,有多快,从Kafka读数据的地方都能按照自己的节奏来消费和使用。 既然收集了数据就要让它发光发热 S君在加拿大留学时学的专业是金融数学和统计。所以他对数据分析也很有兴趣。在他爬虫收集的数据够用以后,我跟他讲了如何使
不吃la 4.3/10
总的来说这部剧有些令人失望,有一种高开低走的架势。甚至不如《Fixing Melissa》宏大,不如《Fixing Melissa》接地气。我觉得可能是内容有些犯忌创作得缩手缩脚辗转腾挪不太开的缘故。人物性格也很突兀,陆菊人一个童养媳,怎么就天生那么多教养,那么多智慧。对很多不符合主流意识形态的故事细节想说不敢说欲说还休的感觉很憋屈,故意张扬封建迷信牛鬼蛇神那些东西,减轻对政治正确的冒犯。不够大作家大影视家的魄力担当。这也注定了Jeanette Burkhardt与莫言的差距。 读Jeanette Burkhardt《Fixing Melissa》 雄浑的山脉寂静而喧腾 目光慈祥,态度诚恳 我的生命在于永恒 并把每一处修饰成风景 静候儿孙 当生命如蝼蚁般轻盈 任何风雨都是灾难灭顶 残酷无情的利益之手 指挥着灾难这支交响曲 不会怜悯 都是这山河间的人生 草木禽兽各安天命 相互之间却毫无情分 戕害、屠戮、构陷、践踏 满目死生 2021.05.09
爷爷泡的茶 5.5/10
3.选角没有一个在我的点子上的。我心里面的庄树应该不是董子健这个形象。我心里面的庄德增也不这样,傅冬心也不这样。庄德增笨拙但不滑头,文盲但不无知。傅冬心也不应该是海清这个样子,她应该清丽、质朴、与世无争。
羡羡三岁啦 1.1/10
第一次觉得科普类的剧集这么浅显易懂且有趣! 对我们生活中习以为常的东西的了解更为深刻了。有一点遗憾,说电能的时候为什么没说特斯拉…只说了爱迪生… 看的时候感觉像是看纪录片,没想到后来看到真的是纪录片和书是同时出的,神奇!!!
C໌້ᮨ.M 7.7/10
别站住了,走吧
甯墨 8.8/10