装箱打包

stablog_logo_256x256-899da545

微博号被炸,对于号主本人来说是进入冻结状态,除了自己无法发微博和点赞评之外,在公共界面上,以前发过的微博全部被屏蔽。这围脖我一共织了一万零三百多条,也想把数据保留下来,整理导出。有网友推荐了稳部落,我就下了文件包。因为电脑是微软家的Surface,自带Edge浏览器,下下来的文件包无法解压,就放在了一边。后来有时间研究了一下,下了chrome浏览器,再打开就成了。

30日晚安装好稳部落的.exe,运行程序,在里面登入微博账号,按指南开始操作,简单易行。晚10点31分开始抓文件。


3月31日

早上起来看运行日志,半夜被停顿了6小时,“网络请求失败,账号可能因抓取频繁被认为有风险”,早上又再继续。今天一直开着,晚上眼看着做到80%了,忽然手滑点了关闭,一键清零欲哭无泪。马上重新打开稳部落,所幸不用再次登录。今晚10:26重新开始从头再抓取,在这记一下,看几时完成。


4月1日

今早起来发现,00:51 – 08:18停止工作,可能跟电脑进入睡眠状态有关,有7小时33分的停顿。唤醒屏幕后即开始续传。

18:35所有任务执行完毕,打开应有的输出电子书pdf文件夹,却是空白。感觉迷失。重来一次。


4月2日

晚上9:29所有任务执行完毕,打开输出电子书pdf文件夹,还是空白;打开html文件夹,有抓好按日期排序好的微博文件,但是只抓到2017年11月22号止。

想了想,再抓一次,但不是从注册开始,而是从2017年11月22号到今年2月20日,看看结果如何。

今晚12点多,全部数据抓取和存档完成。实际上做了四次,原因是数据量太大,十年多,一万多条微,抓取软件一次过搞不掂,要斩件来做。我后来按年分卷来抓。转pdf也不稳定,这一年有,那一年无,于是我放弃了转pdf,统一用html形式存档了。就这都5.25G,无论如何,谢天谢地完成了!

This entry was posted in 未分类 and tagged , . Bookmark the permalink.

5 Responses to 装箱打包

  1. messer. says:

    现在打开微博,都是一片吃喝玩乐歌舞升平。我follow的人几乎全军覆没。

Comments are closed.