糟了,上网记录被Python扒下来了!

系统 151 0

糟了,上网记录被Python扒下来了!_第1张图片

来源 | 高级农民工(ID:Mocun6)

责编 | 胡巍巍

长时间使用浏览器会积累大量浏览器历史记录,这些是很隐私的数据,里面甚至可能有一些不可描述的网站或者搜索记录不想让别人知道。不过,我们自己可能会感兴趣,天天都在上网,想知道长期下来是都在摸鱼还是有认真工作。


其次,了解下自己每天打开多少次网页、哪些网站上的最多、常搜哪些关键词,这些也很有趣。


下面就来给大家介绍一款 Python 编写的神工具,可以一键分析你的上网行为。我用了后发现了很多不可思议的结论。


比如访问次数最多的网站居然是微信公众号,7000 多次,看来弄自媒体占了大量上网时间。


糟了,上网记录被Python扒下来了!_第2张图片

浏览次数最多的十个网站


看到了每天打开网站的次数,平均都有好几百次,8 月 8 号那天发生了什么,竟打开了 1600 多次!


糟了,上网记录被Python扒下来了!_第3张图片

每日访问网站次数


然后又统计了停留时间最长的网页页面,在 http://md.aclickall.com/ 这个网站居然停留了 660 小时,这是个文章排版网站,因为经常要排版所以把该页面固定了起来。


糟了,上网记录被Python扒下来了!_第4张图片

停留时间最长的 URL 排名


然后统计出了搜索最多的十个关键词,python 居然是第一位!前十中基本都是数据编程相关的,没想到自己这么爱学习。


糟了,上网记录被Python扒下来了!_第5张图片

搜索最多的十个关键词


最后统计出了各大搜索引擎的使用率。google 的使用率达到了 97.3%,而百度只有不到 3%,大概是偶尔无法科学上网的时候用了下百度。


糟了,上网记录被Python扒下来了!_第6张图片

各搜索引擎使用占比


怎么样是不是挺有意思?下面就来说说怎么用这款工具,让你也可以分分钟了解自己的上网行为,非常简单。


这款 Python 工具其实就是分析浏览器的历史记录数据库文件然后可视化。这里的浏览器只支持 Chrome 和以 Chrome 为内核的浏览器,比如 Centbrower 、360极速浏览器等,其他浏览器比如 ie、Firefox 不支持。如果有登陆账号,桌面端和电脑端会一起分析,更全面。


第一步,打开网站:(公众号后台回复 813得到)


糟了,上网记录被Python扒下来了!_第7张图片


接着上传你的浏览器历史记录文件,这个历史记录文件怎么获得呢?


新建一个标签页,输入 chrome://version/ 回车,可以打开你的浏览器详细信息:


糟了,上网记录被Python扒下来了!_第8张图片


复制「个人资料路径」到资源管理器打开,然后找到 history 文件复制一份到桌面。


糟了,上网记录被Python扒下来了!_第9张图片


接着就在刚才的网站中上传该文件(我的文件有 15MB 大),稍等片刻就可以得到上门的那些可视化分析结果。


你可能会担心上传浏览器历史记录是否安全,尽管放心,这个程序是开源的。


下面再简单说下如何用 python 一步步实现的这个程序功能的,这是一个很棒的 python 练手项目,涉及到了前后端的知识,整个程序包含多个文件:


            


每个程序实现的功能:


糟了,上网记录被Python扒下来了!_第10张图片


具体实现思路大致分为下面几点:


  • 解析历史记录文件数据


历史记录 history 是一个 sqllite 数据库文件,连接数据库查询然后调用数据库中的信息并存储。


  • 配置 web 服务器和前端页面
  • 可视化绘图函数


可视化图形使用的是可交互式的 plotly 库。


上网记录是很重要的隐私数据,平常自己可能无法从中直接发现什么,使用 Python 简单一分析就可以发现很多东西,所以平时尽量注重隐私保护。

作者简介:高级农民工( 苏克 ),985 硕士转行 Python,热爱爬虫、数据分析和挖掘,本文首发于个人公众号「mocun6」。

640? 1.国产嵌入式操作系统技术与产业发展论坛暨嵌入式系统联谊会主题讨论会嘉宾揭晓!

2. 编程语言趋势预测:Rust 将成为主流,React 继续统治编程世界

3. 教你如何使用TouchGFX之快速创建滑动应用

4 .如今的FPGA走错路了吗?

5. 华为手机到底用了多少美国芯?

6. 10.3mmx11.5mm的Arduino,见过吗?

糟了,上网记录被Python扒下来了!_第11张图片

免责声明:本文系网络转载,版权归原作者所有。如涉及作品版权问题,请与我们联系,我们将根据您提供的版权证 明材料确认版权并支付稿酬或者删除内容。


更多文章、技术交流、商务合作、联系博主

微信扫码或搜索:z360901061

微信扫一扫加我为好友

QQ号联系: 360901061

您的支持是博主写作最大的动力,如果您喜欢我的文章,感觉我的文章对您有帮助,请请扫描上面二维码支持博主1元、2元、5元等您想捐的金额吧,狠狠点击下面给点支持吧

发表我的评论
最新评论 总共0条评论