专题：data analysis

import random import time def strTimeProp(start, end, format, prop): """Get a time at a proportion of a range of two for...

我将在这篇文章中，尝试非常浅层次的梳理一下数据清洗过程，供各位参考。 照例，先上图： 预处理阶段 预处理阶段主要做两件事情： 一是将数据导入处理工具。通常来说，建议使用数据库，单机跑数搭建MySQL环境即可。如果数据量大（千万级以上），可以...

简介 前几天，一直在学习爬虫，然后最近想到了一个不错的idea，想以这个小demo来结束爬虫的学习。 是这样的：登入qq空间，爬取自己或者好友的所有说说记录，然后区统计分析一共发了多少说说，每条说说的评论有多少，谁评论的最多，有多少赞，谁赞...