Python轻量级爬虫有大作为！

DT时代，各大网络大公司都在用大数据来进行优化自身产品，以求给消费者带来更好的消费体验。当你在某宝上看过，淘过一些产品后，你会惊奇地发现，当登陆账号时，某宝是多么了解你，它知道你喜欢逛哪一类的店铺，喜好哪一些产品等等；某东在安排线下仓库库存时，大数据会告诉他这个月某款产品的销售情况，以提供更为合理的进销存安排；某共享单车会根据大数据判断在某个区域投放单车的数据，以便能让更多需要骑行的人享受共享的乐趣。当然小到个人，我们的吃喝玩乐行怎可少了大数据的支持！某IT男已经用大数据为自己找到了上下班方便的出租房，某景点已经运用大数据为游客做出更人性化的出游时间安排...大数据给了我们做出更合理选择，或者说在众多的选择中优中选优。想要有大数据做为参考，首先手中要有你想要的大数据，如果手中没有，那怎么在茫茫网络大海中摄取到你想的数据呢？

单靠人工去收集大量数据已经不现实，为什么？一个人一天八小时不停地操作，能收集1000条信息算可以的了，但面对上几百上千万条数据时，要花掉多少时间精力才能完成，更可怕的是面对工作量大时，人难免会有“失蹄”的时候，数据一旦存在误差，就会影响整个数据的参考价值！

办法总比问题多，聪明的人类发明了功能强大的Robot,专门用来收集整理数据，面对上亿条数据，它们仍然能够从容面对，有序保质地完成任务。这个robot就是网络爬虫----大数据的重要来源之一就是靠这小小的爬虫，当然不是单兵作战，而是不计其数的集中战斗！