都说现在是大数据时代，那么如何获取自己想要的数据呢
随着近几年电子商务、移动互联网的迅速发展，人类社会活动的数据量迅速激增，人类正式进入“大数据时代”，我们的一举一动都将在数据的宇宙中留下印记。未来新的科技进步必然离不开以数据为中心的技术，那如何在海量数据中获取自己想要的数据呢？以下，我们罗列出几种方式：
1）企业积累用户数据
我们常见的大型互联网公司，例如：互联网三巨头BAT公司，他们分别掌握着用户的信息型数据、交易型数据与关系型数据。因为其巨大的用户基础，所以他们在获取数据方面本身就存在天然优势。
现在我们也能逐渐感受到一些中小型企业的数据积累意识。比如我们在注册一些应用的时候，软件都会鼓励用户尽可能多的填写相关信息，这些都是企业积累的用户数据，日后对分析用户行为，帮助企业运营、决策，都可能提供参考。
2）爬虫爬取数据
对于大型互联网公司，因为其海量用户和长时间的积累自身就能提供分析的数据，但对于一些刚刚起步的中小企业，培养产品互联网化再积累数据，可能还没有起步就死掉了，这时候爬虫就可以派上用场了，能够根据所需在互联网上定向爬取自己想要的数据。
3）公开数据集
比如中国国家统计局，内含国家经济宏观数据，社会发展、民生相关重要数据及信息等；还有央行、银监会、证监会、政府网、经济数据库、互联网络信息中心发布的数据统计信息。此外权威的第三方机构统计数据网站，例如阿里指数、百度指数、新浪指数、统计网、数据堂等。
4）数据管理咨询公司
国际上比较出名的就是麦肯锡公司、波士顿咨询公司、贝恩公司，英国的路透社，国内做比较好的有艾瑞咨询，通常这样的管理咨询公司都有自己专业的数据采集团队。此外企业或者个人也可以通过第三方数据平台购买数据。
在数据的江湖里，既有波澜壮阔的大数据（Big Data），也有微波涟漪的小数据（Small Data），二者相辅相成，才能相映生辉。目前大数据流行，人们就“言必称大数据”，这不是做学问的态度，不要碰到大量的数据，就给它戴上一顶 “大数据”的帽子。大数据体现出规律，小数据蕴含着智慧，它们都闪烁着理想之光。
古人云：“圣人见微知著，睹始知终。”道家的一部重要著作《淮南子·说山训》中说：“以小明大，见一叶落而知岁之将暮，睹瓶中之水而知天下之寒。”意思是说，看见一片落叶，就知道秋天来临；看到瓶中水结冰，就知道天气的寒冷程度，这是对见微知著的形象比喻。
吴甘沙先生用《一代宗师》的台词来比拟大、小数据的区分，倒也甚是恰当。他说，小数据“见微”，作个人刻画，可用《一代宗师》中“见自己”形容之；而大数据“知著”，反映自然和群体的特征和趋势，可用《一代宗师》中的“见天地、见众生”比喻之。
大就是大数据，就是全量数据；小就是小数据，就是个体数据。所以，对于数据科学，我们必须在把情况搞清楚的基础上懂得哪些是大、哪些是小、怎样处理大小辩证关系，才能在具体数据应用中做到抓大放小、以大兼小，以小带大、小中见大。在研究小数据时，要以大兼小、以小见大，必须考虑目标的正确性、可操作性和决策的科学性、可行性。在研究大数据时，要抓大放小、以小带大，既要考虑整体共性，又要注重个体特征。这样，数据应用中，大能与小数据量化的自我保持高度一致，小能与大数据预见的未来保持一致，既不能见小不见大，也不能见大不见小。对于数据科学，从数据中来，到数据中去，既要见大，也要见小，以小带大、小中见大，才能真正用好数据。
当认知科学领域发生“天翻地覆”的变化时，我们的未来又会是怎样？认知革命，特别是“真相时代”的到来，“预测”将被“预见”取代，那么，“预见未来”将不再是遥远的星辰。如果认知科学的本质是计算科学，那么，“大数据”和“小数据”争夺所谓“大小”的“江湖地位”意义何在？但我们需要觉悟的是：此“数据”非彼“数据”。面向未来，“大数据”和“小数据”将开启一个“全新故事”，一个“预见未来”的故事。
哈哈哈哈，泛泛大虾神秘笑四声想知道为什么吗？
好了说下大数据的问题
首先互联网时代的数据有些是公开的，有些是不对外的
泛泛大虾简单举一二例来说
以实际案例寻找商铺为例
可以快速的利用地图工具对外的数据查看周围的交通这个一般人都知道的，但一些地图工具对外公开了大城市的人口流动热力图，什么意思呢，就是你可以利用这个工具查看出你城市的那块流动人口多，人口密集程度，每日外来多少固定多少等，很好的解决了人流问题的大数据问题，当然这个数据不光可以用到开实体店。
再来说说互联网平台吧，今日头条 微信公众号 站长统计工具 各大电商平台等都有很完善的数据统计功能，可根据你要做的事情来选择平台，完了借用这些平台的数据为你所用，重要的是要会分析数据和选择数据
最近泛泛大虾心情很不好，所以开头笑四声让你们以为我很快乐
为什么家里有很多小爬虫
这是由于潮湿引起滋生的，请留意你家的木制门框门窗、柜底柜背以及比较阴暗少动的位置是否经过水泡造成腐烂潮湿。平时多开窗通风，保持室内干爽透气，可防止害虫滋生。对现有的害虫，可用滞留性的卫生杀虫剂进行喷洒处理。
家里有很多虫子可能是有食物坏了变质，或者粮食时间长了室内温度高了也会生虫。把变质的食物和生虫的粮食找出扔了，打扫好室内卫生特别是角落，喷点打虫药就好了。
那些小虫子一般都是在下雨过后潮湿的天气或是空气湿度比较大的地方才会出现、应该尽量降低那房间的空气湿度、经常开窗通风、有墙缝的地方最好用石灰粉刷，家里需要换气，保持干燥，另外需要经常清理，再就是注意下家里不要堆积太多杂物，卫生间要排水畅通。如果能有阳光直射会更好。这种虫子用消毒水之类的喷洒就可以消除，主要是保持卫生的干净和干燥，虫子就会不见了。
厕所总有小飞虫怎么办
1、保持厕所内干燥
保持厕所内干燥，地板上不能有积水，墙壁上不能老是湿淋淋的，洗完澡要及时用干毛巾擦干。厕所的窗户要时常开着，保持空气的流通和干燥。如此一来，小飞虫没有了良好的生存环境，自然就会消失了。
2、厕所消毒
如果厕所里出现小飞虫和小爬虫，就要给厕所消消毒了。先用洁厕剂把厕所内的各个角落都要搞的干干净净，刷得洁白如新。尤其是地漏和通便管道都要用洁厕剂刷一下。然后再往下水道、地漏和通便管道用84消毒液消毒杀菌，这样就可以杀死很多的虫卵。像这样的杀毒杀菌的事最好每个星期做一次。
3、杀虫剂
厕所的墙壁上、和天花板上有很多的小飞虫，先把厕所卫生搞好，垃圾处理掉，然后关闭厕所的窗户，用杀虫剂向厕所内多喷洒点药水，再把门关好，焖几个小时，小飞虫就死光光了。
4、柚子皮、陈皮
把平时吃剩下的柚子皮和陈皮放在厕所内可以起到有效的防虫和祛除异味的作用。
5、灭坟灯、蚊香
灭蚊灯可以有效的除灭小飞虫，在厕所内可以挂一个灭蚊灯。灭蚊灯的紫色光会吸引小飞虫，当小飞虫飞近灭蚊灯时，就会被电网电的“啪、啪”响。还可以在厕所内点一盘蚊香来熏死小飞虫。

卫生间如何保持干净:
1、去污剂除马桶黄渍
马桶使用一段时间之后，内部就会产生黄渍，可以在马桶内部喷洒上发泡性的去污剂，再用洗刷工具来刷洗干净即可。
2、漂白剂遏制霉菌增生
卫生间潮湿的环境会生出一些霉菌，漂白剂对去除这些霉迹有很好的效果。漂白剂氧化性极强，将它进行稀释到100倍后，再用棉签蘸取涂在有霉迹处，静置30分钟左右，再用牙刷刷洗，霉迹就轻松地去除了。
3、盐和醋除去瓷盆锈迹
卫生间的瓷盆使用一段时间之后，盆底与金属相接处的陶瓷就会产生些锈迹，可以配制出醋盐溶液来进行去除。将适量的盐加入醋中，加热使混合液融化，用旧毛巾蘸取该溶液，敷在有锈迹的地方，半个小时后，再用粗布进行重复擦拭，锈迹便会去除。
标签： #爬虫爬取天气
