扣丁学堂告诉你在大数据时代我们并非是透明体
2018-01-11 14:23:11
608浏览
大数据时代的出现通俗点来说,就是大量的数据与现实生活相结合。确切的说是移动互联网、物联网产生了成批量的数据,大数据计算技术完美地解决了海量数据的收集、存储、计算、分析的问题。大数据时代开启人类社会利用数据价值的另一个时代。
一、大数据时代带给我们的思考
1)大数据计算提高数据处理效率,增加人类认知盈余
大数据技术就像其他的技术革命一样,是从效率提升入手。大数据技术平台的出现提升了数据处理效率。其效率的提升是几何级数增长的,过去需要几天或更多时间处理的数据,现在可能在几分钟之内就会完成。大数据的高效计算能力,为人类节省了更多的时间。我们都知道效率提升是人类社会进步的典型标志,可以推断大数据技术将带领人类社会进入另外一个阶段。通过大数据计算节省下来的时间,人们可以去消费,娱乐和创造。未来大数据计算将释放人类社会巨大的产能,增加人类认知盈余,帮助人类更好地改造世界。
2)大数据通过全局的数据让人类了解事物背后的真相
相对于过去的样本代替全体的统计方法,大数据将使用全局的数据,其统计出来的结果更为精确,更接事物真相,帮助科学家了解事物背后的真相。大数据带来的统计结果将纠正过去人们对事物错误的认识,影响过去人类行为、社会行为的结论,带来全新的认知。有利于政府、企业、科学家对过去人类社会的各种历史行为真正原因的了解,大数据统计将纠正样本统计误差,为统计结论不断纠错。大数据可以让人类更加接近了解大自然,增加对自然灾害原因的了解。
3)大数据有助于了解事物发展的客观规律,利于科学决策
大数据收集了全局的数据,准确的数据,通过大数据计算统计出了解事物发展过程中的真相,通过数据分析出人类社会的发展规律,自然界发展规律。利用大数据提供的分析结果来归纳和演绎出事物的发展规律,通过掌握事物发展规律来帮助人们进行科学决策,大数据时代的精准营销就是典型的应用。
4)大数据提供了同事物的连接,客观了解人类行为
在没有大数据之前,我们了解人类行为的数据往往来源于一些被动的调查表格及滞后的统计数据。拥有了大数据技术之后,大量的传感器如手机APP、摄像头、分享的图片和视频等让我们更加客观的了解人类的行为。大数据技术连接了人类行为,通过大数据将人类的行为数据收集起来,经过一定的分析后来统计人类行为,帮助我们了解人类的行为。可以说大数据的一个重要作用就是将人类行为数据进行收集分析,了解人类行为特点,为数据价值的商业运用提供基础资产。
5)大数据改变过去的经验思维,帮助人们建立数据思维
人类社会的发展一直都在依赖着数据,无论是各国文明的演化,农业的规划,工业的发展,军事战役及政治事件等。但是出现大数据之后,我们将会面对着海量的数据,多种维度的数据、行为的数据、情绪的数据、实时的数据。这些数据是过去没有了解到的,通过大数据计算和分析技术,人们将会得到不同的事物真相,不同的事物发展规律。依靠大数据提供的数据分析报告,人们将会发现决定一件事、判断一件事、了解一件事不再变得困难。各国政府和企业将借助于大数据来了解民众需求,抛弃过去的经验思维和惯性思维,掌握客观规律,跳出历史预测未来的困境。
二、大数据隐私保护
大数据的隐私和伦理已经争论了很多年,由于其涉及我们每个人的自身利益,大数据隐私保护是大数据产业需要正面面对的问题。大数据在采集过程中必定会涉及到隐私数据的收集,如果其保护的不好将会造成严重的后果,成为大数据产业发展的瓶颈。过度强调大数据的商业应用而忽视了大数据产业的隐私保护,将会产生灾难性的后果,大数据产业的发展可能会因此被禁止。过度强调隐私保护而不发展大数据产业也是一个错误的选择,人类可能会错失一个高速发展的机遇。大数据产业发展要建立在隐私保护基础之上,同时隐私保护也将通过适当约束来助推大数据产业的发展。
大数据企业在采集外部数据时,应该注意尽量不要收集可以识别出个人的PII信息,参照美国个人隐私定义者,PII信息包括姓名、地址、手机号码、身份证号、驾驶证号、银行帐号、借记卡/信用卡号。大数据企业在使用自身拥有的信息时也要注意保护敏感信息例如民族、政治意见、宗教信仰、健康/医疗信息,婚姻状况、性生活、年龄、性别、犯罪记录、个人喜好、标准IP地址等。
大数据企业应该在其公司的章程和文件中体现对个人隐私数据的保护,坚持遵守全球隐私保护7条原则;
1)知晓权(透明性):应该通知本人关于所收集信息的目的
2)选择权:提供机会选择或放弃所提供的个人信息是否被使用或如何被使用
3)同意权:再符合知晓权和选择权的情况下才可以向第三方透露个人数据信息
4)安全权:采取负责的措施保护个人信息免受丢失、滥用、未授权获取、泄露、篡改、毁坏的威胁
5)数据完整性:确保个人信息在最终用途、合理防护方面的可靠性,确保信息精确、完整、无误。
6)可查询:提供本人查询个人信息的途径
7)责任性:企业有责任遵守上述法则,并应确保合规的机制。
大数据企业面对的数据分为公开数据,授权数据,隐私数据。公开数据来源于公共媒体因此可以无须强调保护,授权数据来源于数据收集过程中,客户对企业的授权,需要依据签订的协议使用范围来使用,不能过越权进行数据转让和贩卖,大数据企业仅能在签署的授权范围内部进行使用,企业在使用大数据时尽量使用分类数据、群体数据、趋势数据、统计数据。不要使用针对个体的数据,同时在数据分析是需要注意关注隐私数据保护。大数据企业在利用隐私数据时将要特别注意对其的保护,即使在客户授权的前提下,也要注意数据的使用场合和揭示方式,不要向外泄露受保护的PII信息。
大数据隐私保护应该从企业法律意识、国家法律法规、数据保护技术等几个方面入手进行大数据隐私保护,其是大数据产业发展的一个重要前提,解决了大数据隐私保护问题才能打开大数据产业发展的空间,大数据产业发展才有明确的未来。
既然已经通过扣丁学堂的介绍,从不同的角度做出了介绍,那么如果有学生想学大数据的朋友可以选择扣丁学堂进行学习,扣丁学堂是在线大数据培训学习,有老师全程教导,既省时又省力。并且还有大量高质量大数据视频教程供学员观看学习,手把手带你进入大数据世界,想要大数据视频教程的小伙伴快联系咨询老师领取吧。扣丁学堂大数据学习群:209080834。
关注微信公众号获取更多的学习资料
查看更多关于“大数据开发资讯”的相关文章>>
标签:
大数据培训
大数据视频教程
大数据开发工程师