大数据 是什么
大数据(big data)是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。大数据的5V特点(IBM提出):Volume(大量)、Velocity(高速)、Variety(多样)、Value(低价值密度)、Veracity(真实性)。
大数据技术和应用的概念
大数据技术与应用主要围绕智慧城市、城市交通、医疗、金融、城市规划等各领域中大数据技术的应用,系统总结了数据科学、大数据技术及其在城市建设各领域中应用的科研技术成果和项目实施经验。
大数据的优势
1)大数据计算提高数据处理效率,增加人类认知盈余
大数据技术就像其他的技术革命一样,是从效率提升入手。通过大数据计算节省下来的时间,人们可以去消费,娱乐和创造。未来大数据计算将释放人类社会巨大的产能,增加人类认知盈余,帮助人类更好地改造世界。
2)大数据通过全局的数据让人类了解事物背后的真相
相对于过去的样本代替全体的统计方法,大数据将使用全局的数据,其统计出来的结果更为精确,更接事物真相,帮助科学家了解事物背后的真相。大数据带来的统计结果将纠正过去人们对事物错误的认识,影响过去人类行为、社会行为的结论,带来全新的认知。
3)大数据有助于了解事物发展的客观规律,利于科学决策
大数据收集了全局的数据,准确的数据,通过大数据计算统计出了解事物发展过程中的真相,通过数据分析出人类社会的发展规律,自然界发展规律。利用大数据提供的分析结果来归纳和演绎出事物的发展规律,通过掌握事物发展规律来帮助人们进行科学决策。
4)大数据提供了同事物的连接,客观了解人类行为
大数据技术连接了人类行为,通过大数据将人类的行为数据收集起来,经过一定的分析后来统计人类行为,帮助我们了解人类的行为。
5)大数据改变过去的经验思维,帮助人们建立数据思维
出现大数据之后,我们将会面对着海量的数据,多种维度的数据、行为的数据、情绪的数据、实时的数据。通过大数据计算和分析技术,人们将会得到不同的事物真相,不同的事物发展规律。各国政府和企业将借助于大数据来了解民众需求,抛弃过去的经验思维和惯性思维,掌握客观规律,跳出历史预测未来的困境。
大数据的部分应用场景(现状)
1)医疗行业
医疗行业拥有大量的病例,病理报告,治愈方案,药物报告等等。在未来,借助于大数据平台我们可以收集不同病例和治疗方案,以及病人的基本特征,可以建立针对疾病特点的 数据库 。
2)生物技术
主要是指大数据技术在基因分析上的应用,通过大数据平台人类可以将自身和生物体基因分析的结果进行记录和 存储 ,利用建立基于大数据技术的基因数据库。大数据技术将会加速基因技术的研究,快速帮助科学家进行模型的建立和基因组合模拟计算。借助于大数据技术的应用,人们将会加快自身基因和其它他生物的基因的研究进程。未来利用生物基因技术来改良农作物,利用基因技术来培养人类器官,利用基因技术来消灭害虫都即将实现。
3)金融行业
大数据在金融行业应用范围较广。大数据在金融行业的应用可以总结为以下五个方面:
精准营销:依据客户消费习惯、地理位置、消费时间进行推荐
风险管控:依据客户消费和现金流提供信用评级或融资支持,利用客户社交行为记录实施信用卡反欺诈
决策支持:利用抉策树技术进抵押贷款管理,利用数据分析报告实施产业信贷风险控制
效率提升:利用金融行业全局数据了解业务运营薄弱点,利用大数据技术加快内部数据处理速度
产品设计:利用大数据计算技术为财富客户推荐产品,利用客户行为数据设计满足客户需求的金融产品
4)零售行业
零售行业大数据应用有两个层面,一个层面是零售行业可以了解客户消费喜好和趋势,进行商品的精准营销,降低营销成本。另一层面是依据客户购买产品,为客户提供可能购买的其它产品,扩大销售额,也属于精准营销范畴。除此之外,零售行业可以通过大数据掌握未来消费趋势,有利于热销商品的进货管理和过季商品的处理。零售行业的数据对于产品生产厂家是非常宝贵的,零售商的数据信息将会有助于资源的有效利用,降低产能过剩,厂商依据零售商的信息按实际需求进行生产,减少不必要的生产浪费。
5)电商
由于电商的数据较为集中,数据量足够大,数据种类较多,因此未来电商数据应用将会有更多的想象空间,包括预测流行趋势,消费趋势、地域消费特点、客户消费习惯、各种消费行为的相关度、消费热点、影响消费的重要因素等。依托大数据分析,电商的消费报告将有利于品牌公司产品设计,生产企业的库存管理和计划生产,物流企业的资源配制,生产资料提供方产能安排等等,有利于精细化社会化大生产,有利于精细化社会的出现。
6)农牧业
大数据在农业上的应用主要是指依据未来商业需求的预测来进行农牧产品生产,降低菜贱伤农的概率。同时大数据的分析将会更见精确预测未来的天气气候,帮助农牧民做好自然灾害的预防工作。大数据同时也会帮助农民依据消费者消费习惯决定来增加哪些品种的种植,减少哪些品种农作物的生产,提高单位种植面积的产值,同时有助于快速销售农产品,完成资金回流。牧民可以通过大数据分析来安排放牧范围,有效利用牧场。渔民可以利用大数据安排休渔期、定位捕鱼范围等。
大数据技术与应用的发展前景
1、大数据自身能够创造出更多的价值
大数据相关技术紧紧围绕数据价值化展开,数据价值化将开辟出广大的市场空间,重点在于数据本身将为整个信息化社会赋能。随着大数据的落地应用,大数据的价值将逐渐得到体现。目前在互联网领域,大数据技术已经得到了较为广泛的应用。
2、大数据推动科技领域的发展
大数据的发展正在推动科技领域的发展进程,大数据的影响不仅仅体现在互联网领域,也体现在金融、教育、医疗等诸多领域。在人工智能研发领域,大数据也起到了重要的作用,尤其在 机器学习 、 计算机 视觉和自然语言处理等方面,大数据正在成为智能化社会的基础。
3、大数据产业链逐渐形成
经过近些年的发展,大数据已经初步形成了一个较为完整的产业链,包括 数据采集 、整理、传输、存储、分析、呈现和应用,众多企业开始参与到大数据产业链中,并形成了一定的产业规模,相信随着大数据的不断发展,相关产业规模会进一步扩大。