-
打破数据统一的七大原则
所属栏目:[大数据] 日期:2018-04-04 热度:92
数据统一在数据分析领域里是个长期的挑战,从事数据分析的从业者希望在数据分析之前,来自不同实体的数据能够在同一个地方呈现出来。数据统一由七部分组成:1、获取数据 2、清洗数据 3、转换数据、4、模式集成 5、重复数据删除、6、分类 7、导出 一般而言[详细]
-
物联网下:大数据属于谁?
所属栏目:[大数据] 日期:2018-04-04 热度:57
数据隐私与访问的讨论在物联网时代变得越来越复杂 在之前一些文章中,我已经警告过一些组织机构机构可能很快就会遭遇数据问题被锁定、赶出或以其他方式禁止访问,以有助于优化未来业务的关键新数据源的可能性。 虽然我相信每个数据驱动的组织机构现在就应[详细]
-
大数据趋势下如何实现NAS存储与容灾备份?
所属栏目:[大数据] 日期:2018-04-04 热度:71
1、数据量暴增,存储市场风云变幻 据IDC预测,全球的数据量正面临一个爆炸性增长,到2020年即将达到44ZB,那44ZB是个什么概念呢? 如果以1KB=1024MB计算,1ZB的数据量换成 128G iPad的高度,可达地球到月球距离的6.6倍。 这些数据中,90%的增量来自于非结构[详细]
-
数据清洗的经验与教训 Data Cleaning
所属栏目:[大数据] 日期:2018-04-04 热度:143
小学的时候我统计过同学里有多少要订课间牛奶:每人分别需要什么口味和什么大小,应收多少钱。最后这份按照座位排序的表格要和一张学号表格按照同学姓名对应起来,并计算每种口味订购数量和每人应收款。过程中我遇到了很多困难,例如有同学订了多种口味,[详细]
-
被大数据遗忘的基础奠基-Log
所属栏目:[大数据] 日期:2018-04-04 热度:137
副标题#e# 在大数据时代,Log是关系数据库对计算机行业的伟大贡献,更是基础技术之一。然而在大家热烈讨论GFS, NoSQL,乃至Paxos, LSM tree等词语的时候,Log这个基础技术以及它对大数据行业的巨大贡献却一直以来都被业界所忽略。除了Kafka作者之一Jay Kre[详细]
-
如何在多系统和网络拓扑中构建高性能模型?
所属栏目:[大数据] 日期:2018-04-04 热度:138
副标题#e# 这个文档和附带的脚本详细介绍了如何构建针对各种系统和网络拓扑的高性能可拓展模型。这个技术在本文档中用了一些低级的 Tensorflow Python 基元。在未来,这些技术将被并入高级 API。 输入管道 性能指南阐述了如何诊断输入管道可能存在的问题及[详细]
-
大数据“喂养”红利下,知识图谱如何走上新道路?
所属栏目:[大数据] 日期:2018-04-04 热度:193
副标题#e# 大数据时代的到来,为人工智能的飞速发展带来前所未有的数据红利。在大数据的喂养下,人工智能技术获得了前所未有的长足进步。其进展突出体现在以知识图谱为代表的知识工程以及深度学习为代表的机器学习等相关领域。随着深度学习对于大数据的红利[详细]
-
服务端开发指南与最佳实战:数据存储技术,MySQL 数据库安全性
所属栏目:[大数据] 日期:2018-04-04 热度:63
数据库的安全性,即保护数据库,防止未经授权或不合法的使用而造成的数据泄漏和更改破坏。因此,保护数据库的安全性的一般方法是设置用户标识和权限控制。 MySQL 权限控制,分为两个步骤。第一步骤,服务器会检查是否允许连接。因为创建用户的时候会加上主[详细]
-
TensorFlow的开源与Hadoop的开源有什么不同?
所属栏目:[大数据] 日期:2018-04-04 热度:183
最近看TensorFlow代码的时候,用Git pull下来最新的master一看,哇好多的更新,然后点击去之前看到一半的cc文件继续看,好多地方都改变了。但是一看Git log,有好多巨大的commit叫什么 Merge commit for internal changes, Merge for github,没有任何的其[详细]
-
最适合Java开发者的大数据工具和框架
所属栏目:[大数据] 日期:2018-04-04 热度:119
副标题#e# 当今编程人员面对的最大挑战就是复杂性,硬件越来越复杂,OS越来越复杂,编程语言和API越来越复杂,我们构建的应用也越来越复杂。根据外媒的一项调查报告,以下列出了Java程序员在过去12个月内一直使用的一些工具或框架,或许会对你有意义。 先来[详细]
-
如果有人问你什么是大数据?不妨说说这10个典型的大数据案例
所属栏目:[大数据] 日期:2018-04-03 热度:142
也许这些例子并非来自于你所处的行业,但是你需要考虑如何做到他山之石可以攻玉。 在听Gartner的分析师Doug Laney用55分钟讲述55个大数据应用案例之前,你可能对于大数据是否落地还心存疑虑。Laney的演讲如同莎士比亚的全集一样,不过可能缺乏娱乐性而更具[详细]
-
大数据隐私保护措施有哪些?
所属栏目:[大数据] 日期:2018-04-03 热度:144
每年频发的数据泄露事件总会带来一些教训,其中一条就是,无论何时开始采取数据保护措施永远不会太晚。幸运的是,企业表现出更加关注数据隐私方面的工作,而大数据是他们最关心的领域之一。 Mary Shacklett是Transworld Data公司的总裁,该公司是一家技术[详细]
-
大数据应用不断延伸大数据 完全共享状态仍未达到
所属栏目:[大数据] 日期:2018-04-03 热度:73
数据流通与交易有利于促进数据的融合挖掘,数据的使用必须面对保护的责任与义务,尤其是对个人隐私数据的保护。大数据已经对当下生产生活的各个方面都产生重大影响,但目前中国的数据还没有完全共享。 大数据应用不断延伸完全共享状态仍未达到 日前,2017[详细]
-
大数据、人工智能等技术提升社会治理水平
所属栏目:[大数据] 日期:2018-04-03 热度:186
党的十九大报告提出,提高社会治理社会化、法治化、智能化、专业化水平。借助大数据、互联网、人脸识别等技术,各地在社会治理智能化方面积极探索,从人民群众关心的事情做起,从让人民群众满意的事情做起,不断为人民创造更加美好的生活。 慧眼识低保,社[详细]
-
机器学习和大数据正帮助化学家搜寻药物
所属栏目:[大数据] 日期:2018-04-03 热度:84
副标题#e# 2016年,制药公司Sunovion给一群经验丰富的员工布置了一项不同寻常的作业。在位于美国马萨诸塞州马尔伯勒的公司总部,这些药剂师被要求玩一个游戏,以便确定谁能发现针对新药的最好的先导化合物。他们的工作台上是一个由上百种化学结构组成的网格[详细]
-
如何才能发挥大数据的价值?
所属栏目:[大数据] 日期:2018-04-03 热度:86
大数据,数据科学,以及分析的发展与演变在今年的Strata数据会议上得到全面展示,其中包含了一个重要的信息:人们需要获取大数据的价值。 正如在一个数字表演节目中,人们选定的数字是83,认为这会难倒魔术师,魔术师在一个44矩阵填写了16个数字,在组合之[详细]
-
大数据可以帮助企业获得资金吗?
所属栏目:[大数据] 日期:2018-04-03 热度:163
企业每天都会考虑其业务和客户之间流动的所有信息。这是大数据,是在正常业务过程中发生的每一次财务和社会互动的总体情况。这种数据还包括信用信息,当前和过去的借贷行为以及企业现金流量的起伏情况。 提供这样一个全面的信用评估,使得一些顶级的另类的[详细]
-
基于大数据的政府环境决策能力建设
所属栏目:[大数据] 日期:2018-04-03 热度:141
副标题#e# 2015年国务院印发《促进大数据发展行动纲要》,首次从国家层面认定数据是国家的基础性战略资源,大数据成为提升政府治理能力的新途径。2016年环保部印发《生态环境大数据建设总体方案》,开启互联网+生态环境战略,推动政府环境治理创新。依托大[详细]
-
解析:大数据时代的城市设计模式如何?
所属栏目:[大数据] 日期:2018-04-03 热度:120
智慧城市是城市发展的高级形态,需要经过持续的复合创新发展过程才得以实现。城市设计与科技的结合,不仅仅是解决城市问题,还将有利于城市发展,也将是未来发展趋势。 一般而言,城市的向上发展大致经历资源中心(资源输出)、生产中心(加工)、消费中心[详细]
-
大数据的未来:人们应该意识到的10个预测
所属栏目:[大数据] 日期:2018-04-02 热度:127
到了2020年,世界上每个人每秒将创造7 MB的数据。在过去的几年里,我们已经创造了比人类历史上更多的数据。大数据席卷全球,并且没有放缓的迹象。人们可能会想,大数据产业从哪里开始?以下有10个大数据预测可以回答这个有趣的问题。 1. 机器学习将成为大[详细]
-
AI时代 腾讯拟合作打造全国首个无人警局
所属栏目:[大数据] 日期:2018-04-02 热度:68
在今天的武汉交警政务服务迈入AI时代的发布会上,腾讯与武汉市公安局交通管理局将携手打造全国第一个无人警局,在不久的将来就能投入使用。据悉,无人警局是以武汉交警智慧服务平台的各项能力为基础,可实现通过刷脸入场依次办理业务,通过智能终端设备全[详细]
-
大数据产业需更加注重行业应用
所属栏目:[大数据] 日期:2018-04-02 热度:109
党的十九大报告强调,加快建设制造强国,加快发展先进制造业,推动互联网、大数据、人工智能和实体经济深度融合,在中高端消费、创新引领、绿色低碳、共享经济、现代供应链、人力资本服务等领域培育新增长点,形成新动能。 对此,中国信息通信研究院云计算与大数[详细]
-
大数据时代谁给隐私“上锁”
所属栏目:[大数据] 日期:2018-04-02 热度:178
行业内部侵犯公民个人信息案件频发,让人忧心忡忡。例如,多家二手车网上交易平台均可以查找公民个人车辆信息。大数据时代,个人信息如何保护,值得深思。 车辆信息可查 近日,海外网发现,市场上多家二手车平台存在贩卖公民个人车辆隐私的状况。以查博士[详细]
-
大数据技术应用面临的问题、投资风向及场景化实践
所属栏目:[大数据] 日期:2018-04-02 热度:197
2017年,大数据和人工智能开始加速。互联网的深入发展,用户在衣、食、[详细]
-
谷歌闹哪样?Firebase推出机器学习功能
所属栏目:[大数据] 日期:2018-04-02 热度:93
谷歌旗下的公司昨日在Amsterdam的Firebase Dev Summit峰会上宣布:Firebase将会有一系列的更新,更新的重点是加强Firebase服务的集成并将更多的机器学习融入到工具包中去。 Firebase是一个开发高质量应用程序的移动平台。 值得一提的是谷歌在1月份收购的由[详细]