-
大数据分析师学习入门,10个数据可视化技巧
所属栏目:[教程] 日期:2019-10-15 热度:76
副标题#e# 我必须对你说实话:当我学习数据科学时,我完全低估了绘图的重要性。没错,那时一切都一团糟:我从头开始学习 python、熟悉了所有可能的算法、理解了所有东西背后的数学原理,但是我的绘图技巧很糟糕。 为什么会这样?我们总是在做同样的事情。你[详细]
-
SparkSQL访问Hive遇到的问题及解决方法
所属栏目:[教程] 日期:2019-10-14 热度:114
需要先将hadoop的core-site.xml,hive的hive-site.xml拷贝到project中 测试代码 报错 查看源码 解决方法 将$HIVE_HOME/lib下的spark-hive_2.11-2.4.2.jar与spark-hive-thriftserver_2.11-2.4.2.jar添加到project中 继续报错 查看源码 进入ConfVars 发现Con[详细]
-
Python分析信用卡反欺诈!骗我程序员,不存在的
所属栏目:[教程] 日期:2019-10-14 热度:131
副标题#e# 前言: 本文研究的是大数据量(284807条数据)下模型选择的问题,也参考了一些文献,但大多不够清晰,因此吐血整理本文,希望对大家有帮助; 本文试着从数据分析师的角度,设想拿到数据该如何寻找规律、选哪种模型来构建反欺诈模型?的角度来分析,以[详细]
-
5G手机7大关键特征
所属栏目:[教程] 日期:2019-10-14 热度:69
1. 支持高功率终端 相较于基站,手机发射功率小很多,因此5G基站覆盖短板在上行。5G频段更高,由于频段越高,无线信号的覆盖距离越小,这又导致了这个上行覆盖短板越来越长。 为了弥补这个短板,业界提出了采用高功率终端(HPUE,High Power User Equipment[详细]
-
实操:两台路由器,如何分别通过WAN和LAN口连接?
所属栏目:[教程] 日期:2019-10-14 热度:89
两个路由器在一个网段内IP地址是一样的,两个路由器连接有两个DHCP服务器共同工作所以IP会产生冲突。下面我们来一起看下分别通过WAN口和LAN口怎么连接。 WAN口连接 现在我们来看看图示连接方法(WAN口连接): 假设连上英特网的路由器为A路由器,我们将要连[详细]
-
六种领先的物联网无线技术及其最佳使用案例
所属栏目:[教程] 日期:2019-10-14 热度:190
物联网(IoT)始于网络连接,但由于物联网是一个广泛多样的领域,所以你肯定无法找到一个一刀切的通信解决方案。在本文中,我们将介绍六种最常见的物联网无线技术。 一、低功耗广域网(LPWAN) 低功耗广域网是物联网中的新现象。该系列技术通过使用小型的、廉[详细]
-
物联网解决方案中的大数据处理
所属栏目:[教程] 日期:2019-10-14 热度:119
随着物联网的演变和发展,所有可以想象到的东西(或事物)和产业都将变得更加智能:智能家居和智慧城市、智能制造机械、智能汽车、智能健康等等。无数被授权收集和交换数据的东西正在形成一个全新的网络物联网一个可以在云中收集数据、传输数据和完成用户任[详细]
-
5G预约用户超千万!是“虚火”还是“真旺”?
所属栏目:[教程] 日期:2019-10-14 热度:135
十一假期刚过,中国5G套餐预约数已超千万的消息就迅速在朋友圈刷屏,这一庞大的数字背后,也引发了业界关于5G市场的种种思考和担忧:预约热闹过后真正的5G用户会有多少?暂时不选择5G的用户有何顾虑? 从目前的数据来看,与超千万的5G预约用户相比,5G手机的[详细]
-
HTTP 3的前世今生及尝鲜
所属栏目:[教程] 日期:2019-10-14 热度:94
副标题#e# HTTP/3又迎来一个里程碑:近日Cloudflare官方宣其边缘网络上已全面提供QUIC和HTTP/3支持。那么HTTP/3可以带来哪些变化和优势呢? 对Internet的用户,并且通过浏览器和其他客户端与站点进行高效交互。可通过使用最新Chrome Canary浏览器以HTTP/3 UD[详细]
-
如何为数据集选择正确的聚类算法
所属栏目:[教程] 日期:2019-10-14 热度:160
应用聚类算法比选择最佳算法要容易得多。 每种类型都有其优缺点,如果您想要一个整洁的集群结构,就必须认真考虑。 数据聚类是安排正确的整个数据模型的重要步骤。为了进行分析,应根据共同点整理信息。 主要的问题是,什么样的公共参数提供最好的结果以及[详细]
-
如何通过修复英特尔Rapid Storage Technology驱动程序来提升PC性能?
所属栏目:[教程] 日期:2019-10-14 热度:195
【51CTO.com快译】有时Windows 10更新版不会像你期待的那样替换旧驱动程序。这种情况下,你得自行排查并解决问题。 说实话,对于大多数用户而言,如果计算机启动后就能使用,那么这台计算机工作顺畅,至少足够好。然而,对计算机运行状况和维护不重视会导[详细]
-
大数据无处不在,安全性也需要如此
所属栏目:[教程] 日期:2019-10-09 热度:157
从大数据分析中获得的见解对于企业来说是非常有价值的。但是,每个新数据流都会创建一个新的潜在攻击向量,从而使传统的外围防御措施变得过时,并使组织容易受到攻击。在以往,数据安全主管和数据科学家不得不在分析和安全之间做出选择,但是现在别无选择[详细]
-
5G网络真的无敌?第六代Wi-Fi表示不服
所属栏目:[教程] 日期:2019-10-09 热度:198
随着第五代移动通信技术(5G)正式商用,同属第五代的Wi-Fi技术(802.11ac)的处境就非常尴尬了,除了不存流量费用外,无论是网速、设备连接数还是网络延迟,5G都拥有秒杀802.11ac的资质。那么,当5G网络和5G手机普及后,Wi-Fi又该如何应对? 第六代Wi-Fi技术出[详细]
-
一个简单的算法,分布式系统的性能瞬间被提升10倍以上
所属栏目:[教程] 日期:2019-10-09 热度:77
一、概要 这篇文章,给大家聊聊分布式文件系统HDFS在大量客户端并发写数据时,如何进行性能优化? 二、背景引入 先引入一个小的背景,假如多个客户端同时要并发的写Hadoop HDFS上的一个文件,这个事儿能成吗? 明显不可以接受啊,因为HDFS上的文件是不允许并[详细]
-
大数据之什么是Hash表
所属栏目:[教程] 日期:2019-10-05 热度:177
副标题#e# 大数据之什么是Hash表,Hash,一般翻译做散列,也有直接音译为哈希的,它是基于快速存取的角度设计的,也是一种典型的空间换时间的做法。顾名思义,该数据结构可以理解为一个线性表,但是其中的元素不是紧密排列的,而是可能存在空隙。 1.散列表([详细]
-
Apache Spark Delta Lake写数据使用及实现原理代码解析
所属栏目:[教程] 日期:2019-10-05 热度:108
副标题#e# Delta Lake 写数据是其最基本的功能,而且其使用和现有的 Spark 写 Parquet 文件基本一致,在介绍 Delta Lake 实现原理之前先来看看如何使用它,具体使用如下: df.write.format(delta).save(/data/yangping.wyp/delta/test/) //数据按照dt分区 d[详细]
-
Linux TCP/IP协议栈,数据发送接收流程,TCP协议特点
所属栏目:[教程] 日期:2019-10-05 热度:144
可以毫不夸张的说现如今的互联网是基于TCP/IP构建起来的网络。弄懂协议栈的原理,无论对调试网络IO性能还是解决网络问题都是有很大帮助的。本片文章就带领大家来看看内核是如何控制网络数据流的。 TCP特点 我们都非常清楚TCP协议设计的初衷,就是保证数据[详细]
-
苹果野心获支持 无人驾驶获路测许可
所属栏目:[教程] 日期:2019-10-05 热度:86
【51CTO.com原创稿件】Business Insider带来了***的消息:苹果公司今日获得加州车辆管理部门DMV的许可证,这意味着苹果可以在加州公路上测试无人驾驶汽车。苹果这次要测试的是2015款雷克萨斯RX450h,同时,有6名驾驶员获得此次智能驾驶测试操作资格。 苹果[详细]
-
详解:VLAN、三层交换机、网关、DNS、子网掩码、MAC地址
所属栏目:[教程] 日期:2019-09-30 热度:171
副标题#e# 一、什么是VLAN VLAN中文是虚拟局域网。LAN可以是由少数几台家用计算机构成的网络,也可以是数以百计的计算机构成的企业网络。VLAN所指的LAN特指使用路由器分割的网络也就是广播域。 听上面的概念,肯定有不少朋友是一头雾水的,什么是虚拟局域网[详细]
-
理解了异地恋,就理解如何配置交换机,一文了解清楚
所属栏目:[教程] 日期:2019-09-30 热度:126
副标题#e# 前面我们多次了交换机的配置, 有朋友反映太难了,看不懂,有弱电vip技术群也不断的有朋友在问交换机的相关配置,今天我们来以步步深入的方式来讲解交换机的配置。以通俗的方式来讲解交换机的配置方式。 案例一、划分vlan,实现同交换机下pc1与pc[详细]
-
SD-WAN与VPN如何比较?
所属栏目:[教程] 日期:2019-09-30 热度:178
副标题#e# 企业在比较SD-WAN与VPN服务时,在两种技术之间进行选择应该考虑成本、云计算使用和应用意识等因素。 软件定义的WAN有时作为全球互联网上虚拟专用网络的升级版,许多IT团队都对SD-WAN与VPN服务的根本区别和相似之处感到疑惑。 尽管SD-WAN平台的首[详细]
-
5G、边缘计算和物联网有望重组网络
所属栏目:[教程] 日期:2019-09-30 热度:115
比上一代蜂窝服务(4G)相比,5G提供的无线蜂窝连接性具有更高的带宽、更低的延迟和更高的设备密度。除10 Gbps的速度和1毫秒的延迟外,5G还可以在每平方公里支持数千台设备。 5G还支持网络切片,这使运营商可以将5G无线电访问网络划分为虚拟网段,每个网段都[详细]
-
本文踩坑之k8s网络不通的问题排除
所属栏目:[教程] 日期:2019-09-29 热度:134
首先找出来保存很久的跨主机pod通信流程图。 简单解读下: 数据从源容器中发出后,经由所在主机的Docker0虚拟网卡转发到flannel0虚拟网卡,这是个P2P的虚拟网卡,flanneld服务监听在网卡的另外一端。 Flannel通过Etcd服务维护了一张节点间的路由。 源主机[详细]
-
5G无线网络信令流程
所属栏目:[教程] 日期:2019-09-29 热度:134
副标题#e# 一、5G初始接入 1. 开机入网概述 初始无线接入:当UE开机后,它的首要任务就是要找到无线网络并与无线网络建立连接,需要如下步骤; 获得上下行同步:侦听网络获得下行同步;随机接入,获取上行同步; 收发消息,建立连接 ATTACH: 建立UE与核心网之[详细]
-
数据科学领域的核心技能和新兴技能分别有哪些?
所属栏目:[教程] 日期:2019-09-27 热度:149
近年来随着大数据的迅速发展,各种各样的数据分析技能也逐渐大热,为了找到数据科学领域目前最常用的技能和未来最流行的应用趋势,我们进行了一项调查。 我们确定了数据科学技能的两个主要类别:一个是大多数受访者拥有的13种核心技能,另一个是大多数还没[详细]