-
大数据世界中7种灾难性的网络安全错误
所属栏目:[教程] 日期:2019-10-12 热度:174
在人们生活的这个大数据世界中,需要防范一些网络安全错误。 如今,大数据正在以多种方式改变世界。企业依靠数据来提供高效的服务,但也必须担心网络安全风险。 行业媒体Towards Data Science提供了关于机器学习与黑客相关性的一份非常详细的指南,指出如[详细]
-
大数据分析师学习入门,10个数据可视化技巧
所属栏目:[教程] 日期:2019-10-12 热度:69
我必须对你说实话:当我学习数据科学时,我完全低估了绘图的重要性。没错,那时一切都一团糟:我从头开始学习 python、熟悉了所有可能的算法、理解了所有东西背后的数学原理,但是我的绘图技巧很糟糕。 为什么会这样?我们总是在做同样的事情。你知道的:pa[详细]
-
SparkSQL访问Hive遇到的问题及解决方法
所属栏目:[教程] 日期:2019-10-12 热度:161
需要先将hadoop的core-site.xml,hive的hive-site.xml拷贝到project中 测试代码 报错 查看源码 解决方法 将$HIVE_HOME/lib下的spark-hive_2.11-2.4.2.jar与spark-hive-thriftserver_2.11-2.4.2.jar添加到project中 继续报错 查看源码 进入ConfVars 发现Con[详细]
-
Python分析信用卡反欺诈!骗我程序员,不存在的
所属栏目:[教程] 日期:2019-10-12 热度:192
前言: 本文研究的是大数据量(284807条数据)下模型选择的问题,也参考了一些文献,但大多不够清晰,因此吐血整理本文,希望对大家有帮助; 本文试着从数据分析师的角度,设想拿到数据该如何寻找规律、选哪种模型来构建反欺诈模型?的角度来分析,以业务导向[详细]
-
5G手机7大关键特征
所属栏目:[教程] 日期:2019-10-12 热度:65
1. 支持高功率终端 相较于基站,手机发射功率小很多,因此5G基站覆盖短板在上行。5G频段更高,由于频段越高,无线信号的覆盖距离越小,这又导致了这个上行覆盖短板越来越长。 为了弥补这个短板,业界提出了采用高功率终端(HPUE,High Power User Equipment[详细]
-
实操:两台路由器,如何分别通过WAN和LAN口连接?
所属栏目:[教程] 日期:2019-10-12 热度:53
两个路由器在一个网段内IP地址是一样的,两个路由器连接有两个DHCP服务器共同工作所以IP会产生冲突。下面我们来一起看下分别通过WAN口和LAN口怎么连接。 WAN口连接 现在我们来看看图示连接方法(WAN口连接): 假设连上英特网的路由器为A路由器,我们将要连[详细]
-
六种领先的物联网无线技术及其最佳使用案例
所属栏目:[教程] 日期:2019-10-12 热度:149
物联网(IoT)始于网络连接,但由于物联网是一个广泛多样的领域,所以你肯定无法找到一个一刀切的通信解决方案。在本文中,我们将介绍六种最常见的物联网无线技术。 一、低功耗广域网(LPWAN) 低功耗广域网是物联网中的新现象。该系列技术通过使用小型的、廉[详细]
-
物联网解决方案中的大数据处理
所属栏目:[教程] 日期:2019-10-12 热度:136
随着物联网的演变和发展,所有可以想象到的东西(或事物)和产业都将变得更加智能:智能家居和智慧城市、智能制造机械、智能汽车、智能健康等等。无数被授权收集和交换数据的东西正在形成一个全新的网络物联网一个可以在云中收集数据、传输数据和完成用户任[详细]
-
大数据无处不在,安全性也需要如此
所属栏目:[教程] 日期:2019-10-08 热度:61
从大数据分析中获得的见解对于企业来说是非常有价值的。但是,每个新数据流都会创建一个新的潜在攻击向量,从而使传统的外围防御措施变得过时,并使组织容易受到攻击。在以往,数据安全主管和数据科学家不得不在分析和安全之间做出选择,但是现在别无选择[详细]
-
大数据之什么是Hash表
所属栏目:[教程] 日期:2019-10-05 热度:186
大数据之什么是Hash表,Hash,一般翻译做散列,也有直接音译为哈希的,它是基于快速存取的角度设计的,也是一种典型的空间换时间的做法。顾名思义,该数据结构可以理解为一个线性表,但是其中的元素不是紧密排列的,而是可能存在空隙。 1.散列表(Hash tabl[详细]
-
Apache Spark Delta Lake写数据使用及实现原理代码解析
所属栏目:[教程] 日期:2019-10-05 热度:52
Delta Lake 写数据是其最基本的功能,而且其使用和现有的 Spark 写 Parquet 文件基本一致,在介绍 Delta Lake 实现原理之前先来看看如何使用它,具体使用如下: df.write.format(delta).save(/data/yangping.wyp/delta/test/) //数据按照dt分区 df.write.f[详细]
-
Linux TCP/IP协议栈,数据发送接收流程,TCP协议特点
所属栏目:[教程] 日期:2019-10-05 热度:175
可以毫不夸张的说现如今的互联网是基于TCP/IP构建起来的网络。弄懂协议栈的原理,无论对调试网络IO性能还是解决网络问题都是有很大帮助的。本片文章就带领大家来看看内核是如何控制网络数据流的。 TCP特点 我们都非常清楚TCP协议设计的初衷,就是保证数据[详细]
-
苹果野心获支持 无人驾驶获路测许可
所属栏目:[教程] 日期:2019-10-05 热度:57
【51CTO.com原创稿件】Business Insider带来了***的消息:苹果公司今日获得加州车辆管理部门DMV的许可证,这意味着苹果可以在加州公路上测试无人驾驶汽车。苹果这次要测试的是2015款雷克萨斯RX450h,同时,有6名驾驶员获得此次智能驾驶测试操作资格。 苹果[详细]
-
理解了异地恋,就理解如何配置交换机,一文了解清楚
所属栏目:[教程] 日期:2019-09-30 热度:96
前面我们多次了交换机的配置, 有朋友反映太难了,看不懂,有弱电vip技术群也不断的有朋友在问交换机的相关配置,今天我们来以步步深入的方式来讲解交换机的配置。以通俗的方式来讲解交换机的配置方式。 案例一、划分vlan,实现同交换机下pc1与pc2不通信[详细]
-
SD-WAN与VPN如何比较?
所属栏目:[教程] 日期:2019-09-30 热度:193
企业在比较SD-WAN与VPN服务时,在两种技术之间进行选择应该考虑成本、云计算使用和应用意识等因素。 软件定义的WAN有时作为全球互联网上虚拟专用网络的升级版,许多IT团队都对SD-WAN与VPN服务的根本区别和相似之处感到疑惑。 尽管SD-WAN平台的首选连接选项[详细]
-
5G、边缘计算和物联网有望重组网络
所属栏目:[教程] 日期:2019-09-30 热度:199
比上一代蜂窝服务(4G)相比,5G提供的无线蜂窝连接性具有更高的带宽、更低的延迟和更高的设备密度。除10 Gbps的速度和1毫秒的延迟外,5G还可以在每平方公里支持数千台设备。 5G还支持网络切片,这使运营商可以将5G无线电访问网络划分为虚拟网段,每个网段都[详细]
-
本文踩坑之k8s网络不通的问题排除
所属栏目:[教程] 日期:2019-09-29 热度:61
首先找出来保存很久的跨主机pod通信流程图。 简单解读下: 数据从源容器中发出后,经由所在主机的Docker0虚拟网卡转发到flannel0虚拟网卡,这是个P2P的虚拟网卡,flanneld服务监听在网卡的另外一端。 Flannel通过Etcd服务维护了一张节点间的路由。 源主机[详细]
-
5G无线网络信令流程
所属栏目:[教程] 日期:2019-09-29 热度:146
一、5G初始接入 1. 开机入网概述 初始无线接入:当UE开机后,它的首要任务就是要找到无线网络并与无线网络建立连接,需要如下步骤; 获得上下行同步:侦听网络获得下行同步;随机接入,获取上行同步; 收发消息,建立连接 ATTACH: 建立UE与核心网之间相同的[详细]
-
详解:VLAN、三层交换机、网关、DNS、子网掩码、MAC地址
所属栏目:[教程] 日期:2019-09-29 热度:59
一、什么是VLAN VLAN中文是虚拟局域网。LAN可以是由少数几台家用计算机构成的网络,也可以是数以百计的计算机构成的企业网络。VLAN所指的LAN特指使用路由器分割的网络也就是广播域。 听上面的概念,肯定有不少朋友是一头雾水的,什么是虚拟局域网?好好的,[详细]
-
带你认识HDFS和如何创建3个节点HDFS集群
所属栏目:[教程] 日期:2019-09-28 热度:174
在本文中,大数据专家将为您介绍如何使用HDFS以及如何利用HDFS创建HDFS集群节点。 我们将从HDFS、Zookeeper、Hbase和OpenTSDB上的系列博客开始,了解如何利用这些服务设置OpenTSDB集群。在本文中,我们将探究HDFS。 HDFS Hadoop分布式文件系统(HDFS)是一种[详细]
-
5G发牌百日,浪潮云海推动“高新视频”从概念走向落地
所属栏目:[教程] 日期:2019-09-28 热度:137
日前,基于5G的高新视频新概念被提出。对于高新视频业务,浪潮云海在实施广电互联互通融合媒体云平台项目时已有一定了解,未来浪潮云海将发挥在大规模行业云方面的积累,推动高新视频产业从概念走向落地。 2019年6月6日,中国广电获得5G商用牌照,距今已百[详细]
-
如何保护5G基础设施
所属栏目:[教程] 日期:2019-09-28 热度:55
使用电子访问控制可以对5G基础设施进行物理安全管理。 如今,移动计算和通信的5G时代正在迅速向前发展。5G代表了第五代无线基础设施,这是大规模的网络技术。它可以提供更快的数据传输速率,甚至可以减少需要大量数据的应用程序的延迟、高带宽以及更多的连[详细]
-
如何高效地进行数据建模
所属栏目:[教程] 日期:2019-09-28 热度:130
理解数据是控制任何企业的先决条件。但只有当这些知识能够被分享和传播时,理解才是有用的。有效的数据建模应该是任何企业架构师的首要关注点。 在我的上一篇文章中,我认为理解一个企业的数据是指导一个企业的核心。但理解只是问题的一半。另一半是能够记[详细]
-
5G时代可能才是最难的时代
所属栏目:[教程] 日期:2019-09-28 热度:163
当我们谈5G营销的时候,我们在谈论什么? 由于今年的整体大环境不好,正好现在处于4G转5G的前期节点上,不少人把营销的希望寄托在5G上,但可惜的是,5G救不了营销,甚至会让营销变得越来越难做。 5G无疑会让广告行业和广告表现形式发生巨大的变化,有一些观[详细]
-
Wi-Fi 6无需再观望 此前遭遇“四无”阻碍普及
所属栏目:[教程] 日期:2019-09-28 热度:78
尽管Wi-Fi 6无线技术已出现了两年多,当时它还遵循着802.11ax的习惯叫法,但似乎相比Wi-Fi 5(802.11ac)的持续增长,人们对于Wi-Fi 6的设备仍持谨慎的观望态度。直到本月中旬行业联盟启动了Wi-Fi 6无线标准的认证工作,一时间才让这个新标准再度赢回了不少[详细]