云计算技术
Openstack:novavolumeattach关键点说明
看了很多的讲解 nova 挂载云硬盘的说明文档,要么细节上说的太细没有耐心看完,要么讲解的都是简单的流程化,如果实际中遇到有问题需要解决,总感觉无从下手。本文说明的是几个关键点,纯属个人理解,方便...
(0)人顶过2017-02-04
CDH(Cloudera)与hadoop(Apache)对比
目前而言,不收费的Hadoop版本主要有三个(均是国外厂商),分别是:Apache(最原始的版本,所有发行版均基于这个版本进行改进)、Cloudera版本(Cloudera’s Distribution Including Apache Hadoop,简称...
(0)人顶过2017-02-04
开启CENTOS防火墙的端口
vim etc sysconfig iptablesiptables-save service iptables restartservice docker restart...
(0)人顶过2017-02-04
Spark:sortBy和sortByKey的函数详解
在很多应用场景都需要对结果数据进行排序,Spark中有时也不例外。在Spark中存在两种对RDD进行排序的函数,分别是 sortBy和sortByKey函数。sortBy是对标准的RDD进行排序,它是从Spark 0 9 0之后才引入的(...
(0)人顶过2017-02-04
Beam从零开始(一)
Beam从零开始(一):网上看了别人都在谈Beam,你说咱们作为技术人员技术也得紧跟着时代不是,所以也开始利用业余时间研究Beam。...
(0)人顶过2017-02-04
清算存储虚拟化的五宗罪和五个好
清算存储虚拟化的五宗罪和五个好:如今的IT界不像在从前,一项技术的产生只能是孤独前行。在目前的趋势看来,两项甚至是多项技术的融合已然成为潮流。...
(0)人顶过2017-02-04
LearningSpark:lightning-fastbigdataanalysis(2)
1 driver进程始终对应用中所有的executor进程有完整的记录。每个executor进程代表一个能够处理任务和存储RDD 数据的进程。...
(0)人顶过2017-02-04
排序算法(三)交换排序
排序算法(三)交换排序:上篇博客“排序算法(二) - 插入排序”介绍完了插入排序,这篇博客咱们聊一聊交换排序。...
(0)人顶过2017-02-04
Spark2.1.0在windows下的单机环境搭建
Spark2 1 0在windows下的单机环境搭建:该文用于讲解在windows下spark开发环境的搭建,因为现在网上的搭建多在于旧版本中,且还原系数难度很大。...
(0)人顶过2017-02-04
vpp类veth接口实现(连接多vrouter,多vbridge)
vpp类veth接口实现(连接多vrouter,多vbridge):如下图所示,需要在vpp里虚拟多个vrouter时,vrouter之间的连接可以通过创建veth口进行通信(例如图中的port2和port4,可以用一对veth实现)。...
(0)人顶过2017-02-04
机器学习系统设计(一)--入门之环境搭建
做为一门解释性高级编程语言,Python似乎是专门为机器学习而设计的,如果你是一个新手,完全可以使用Python大量便捷易用的库(往往用c语言编写的)来快速实现我们想要的功能,虽然python的执行效率比c,c++...
(0)人顶过2017-02-04
大数据架构师基础:hadoop家族、Cloudera产品系列等各种技术
大数据架构师基础:hadoop家族、Cloudera产品系列等各种技术:大数据我们都知道hadoop,可是还会各种各样的技术进入我们的视野:Spark,Storm,impala,让我们都反映不过来。...
(0)人顶过2017-02-04
docker
Docker 是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的 Linux 机器上,也可以实现虚拟化。容器是完全使用沙箱机制,相互之间不会有任何接口...
(0)人顶过2017-02-04
Linux之CentOS7.2误删怎么办?/boot目录修复
实验环境: KVM 中的 rhel7 系统。广州网络营销讲师吴家成...
(0)人顶过2017-02-04
tkinter的应用
tkinter的应用...
(0)人顶过2017-02-04
Hadoop2.5.2学习02--MR执行环境的类型
1、在windows下配置hadoop的环境变量 2、拷贝debug工具(winutils ext)到HADOOP_HOME bin 3、修改hadoop的源码 ,注意:确保项目的lib需要真实安装的jdk的lib...
(0)人顶过2017-02-04
线程加锁lock=threading.Lock()
给线程加锁:lock = threading Lock()import threadingimport timedef job1(): global A,lock for i in range(10): time sleep(1) lock acquire() A = A1 print(...
(0)人顶过2017-02-04
Hadoop2.5.2学习01--mapreduce统计单词数
Hadoop2 5 2学习01--mapreduce统计单词数...
(0)人顶过2017-02-04
Neutron源码分析(一)----- RestfulAPI篇
OpenStack的大部分组件都由2部分核心功能构成,一方面通过WSGI应用对外提供Restful API的接口;另一方面通过某种消息队列(通常为RabbitMQ)实现RPC,方便插件侧和agent间相互调用。因而准备通过2篇文章分别...
(0)人顶过2017-02-04
云服务搭建集群注意事项总结
配置集群时尽量都用hostname,并且hostname对应的ip在hosts文件进行设置时,要都用内网ip。否则,向集群中传输文件时,不同服务器之间拷贝文件走的是公网,速度底下,且耗费资源。...
(0)人顶过2017-02-04
SCSI与SATA的简单笔记
SCSI (Small Computer System Interface 小型计算机系统接口):一种用于计算机及其周边设备之间(硬盘、软驱、光驱、打印机、扫描仪等)系统级接口的独立处理器标准。...
(0)人顶过2017-02-04
Streaming
Streaming基于stom是一个分布式,实时计算的框架 Nimbus 每个节点上有一个supervisor Topology Worker Spout Bolt Task Streams Tuple...
(0)人顶过2017-02-04
hadoop自带示例wordcount
master与slave启动方式相同,进入hadoop目录下的sbin目录,命令:$cd home hadoop hadoop sbin (根据个人安装的hadoop目录调整)...
(0)人顶过2017-02-04
如何在CloudFoundry上强制使用https
如何在Cloud Foundry上强制使用httpsCloud Foundry平台一般都提供http https两种协议,但是某些时候我们只想使用https,这时候我们就可以通过cf提供的x_forwarded_proto来处理以Flask为例,在应用中加上如...
(0)人顶过2017-02-04
Spark学习笔记---RDD详解
Spark学习笔记---RDD详解...
(0)人顶过2017-02-04
从源码解析kube-scheduler默认的配置
从头来看,在kube-scheduler的main函数中,s := options NewSchedulerServer()创建SchedulerServer时,是按照默认参数创建的。...
(0)人顶过2017-02-04
elasticsearchtemplate模板
template 官方文档创建nginx模板应用到nginx-* 开头的索引设置分片数量为 3分片副本数量为 1版本号为 1PUT _template nginx{ template : nginx-* , settings : {...
(0)人顶过2017-02-04
spark解决org.apache.spark.SparkException:Kryoserializationfail
使用spark sql 的 thrift jdbc接口查询数据时报这个错误...
(0)人顶过2017-02-04
kafka一之配置文件说明
kafka一之配置文件说明...
(0)人顶过2017-02-04
alluxioheartbeat分析
心跳线程心跳线程,HeartbeatThread类作为心跳后台线程。线程主体是个可打断的循环,循环中,每一个滴答(tick)会心跳(heartbeat)一次。如果线程被打断,心跳线程结束。 心跳线程由心跳定时器(mTimer)和心...
(0)人顶过2017-02-04
    1394158
  • 首页
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 末页
Top_arrow