柴少鹏的官方网站 技术在分享中进步,水平在学习中升华

Hadoop(二)操作命令与目录结构

上一章:http://blog.51niux.com/?id=175   #已经对hadoop进行了介绍和hadoop的集群部署做了介绍,这里在深入的继续记录。官网文档:https://hadoop.apache.org/docs/   #这里有各个版本的一些文档一、操作命令1.1 Hadoop命令概述:官网文档:https://hadoop.apache.org/docs/r2.7.4/hadoop-project-dist/hadoop-common/CommandsMan
作者:忙碌的柴少 分类:大数据 浏览:2040 评论:0

Hadoop(一)介绍与部署

       写博客被朋友喷,写个东西也不介绍下,谁知道你写的是个什么东西,干什么的。好的下面对hadoop好好介绍介绍。       Hadoop是Apache开源组织的一个分布式计算开源框架(http://hadoop.apache.org/),Hadoop是一个开发和运行处理大规模数据的软件平台,是Appach的一个用java语言实现开源软件框架,实现在大量计算机组成
作者:忙碌的柴少 分类:大数据 浏览:14164 评论:0

JumpServer安装部署

堡垒机大家都已经不在陌生,堡垒机不仅仅是跳板机,还会有操作日志审计等一系列的功能,简而言之就是你对服务器的操作就是交给堡垒机,堡垒机会验证你的权限,有对应主机的权限才能做相应的操作。堡垒机分商业的也分开源的,当然开源大家印象比较深的就是jumpserver。这些概念性的东西百度一搜很多的,很详细。jumpserver官网:http://www.jumpserver.org/jumpserver源码下载:https://github.com/jumpserver/jumpserverjumpser
作者:忙碌的柴少 分类:Jumpserver 浏览:15734 评论:3

inotify+rsync实时同步慢的问题

     当然现在基本各种分布式的情况下,用到inotify+rsync进行目录的实时同步的形式场景已经不是很多了,但是还是有点的,比如机器规模少就两台机器间进行数据同步,可能就要简单的来搞一搞。这里就不说rsyncd服务器怎么搭建了,以前有一篇记录。      Inotify 是一个 Linux特性,它监控文件系统操作,比如读取、写入和创建。Inotify 反应灵敏,用法非常简单,并且比 cron 任务的
作者:忙碌的柴少 分类:解决小问题 浏览:2099 评论:0

Haproxy(二)详细记录

http://blog.51niux.com/?id=155   #已经记录了haproxy的简单搭建部署和参数,这里记录集中场景 一、各种负载均衡1.1 tcp反向代理tcp 22端口反向代理:# vim /etc/haproxy/haproxy.cfg  #在最后添加一段配置,反向代理一个22端口再反向代理一个80端口listen test_ssh         bind 
作者:忙碌的柴少 分类:负载均衡 浏览:5469 评论:0

OpenStack(四)Cinder结合Ceph做多存储后端

http://blog.51niux.com/?id=170  #已经介绍了cinder以及如何简单的使用LVM做后端存储,这里呢主要是针对与Ceph的结合来做介绍。http://blog.51niux.com/?id=162   #已经记录了ceph的部署过程http://docs.ceph.com/docs/master/rbd/rbd-openstack/   #ceph官网记录了openstack如何跟ceph结合使用一、配置Ceph为Openstac
作者:忙碌的柴少 分类:OpenStack 浏览:9298 评论:2

OpenStack(三)Cinder结合LVM做云盘

一、OpenStack简介第一部分的文字及图片内容来自《Openstack实战指南》。1.1 OpenStack的结构OpenStack包含了许多组件。有些组件会首先出现在孵化项目中,待成熟以后进入下一个OpenStack发行版的核心服务中。OpenStack的核心服务包括:Nova  #计算服务(Compute as a Service) Neutron  #网络服务(Network as a 
作者:忙碌的柴少 分类:OpenStack 浏览:7530 评论:1

OpenStack(二)简单使用

前面已经记录了openstack的简单部署,当然后续还会有各个组件的详细记录,这里呢,做一些简单操作,加深一下对openstack的理解。一、创建网络并创建自定义镜像虚拟机1.1 创建虚拟机内网使用demo用户创建网络项目==》选择网络==》网络==》创建网络(页面的右上角)#点击编辑网络是可以修改网络的名称和是否共享,右边有个下拉箭头可以选择创建子网或者删除网络,点击名称可以进入到这个网络进行创建子网和删除子网或者再点击子网的名称也可以对子网进行修改。修改网络并创建子网现在我们对上面的网络名称
作者:忙碌的柴少 分类:OpenStack 浏览:3779 评论:0

OpenStack(一)搭建部署

OpenStack大家已经不陌生了,很强大的开源的云计算管理平台项目。中文社区:http://www.openstack.cn/官网:https://www.openstack.org/配置文件解释请参考官网:https://docs.openstack.org/pike/configuration/本篇博文是对openstack的mitaka版本搭建部署的记录。一、搭建部署的前期准备 1.1 服务器的规划1.2 配置管理网络和数据网络管理网络就是机器第一块网卡的IP为192.168.1.0/2
作者:忙碌的柴少 分类:OpenStack 浏览:6581 评论:0

linux系统登录就邮件提示

有的时候我们的服务器比较重要平时也几乎不登录,比如yum源服务器,所有服务器都会通过自建yum源来进行yum安装,又比如邮件服务器,想做成有人登陆就会有提醒,比如发送邮件,至少我们知道有人登录了是不是自己人登录的。简单写个小脚本就可以了。#cat /etc/profile.d/logincheck.sh   #在/etc/profile.d/目录下写一个简单的登录检测脚本#!/bin/bash LANG=en User=`whoami` loginip=`who|awk
作者:忙碌的柴少 分类:解决小问题 浏览:1607 评论:0