柴少的官方网站 技术在学习中进步,水平在分享中升华

分布式存储MooseFS的搭建

MFS一般指得的就是MooseFS,还有一个MogileFS(FastDFS就跟它很像),分布式文件系统大家已经都不陌生了,谷歌的GFS,apache的HDFS,淘宝的TGS。了解一个东西一般应该先找到它的官网,下面是对应的一些链接:MooseFS的官网:https://moosefs.com/index.htmlyum安装:https://moosefs.com/download/centosfedorarhel.html官方文档:https://moosefs.com/documentati
作者:忙碌的柴少 分类:分布式文件系统 浏览:6587 评论:0

Fastdfs与nginx结合提供web服务

注意:4.0.6版本之后,fastdfs已经删除了http web的服务,因此需要与nginx整合,tracker与storage都需要配置nginx,其中storage需要结合nginx_fastdfs模块,tracker不需要,tracker上的nginx主要起代理调度作用。所以前面配置文件里面涉及到的HTTP的部分都不用关注,都没用。生产上面也是后端storage上面都部署nginx,然后前端nginx调用它们开放的端口。一、nginx和fastdfs整合的单机操作步骤1.1 fast安装
作者:忙碌的柴少 分类:分布式文件系统 浏览:7453 评论:0

nginx系列(七)之各种小问题

nginx遇到的各种小问题就记录在这里吧,就不用老开新文章了。一、nginx error_page遇到后端错误(如500)时不跳转出现问题的情况:服务器是用nginx+php做的web服务器,然后用nginx里面配置参数:try_files $uri $uri/ /index.php$is_args$args;做的入口隐藏设置。如我现在的域名是:www.51niux.com啊,然后我访问网站的任何页面都显示的是www.51niux.com后面跟目录的形式,而非www.51niux.com/ind
作者:忙碌的柴少 分类:Web环境搭建 浏览:5546 评论:0

FastDFS之集群部署

https://blog.51niux.com/?id=137 已经对FastDFS做了一个基本介绍,这里来用测试环境搭建一套集群,然后会在部署操作过程中去捋顺一下原理性知识点。一、环境规划与配置文件修改1.1 环境规划IP地址主机名主机角色192.168.1.103dfs-tracker-1跟踪服务器1+存储服务器1192.168.1.104dfs-tracker-2跟踪服务器2+存储服务器2192.168.1.105dfs-storage-group2-1存储服务器3192.168.1.106d
作者:忙碌的柴少 分类:分布式文件系统 浏览:6933 评论:0

FastDFS之基础知识

分布式文件系统是什么,大家都已经接触很长时间了,简单来说一块磁盘的容量是有限的现在最大是8T,以后可能十几T,但是现在是一个数据爆炸的年代,就算你12个盘做成一个大RAID也是不够的,那么用硬件存储吧。随随便便都是百万级的,接触这种硬件级别的存储也有几年了,一般这种硬件级别的存储可能会考虑用来做数据库之类的存储,如果用来存储海量的数据就太浪费了。不同的场景用不同的东西,这里记录的这块开源的FastDFS分布式文件系统,也是大家都熟悉的,用来专门存储小文件的。一、FastDFS简介1.1 Fast
作者:忙碌的柴少 分类:分布式文件系统 浏览:7941 评论:2

nginx系列(六)之HTTPS

一、nginx+ssl搭建HTTPS服务器1.1 HTTPS介绍超文本传输安全协议(缩写:HTTPS,英语:Hypertext Transfer Protocol Secure)是超文本传输协议和SSL/TLS的组合,用以提供加密通讯及对网络服务器身份的鉴定。HTTPS连接经常被用于万维网上的交易支付和企业信息系统中敏感信息的传输。HTTPS不应与在RFC 2660中定义的安全超文本传输协议(S-HTTP)相混。HTTPS 目前已经是所有注重隐私和安全的网站的首选,随着技术的不断发展,HTTPS
作者:忙碌的柴少 分类:Web环境搭建 浏览:3407 评论:0

nginx系列(五)proxy_set_header设置

https://blog.51niux.com/?id=126  #已经对HTTP的header头信息做了简单介绍。一、proxy_set_header介绍1.1 先来了解下HTTP的请求方式($request_method)GET:向Web服务器请求一个文件POST:向Web服务器发送数据让Web服务器进行处理PUT:向Web服务器发送数据并存储在Web服务器内部HEAD:检查一个对象是否存在DELETE:从Web服务器上删除一个文件CONNECT:对通道提供支持TRACE:跟踪到服务器
作者:忙碌的柴少 分类:Web环境搭建 浏览:10843 评论:0

Centos7系统rc.local不起作用问题

这也是一个很小的问题就是记录一下。Centos6习惯用 /etc/rc.local 文件来开机自启动我们一些服务或者操作了。但是Centos7改了,chkconfig也不能用了。发现定义了/etc/rc.local文件也不能用了。#cat /etc/rc.d/rc.local #!/bin/bash # THIS FILE IS ADDED FOR COMPATIBILITY PURPOSES # # 
作者:忙碌的柴少 分类:解决小问题 浏览:8805 评论:0

解决qcow2高版本兼容问题

我在Centos7上面将kvm的模板机镜像转换成qcow2格式的镜像,这样的话文件会是其实际占用磁盘的大小,文件小了传输的时间必然就缩短了。我在Centos7上面执行:# qemu-img convert -f raw -O qcow2 demo-centos6.img demo-centos6.img.qcow2然后demo-centos6.img.qcow2就变成了只有几G,这样传输起来很嗨很快就传完了。但是有些
作者:忙碌的柴少 分类:解决小问题 浏览:10745 评论:0

Redis的持久化以及主从复制

一、持久化因为数据是存储在内存中的如果停电机器重启等数据就没了,为了使redis在重启之后仍能保证数据不丢失,需要将数据从内存中某种形式同步到硬盘中,这一过程就是持久化。Redis支持两种方式的持久化,一种是RDB方式一种是AOF方式。可以单独使用其中一种或将二者结合使用。1.1 RDB方式RDB介绍:在指定的时间间隔内将内存中的数据集快照写入磁盘,也就是Snapshot快照的形式,它恢复时是将快照文件直接读到内存里。Redis会单独创建(fork)一个子进程来进行持久化,会先将数据写入到一个临
作者:忙碌的柴少 分类:Redis 浏览:4770 评论:0