运维日常-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

运维日常

专栏成员

16

文章

17024

阅读量

12

订阅数

hadoop+spark+zookeeper+hive的大数据分布式集群搭建

hadoop bash bash 指令 spark

hadoop+spark+zookeeper分布式集群部署这里的排版可能不太好看因为本是我直接写在博客上的外挂标签修剪的，如果想要获得更好的阅读体验建议在我的博客中浏览1.环境准备环境的准备基于我写的初始化脚本,自用7.x系列的CentOS,老版本的就支持CentOS/Redhat6,7,8但是有点不完善，需要可以邮箱或者博客留言。os\ip hostnameblock centos7.9 192.168.222.226master rsmanage

2022-11-18

6620

btrfs 1.特性可由多个块设备组合成一个btrfs文件系统，多物理卷支持支持RAID(0,1,5,6,10),dup(冗余),single(单盘)和热更新写时复制更新机制(Cow): 复制、更新及替换指针，而非就地更改源文件支持元数据校验码机制，一旦文件计算后发现受损会自动尝试修复支持创建子卷(子卷本质是在btrfs文件系统中由btrfs创建的一个文件夹，可以单独被拿出来挂载到别的某一个目录中) 快照，还支持快照的快照（可以实现快照的增量备份）透明压缩（无需用户参与）支持

2022-11-01

6590

DNS服务器搭建

DNS服务器搭建 1.环境准备 HOSTNAME HOSTNAME AUTH 192.168.222.219 node1.com master 192.168.222.220 node2.com work 192.168.222.221 node3.com work 192.168.222.222 node4.com NFS,DNS 环境我是基于k8s搭建zookeeper的，懒得改 [root@ nodeX]# sed -ri 's/(DNS.*)=.*/\1=192.168.222.222/g

2022-11-01

7.2K0

LVS简单搭建使用

腾讯云测试服务

了解：LVS是基于OSI模型的内核层的下四层，也是附着与netfilter的input练上

2022-11-01

4340

ansible client nfs ole server

一、NFS的使用 nfs是对服务器的文件夹共享，属于NAS中的一中，可以实现多个服务器读写共享文件 1.环境 IP HOSTNAME ROLE 10.10.0.1 nfs server 10.10.0.2 client client 2.使用 [root@ nfs,client]# cat > /etc/hosts <<END 127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 ::1

2022-11-01

4800

Pxe-Cobbler 环境 IP HOSTNAME ROLE dhcp t1 dhcp dhcp t2 c1 192.168.222.30,dhcp(192.168.222.201) t3 c2 一、dhcp dhcp是基于rarp，和arp相反，arp是通过对IP来识别物理网卡mac地址，而dhcp是通过识别客户端机器的物理网卡mac地址来判断给予客户端的IP地址监听在67端口 Server: 67/UDP Client: 68/UDP arp: address resolving p

2022-11-01

8040

缓存加速服务器Varnish的搭建优化

缓存 http 网站

1.变量类型内建变量： req.*:request 表示由客户端发来的请求报文 req.http.* req.http.User-Agent,req.http.Rederer,... bereq.* 由varnish发往BE主机的httpd请求相关 bereq.http.* beresp.* 由BE主机响应给varnish的响应报文相关 beresp.http.* resp.* 由varnish响应给client相关 obj.* 存储在缓存空间中的缓存对象的属

2022-11-01

9620

vsftpd的简单搭建

client ip server 服务器配置

vsftpd服务器搭建 1.环境 IP HOTSNAME RULE 192.168.222.100 vsftpd server 192.168.222.101 client client # cat > /etc/hosts<<END 127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 ::1 localhost localhost.localdomain localhost6 loc

2022-11-01

7470

ceph分布式集群文件存储的简单搭建

分布式 yum node.js 腾讯云测试服务

环境 node1:192.168.222.246 node2:192.168.222.249 node3:192.168.222.211 client:192.168.222.141 写入每个机器的/etc/hosts文件推荐在三节点的任意一台做全部机器的ssh免密，这里我在node1上完成。一、环境准备给每个node节点加上一块硬盘，不能是逻辑卷，这里我的三个设备的都是/dev/sdb 修改主机名，必须与hosts文件一致 systemctl disable --now

2022-11-01

5380

docker-compose(wordpress)

容器镜像服务 wordpress

version: '1' services: mysql: image: mysql:5.6 restart: always volumes: - "./data:/var/lib/mysql" environment: MYSQL_ROOT_PASSWORD: password MYSQL_DATABASE: wordpress MYSQL_USER: wordpress MYSQL_PASSWORD

2022-11-01

1.1K0

Docker的TLS安全远程连接配置

容器镜像服务容器 tcp/ip SSL 证书数据分析

了解一下为什么做基于TLS传输协议和CA证书的远程连接在docker中，默认是不允许远程连接主机容器服务的，在普通的没有进行别的安全防护下开启的远程连接，只要隔壁老王知道你的IP地址再对你端口进行一下扫描尝试，便可以自由进出你的容器的房间，对你的容器们嘿嘿嘿，就问你怕不怕就完事了。所以如果有需要远程连接docker的需求，就需要基于TLS和CA的认证来保护我方容器不被嘿嘿嘿。 1.生成证书和密钥这里我的环境是IP:192.168.222.222，基于2375端口的远程连接，需要按自己的

2022-11-01

7600

hadoop+spark分布式集群搭建

spark hadoop 分布式 tcp/ip centos

hadoop+spark分布式集群部署 1.环境准备环境的准备基于我写的初始化脚本,自用7.x系列的CentOS,老版本的就支持CentOS/Redhat6,7,8但是有点不完善，需要可以邮箱或者博客留言。 os\ip hostname block centos7.9 192.168.222.226 master rsmanager,datanode,namenode.snamenode,nmanager centos7.9 192.168.222.227 node1 snamenode,nmnag

2022-11-01

3330

Redhat/CentOS用yum命令下载依赖和安装包到本地，自建yum源仓库

拓展：同步网络源到本地目录，以方便内网快速传输，更利于制作本地yum源。 reposync --repoid=xxxx #xxxx为镜像仓库名称命令使用后会在当前目录生成一个一样xxxx 的文件夹，里面放的便是你选择仓库的rpm包，一样xxxx目录下会有一个repodata目录可以为写入repo文件做指定的。写入repo文件便于以下自制本地源一样。自建yum源就是使用自己本地的rpm包来作为yum的源仓库。扩展使用yum命令下载安装包以及依赖文件到本地。 1.可以在yum命令安装

2022-11-01

1.3K0

Redhat/CentOS7本地源配置详解

一级标题第一确定你的CD连接上了，段落引用如果是图形化界面只需要看看自己桌面也有没有一个光盘文件即可，不是图形化的可以在VM上分的导航栏里点击虚拟机→可移动设备→CD→连接段落引用如果以上都做了之后还提示错误的话就检查一下VM中你的虚拟机的设置里面ISO指向文件是否有指定路径。第二步在根目录下创建ISO文件夹 mkdir /iso 第三切换到yum源文件夹/etc/repos.d/并备份移动没有用的repo文件，一些没有用的reop文件因为已经启用，在设置新的源的时候会再次检测而产生错误

2022-11-01

2930

Web状态响应码

dns error gateway ldap service

403 Forbidden.服务器已经理解请求,但是拒绝执行它 404 Not Found.请求失败,请求所希望得到的资源未在服务器上发现. 404这个状态码被广泛应用于当服务器不想揭示为何请求被拒绝,或者没有其他适合的响应可⽤的情况下. 500 Internal Server Error.服务器遇到某个未曾预料的状况,导致它无法完成对请求的处理. 一般来说,这个问题都会在服务器的程序码出错时出现. 502 Bad Gateway.作为网关或代理工作的服务器尝试执行请求时,从上游服务

2022-10-25

4050

【云安全最佳实践】redis持久化存储切换

云数据库 Redis 数据库 sql jquery

> 如果是使用过snapshot之后已经有了存储数据然后要开启aof的话,因为aof比snapshot机制的rdb文件的优先级高,redis默认会去加载第一次生成的aof的空文件,会导致全部数据未能被加载,然后如果这个时候你使用了save或bgsave或者触发了配置中的save机制,那就直接把当前的空数据库覆盖到rdb文件中了,那就可以准备收拾行李连夜坐船转到老挝,缅甸,柬埔寨了

2022-10-24

3550

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态