开发环境总体版本信息如下： 1、Linux：CentOS 6.8 2、Java版本：jdk-8u172-linux-x64.tar.gz 3、Hadoop版本：hadoop-3.1.0.tar.gz 4...、scala版本：scala-2.12.6.tgz 5、Python版本：Python-3.6.5.tgz 6、spark版本：spark-2.3.0-bin-hadoop2.7.tgz 7、zookeeper...的安装 1、下载并上传spark安装文件到bigdata用户家目录下的bigdata目录下，然后解压 2、配置slaves 3、配置spark-env.sh 4、把配置好的spark分发slave1...和slave2上面 scp -r ~/bigdata/spark-2.3.0-bin-hadoop2.7 bigdata@slave1:~/bigdata scp -r ~/bigdata/spark-...2.3.0-bin-hadoop2.7 bigdata@slave2:~/bigdata 5、在master上配置环境变量 source ~/.bash_profile 6、启动spark 7、确认
1、编辑 vim /etc/profile 2、设置 # set mvn export JAVA_HOME=/usr/lib/jvm/jre-1.8.0-op...
Linux 下配置代理可以使我们访问github更加的快速，大大加快wget或者git clone的速度。...如果有结果返回，说明代理配置成功！
关于Linux下搭建FTP服务的文章网上有很多，但是大部分都局限于某一点，在实际操作过程中会遇到各种问题，针对本人在使用中用到的一些设置和出现的问题对网络信息进行了归纳整理和总结。...user_list 该文件用来指示的默认账户在默认情况下也不能访问ftp. vsftpd.conf vsftpd的主配置文件. ftpusers和user_list用来控制登录用户。...3、通信编码模式 默认情况下可以通过ascii模式传输。将配置改为NO后，只能通过binary形式传输。...因为在很多情况下客户端处于VLAN等网络环境下，很难主动给出链接端口，不得不采用被动模式，出现这个错误并不能通过关闭PASV模式解决，而应该寻找PASV各方面的位置，找到配置中存在的问题进行解决。...马哥教育历经近10年发展，已成为面向企业级资深运维工程师、架构师的专业集训营式高端就业Linux培训学院。
什么是 ufw 在 Ubuntu 系统下，可以使用 ufw 打开/关闭 防火墙。
本文基于x86_64 Linux下来描述如何配值 HugePages。 有关HugePages的特性请参考：Linux HugePage 特性 1、为什么需要配值HugePages ？...d、No Swapping: We must avoid swapping to happen on Linux OS at all Document 1295478.1.... 使用Oracle 提供的脚本hugepages_settings.sh的脚本来计算vm.nr_hugepages的值 在执行脚本之前确保所有的Oracle 实例已启动以及ASM也启动(存在的情形下)...h、验证配值 HugePages相关参数的值会随着当前服务器上的实例的停止与启动而动态发生变化 通常情况下，HugePages_Free的值应当小于HugePages_Total的值，在HugePages...HugePages_Free: 131 HugePages_Rsvd: 0 Hugepagesize: 2048 kB 3、使用HugePages的注意事项 下面的三种情形应当重新配置
Spark读取配置 我们知道，有一些配置可以在多个地方配置。...配置 spark-env.sh的SPARK_EXECUTOR_MEMORY配置 同一个配置可以在多处设置，这显然会造成迷惑，不知道spark为什么到现在还保留这样的逻辑。...在其构造函数中就完成了从 『spark-submit --选项』、『spark-defaults.conf』、『spark-env.sh』中读取配置，并根据策略决定使用哪个配置。...Step1：创建各配置成员并赋空值 这一步比较简单，定义了所有要从『spark-submit --选项』、『spark-defaults.conf』、『spark-env.sh』中读取的配置，并赋空值。...若一个配置在多处设置，则优先级如下： spark-submit --选项 > spark-defaults.conf配置 > spark-env.sh配置 > 默认值 最后，附上流程图 ?
highlight Comment ctermfg=lightblue guifg=darkblue
本文主要描述了Linux下httpd(2.2版本)的相关基本配置。...Environment（全局环境配置） ### Section 2: 'Main' server configuration （核心服务器配置） ### Section...foo_module modules/mod_foo.so 相对于ServerRoot参数所指定的路径； ServerRoot /etc/httpd 可以参考： [Linux...下安装Apache httpd](http://blog.csdn.net/leshami/article/details/49906229) 9、工作模式参数配置 12、Directory容器中的访问控制定义 (a) Options (页面如何展示给用户看) Indexes: 当访问的路径下无默认的主页面时
sudo wget -O /etc/yum.repos.d/jenkins.repo http://pkg.jenkins-ci.org/redhat/jenk...
jdk sudo apt-get install openjdk-8-jdk #8的版本 sudo apt-get install openjdk-7-jdk #7的版本 Fedora, Oracle Linux..., Red Hat Enterprise Linux,的安装方式 $ su -c "yum install java-1.8.0-openjdk-devel" $ su -c "yum install....rpm" 安装rpm的命令 rpm -ivh rpm -ivh jdk-8u181-linux-x64.rpm warning: jdk-8u181-linux-x64.rpm: Header V3...jre sudo apt-get install openjdk-8-jre #8的版本 sudo apt-get install openjdk-7-jre #7的版本 Fedora, Oracle Linux..., Red Hat Enterprise Linux,的安装方式 $ su -c "yum install java-11-openjdk" $ su -c "yum install java-1.8.0
最近需要一个Linux下的JavaWeb环境，所以写下这篇文章，好记性不如烂笔头嘛，O(∩_∩)O哈哈~。...本篇教程用的是Centos7系统，需要安装JDK1.8+Tomcat8，然后也有MySQL在Linux下的安装教程。...准备工作：上传文件到服务器 一般来说，Linux系统网络传输文件多用sftp命令，也可以用其他一些软件等等，也可以在Windows系统下传输文件到Linux系统，之前我们公众号的教程：在Windows系统下使用...如图，不加-C会报错： 二 配置JDK环境变量 在命令行界面下，如果你登录的不是root账户，请切换到root账户(sudo -root)或者临时取得root权限(sudo -i)。...附录：查看端口情况 1、先到tomcat配置文件查看tomcat的端口是什么，配置文件一般是：$CATALINA_HOME/conf/server.xml这个文件，查找 <Connector port=
示例环境： OS: FC2 NIC: eth0 host name: fc2 ip: 192.168.0.20/24 default gateway: 192...
前言： Linux下让程序后台运行的方法有很多，例如： nohuop、screen、supervisor等。...所以我写了这篇文章，来详细解释nohup断开的原因及处理办法： nohup自动断开原因及处理办法 俗话说，技多不压身，所以我下面详细介绍在Centos和Debian下的Supervisor的详细安装运行方法...而是需要我们自己复制配置文件到/etc/文件夹。...user=root #指定运行用户 command=bash /root/1.sh #启动程序的命令 所以我们总结一下，Debian和Centos的Supervisor配置文件异同点如下： 差异：...Debian配置文件位于conf.d/下，后缀为.conf Centos配置位于supervisord.d/下，后缀为.ini 相同点： 运行均相同，相关命令如下： supervisorctl reload
下面就linux运维中的路由操作做一梳理： ------------------------------------------------------------------------------...跨越从源主机到目标主机的一个互联网络来转发数据包的过程 路由器：能够将数据包转发到正确的目的地，并在转发过程中选择最佳路径的设备 路由表：在路由器中维护的路由条目，路由器根据路由表做路径选择 直连路由：当在路由器上配置了接口的...IP地址，并且接口状态为up的时候，路由表中就出现直连路由项 静态路由：是由管理员手工配置的，是单向的。...默认没有这个文件 ，得手动创建一个 5）设置包转发 在Linux中默认的内核配置已经包含了路由功能，但默认并没有在系统启动时启用此功能； 开启Linux的路由功能可以通过调整内核的网络参数来实现，方法如下...net.ipv4.ip_forward=1 永久开启路由功能 # vim /etc/sysctl.conf net.ipv4.ip_forward = 1 # sysctl -p 6）静态路由配置
下面是我的配置信息： set shortmess=atI syntax enable syntax on set ai set nu set ruler set autoindent set nocompatible
网络文件系统是 Linux 支持的文件系统中的一种，也被称为NFS。NFS允许一个系统在网络上与他人共享目录和文件。通过使用NFS，用户和程序可以像访问本地文件一样访问远端系统上的文件。...下面来介绍一下 NFS 的配置。...假设有2台 Linux 服务器，IP地址分别为 192.168.0.1 和 192.168.0.2，我们希望将 192.168.0.1 作为 Server 端，把其 /home/public 目录共享给作为客户端的...home/nfs/public mount -t nfs 192.168.0.1:/home/public /home/nfs/public //将Server端的共享目录挂载到本地路径 下面来介绍一下Server...端配置参数的含义： ro：该主机对该共享目录有只读权限 rw：该主机对该共享目录有读写权限 root_squash：客户机用root用户访问该共享文件夹时，将root用户映射成匿名用户 no_root_squash
在linux下配置邮件发送功能 首先安装mailx 包，yum install mailx 在 vi /etc/mail.rc 的文件的最后添加以下配置 set from=xxxxx...xxxx set smtp-auth=login 执行以下 命令测试是否发送成功 echo "内容" | mail -s "标题" 123@126.com ### 邮箱地址 在linux
从终端打开配置文件： vim ~/.vimrc 添加如下代码： set tabstop=4 set softtabstop=4 set shiftwidth=4 set autoindent set...set hlsearch 9.可以删除任意值 set backspace=2 10.最后，有一套配色方案，可以用起来像Sublime Text： 网上下载”monokai.vim”并放在~/.vim下的
一.打开VMWare的编辑->虚拟网络设置->删除VMnet8->添加网络->选择VMnet8->选择NAT模式->点击应用->确定。完成虚拟网络的设置
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
