当前有很多工具辅助大数据分析，但最受环境的就是Python。Python简单易用，语言有着直观的语法并且提供强大的科学计算和集群学习库。借着最近人工智能，深度学习的兴起，Python成为时下最火的语言，已经超越了Java和C，并且纳入了国家计算机等级考试。本篇文章主要讲述如何在CDH集群基于Anaconda安装包部署Python3.6.1的运行环境，并使用PySpark作业验证Python3环境的可行性。
DNS DomainNameSystem域名系统，根据域名查出IP地址 1.dig命令可以显示整个查询的过程 root@VM-38-204-ubuntu:~# dig www.sopans.com //这一段是查询参数和统计 ; <<>> DiG 9.10.3-P4-Ubuntu <<>> www.sopans.com ;; global options: +cmd ;; Got answer: ;; ->>HEADER<<- opcode: QUERY, status: NOERROR, id: 189
1. 中国IP地址信息查询系统 ---- 根据服务器公网IP查询服务商：http://ip.catr.cn 根据服务器公网IP查询 : 129.211.189.111 查询结果如下、可以看到该服务器服务器为 Tencent 腾讯云 地址段 129.211.0.0 - 129.211.255.255 网络名称 TENCENT-CN 描述 Tencent Cloud Computing (Beijing) Co., Ltd 描述 Floor 6, Yinke Building, 3
Apache Phoenix是Apache HBase上一个高效的SQL引擎，很多公司都在使用它，比如Salesforce，它开源了这个项目，并将该项目贡献到社区。很早也已经是顶级项目了。大家知道HDP中一直都包含Phoenix，老的CDH源生是不包含Phoenix的，但是Apache Phoenix社区对于C5的各个版本其实都有发布Parcel，但是这个不受Cloudera官方支持，参考Fayson之前的文章《0308-如何在CDH5.14.2中安装Phoenix4.14.0》。现在Cloudera和Hortonworks合并以后，两边的产品也进行了合并，如之前介绍的CFM，CEM集成到CDH，现如今Phoenix也包含到了CDH中，Cloudera官方会提供支持。本文Fayson会对Phoenix做一个简单介绍后，然后介绍如何在CDH5.16.2中安装和使用Phoenix。
docker容器间的通信使用Linux网络命名空间实现，下面我通过一个实验模拟下这个过程
作者：Heige(a.k.a Superhei)@知道创宇404实验室 时间：2020年5月25日
Fayson在前面的文章介绍了如何为CDH集群启用Kerberos，在集群启用Kerberos后，会对现有环境的部分代码做改造，有些人觉得使用起来不方便，想取消Kerberos。本篇文章Fayson主要介绍如何禁用CDH集群的Kerberos及禁用后对各组件服务的测试。
淘宝公司提供了一个很好用的IP地理信息查询接口。 在这里:http://ip.taobao.com/ TaobaoIPQuery2这个类将极大的简化相关的信息查询。
本文介绍一下l3xc插件，功能是将三层接口的所有入接口流量交叉连接输出到指定的FIB路径。此功能和在相同vrf中设置默认路由的效果差不多的。但是比默认路由的转发方式更加省内存和在cpu处理方面高效。
众所周知，Oracle JDK 是 Java 语言的绝对权威，很多时候 JDK 与 Java 语言近似一个概念。但我们始终要保持实事求是的精神，敢于质疑。本文记录了一次线上troubleshoot 实战，包含问题分析、解决并提交 Oracle JDK bug 的核心过程。
DNS 其实就是一个分布式的树状命名系统，它就像一个去中心化的分布式数据库，存储着从域名到 IP 地址的映射。k8s中利用CoreDNS进行域名解析。
linux 主机安装双网卡，共享一个IP地址，对外提供访问，实际 同样 连接两条物理线路到交换机 实现平时 双网卡同时工作，分流网络压力，同时提供冗余备份，监控，防止物理线路的单点故障。
自定义服务描述符(custom service descriptor，CSD)是Cloudera Manager用来描述某个产品的，比如Spark2，CDSW或者Kudu，包括Fayson在以前的文章中介绍过的自定义Livy的Parcel包，参考《0387-如何打包Livy和Zeppelin的Parcel包》。一个产品想集成到Cloudera Manager，必须具备csd文件，这样CM就可以支持该产品的配置，分发和监控。
双方观点对抗，各持自己的意见的时候，分输赢，这个时候就出现了投票功能来分上下。用户可以选择支持代表自己观点的一方进行投票，本文以红蓝双方投票为例，通过前后台交互，直观展示红蓝双方投票数和所占比例.
p { margin-bottom: 0.1in; direction: ltr; line-height: 120%; text-align: justify } p.ctl { font-size: 12pt } a:link { color: rgba(0, 0, 255, 1) }
渗透测试的能力只有在实战中才能获得更好的提高，所以这次简单的讲一讲最近对我们学校的财务处网站的简单测试。
上一节完成了vpp-sswan基本环境的安装部署，接下来搭建环境来验证ike协商及转发功能，下图是基本环境配置组网情况：
GRE（Generic Routing Encapsulation，通用路由封装）协议用来对某种协议（如IP、MPLS、以太网）的数据报文进行封装，使这些被封装的数据报文能够在另一个网络（如IP）中传输。封装前后数据报文的网络层协议可以相同，也可以不同。封装后的数据报文在网络中传输的路径，称为GRE隧道。GRE隧道是一个虚拟的点到点的连接，其两端的设备分别对数据报文进行封装及解封装。
本文描述问题及解决方法同样适用于 腾讯云 Elasticsearch Service（ES）。
ClickHouse与常用的关系型数据库MySQL或Oracle的数据类型类似，提供了丰富的数据类型支持。
最近通过Cowrie蜜罐捕获一枚有趣的后门程序，此程序用perl语言编写。功能包括：DDoS（udpflood、tcpflood、httpflood、sqlflood）、hacking（端口扫描、信息
从技术角度来说，AgentSmith-HIDS严格意义上来说并不是一个传统的“基于主机的入侵检测系统”（HIDS），因为就该项目目前开源的部分来说，它还缺少了规则引擎以及相关的检测能力。但是它可以作为一个高性能的主机信息收集工具来帮助安全研究人员构建属于自己的HIDS。
基于Workerman实现基于UDP的异步SIP服务器是一个涉及网络编程和协议实现的复杂任务。Workerman是一个高性能的PHP socket服务器框架，它支持TCP、UDP、UnixSocket等多种协议，非常适合用于开发需要长连接或高并发的网络应用。下面将详细介绍如何使用Workerman来实现一个基于UDP的异步SIP服务器。
优点：制作方便，只要进入容器，安装好环境，就可以制作一个新的镜像，并部署到其他环境。
— 邮件服务器、FTP服务器等内部服务器都已经具备，Web服务器也已开启，用来展示日常发布会的图片和内容，开放了一些不常用的端口。
如果只是想查看当前登录的用户名，那么很简单，直接使用命令：whoami即可 示例：
MongoDB是2009年问世的一个面向文档的数据库管理系统，由C++语言编写，旨在为Web应用提供可扩展的高性能数据存储解决方案。虽然在划分类别的时候后，MongoDB被认为是NoSQL的产品，但是它更像一个介于关系数据库和非关系数据库之间的产品，在非关系数据库中它功能最丰富，最像关系数据库。
ab是Apache开发的性能测试工具。在Ubuntu 中使用要通过apt-get install -yapache2-utils命令来安装。
上一篇Django 2.1.7 模型 - MVT模型增删功能讲述了关于MVT模型中列表的增加数据以及删除数据的功能，在数据返回的过程中，也有部分关于模型之间关联查询的数据。
在物联网开发中，常常需要通过网页端来控制设备，包括；获取信息、执行操作、启动停止等，就像我们在手机上会控制家里的小米盒子、路由器、电饭煲或者在线养狗等一些设备一样。在这里所有的下层设备都可以通过socket通信链接到服务端，而用户一端在通过http链接或者websocket链接到服务端，通过发送和接收数据来做出相应的行为操作。如下图；
ping程序是用来探测主机到主机之间是否可通信，如果不能ping到某台主机，表明不能和这台主机建立连接。ping使用的是ICMP协议，它发送icmp回送请求消息给目的主机。ICMP协议规定：目的主机必须返回ICMP回送应答消息给源主机。如果源主机在一定时间内收到应答，则认为主机可达。
注意：若不加上-u参数， 会出现以下提示：no server suitable for synchronization found
关于市面上常见的wifi仍然是4G模式的，5G模式记得刚出来的时候也有，都快上千了，没必要。
今天要分析的具体问题是『为什么 DNS 使用 UDP 协议』，DNS 作为整个互联网的电话簿，它能够将可以被人理解的域名翻译成可以被机器理解的 IP 地址，使得互联网的使用者不再需要直接接触很难阅读和理解的 IP 地址。作者曾经在 详解 DNS 与 CoreDNS 的实现原理 一文中介绍过 DNS 的实现原理，这篇文章中就不会介绍 DNS 的实现原理了，感兴趣的读者可以看一下。
Fayson在两年前的文章中介绍过CDH的卸载，参考《0008-如何卸载CDH（附一键卸载github源码）V1.2》，《0609-6.1.0-如何卸载CDH6.1》和《0621-6.2.0-如何卸载CDH6.2》。除非你是使用Cloudera官方提供的一键安装脚本安装的CDH，否则并没有现成的一键卸载的脚本供使用。
MySQL的企业版中提供了审计日志功能。通过审计日志可以记录用户的登录、连接、执行的查询等行为，输出XML格式或者JSON格式的日志文件。
客户端===>服务器[S] 标志位SYN 是1 , mss 65495 (每个包传输的最大数据部分是65495字节) seq序列号是87768135
数据库（Database）是按照数据结构来组织、存储和管理数据的仓库，它产生于距今六十多年前，随着信息技术和市场的发展，特别是二十世纪九十年代以后，数据管理不再仅仅是存储和管理数据，而转变成用户所需要的各种数据管理的方式。数据库有很多种类型，从最简单的存储有各种数据的表格到能够进行海量数据存储的大型数据库系统都在各个方面得到了广泛的应用。
Kong，是一个在 Nginx 反向代理基础上发展而来的 API 网关产品。我之前一直在推动的 Service Mesh，主要关注的是集群（Mesh）内微服务之间的关系，而 API 网关所管理的则是微服务集群边缘，对外服务的管理。（据我观测，Istio 近期的文档已经出现了 Gateway 等说法，似乎也对这方面的问题颇有兴趣的样子）。
安全隐患划重点： 1、印度：没有设置Elasticsearch集群安全权限； 2、婚庆网站：Elasticsearch服务器暴露到公网。 3、群友：9200端口映射到外网。
Cloudera在2018年11月29日发布了CDH5.16.1，新功能介绍可以参考Fayson之前的文章《0466-CDH5.16.1和CM5.16.1的新功能》。本文档主要描述如何在Redhat7.4安装CDH5.16.1。Cloudera大数据平台的安装主要分为4个步骤：
原文链接；https://blog.csdn.net/Eastmount/article/details/100585715
在前面的文章中，Fayson介绍了《0470-如何在Redhat7.4安装CDH5.16.1》，这里我们基于这个环境开始安装MIT Kerberos。本文Fayson主要介绍如何而在Redhat7.4的CDH5.16.1中启用Kerberos。
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github：https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 上一篇文章Fayson介绍了《如何使用HBase存储文本文件》，我们将文本文件存储到HBase中，文件名作为HBase表的Rowkey，每个文件转为二进制字节流存储到HBase表的一个column中。我们可以通过Rowkey来查询这些数据，但是我们却没办法实现这些文本文件的全文索引
Cloudera在2019年7月31日，对外宣布正式发布Cloudera Enterprise 6.3，相关介绍可以参考Fayson之前的文章《0682-Cloudera Enterprise 6.3.0发布》，《0717-6.3.0-Cloudera Manager 6.3的新功能》和《0718-6.3.0-CDH6.3的新功能》。本文档Fayson主要描述如何在Redhat7.4安装CDH6.3。CDH6与CDH5的安装步骤一致，主要包括以下四部分：
该文档主要是针对RedisGraph多活设计方案的功能测试，来说明方案是可实施是可行的。该方案设计文档参见上一篇文章 RedisGraph图形数据库多活设计方案功能测试准备条件RedisGraph的一主两从三哨兵的环境准备该次主要是高可用的功能测试资源规划图片打开哨兵docker exec -it dc1d79b6977f /bin/bashredis-cli -p 26379执行查看主节点信息sentinel master mymaster图片查看从节点信息sentinel slaves mymaster
根据前面的安装文档，我们知道CDH的安装只能使用root或者具有sudo权限的用户进行安装，但大多数企业对于服务器的root用户的管控比较严格，大多数情况下都不能够直接使用或者需要申请比较麻烦。对于这种情况，Cloudera官方提供了一种单用户安装CDH的模式，参考Fayson前面的文章《0517-如何在CDH5中使用单用户模式》。但实际情况是这种方法非常麻烦，官方其实也不建议使用，而且从CDH6开始也已经废弃了这种安装或使用方式。
https://www.tcpdump.org/manpages/tcpdump.1.html
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
