做算法的同学对于Kaggle应该都不陌生，除了举办算法挑战赛以外，它还提供了一个学习、练习数据分析和算法开发的平台。Kaggle提供了Kaggle Kernels，方便用户进行数据分析以及经验分享。在Kaggle Kernels中，你可以Fork别人分享的结果进行复现或者进一步分析，也可以新建一个Kernel进行数据分析和算法开发。Kaggle Kernels还提供了一个配置好的环境，以及比赛的数据集，帮你从配置本地环境中解放出来。Kaggle Kernels提供给你的是一个运行在浏览器中的Jupyter，你可以在上面进行交互式的执行代码、探索数据、训练模型等等。更多关于Kaggle Kernels的使用方法可以参考 Introduction to Kaggle Kernels，这里不再多做阐述。
Jupyter Notebook（此前被称为 IPython notebook）是一个交互式笔记本，支持运行 40 多种编程语言。
如果你经常使用 Kubernetes，那么你肯定就有定制资源清单文件的需求，但是貌似现在大家都比较喜欢使用 Helm，Helm 很好用，但也有很多缺点，比如需要一个 tiller 服务端，需要超高的权限，最重要的是如果你要想自己做一个 Helm Chart 包的话，则不是那么容易的，需要你了解一些 go template 的相关知识，它抛弃了我们在 Docker 和 Kubernetes 上面学到的一些逻辑，今天我们将为大家介绍另外一种名为Kustomize❤️的替代工具。
如果你经常使用 Kubernetes，那么你肯定就有定制资源清单文件的需求，但是貌似现在大家都比较喜欢使用 Helm，Helm 很好用，但也有很多缺点，比如需要一个 tiller 服务端，需要超高的权限，最重要的是如果你要想自己做一个 Helm Chart 包的话，则不是那么容易的，需要你了解一些 go template 的相关知识，它抛弃了我们在 Docker 和 Kubernetes 上面学到的一些知识点，今天我们将为大家介绍另外一种名为 Kustomize的替代工具。
configmap是k8s的一个配置管理组件，可以将配置以key-value的形式传递，通常用来保存不需要加密的配置信息，加密信息则需用到Secret，主要用来应对以下场景：
通过 yaml 或 json 描述 Pod 和其内容器的运行环境以及期望状态，比如一个最简单的 nginx pod 可以定义为：
选自GitHub 机器之心编译 Kubeflow 是谷歌发布的一个机器学习工具库，致力于使运行在 Kubernetes 上的机器学习变的更轻松、便捷和可扩展；Kubeflow 的目标不是重建其他服务，而是提供一种简便的方式找到最好的 OSS 解决方案。 Kubeflow 项目旨在使 Kubernetes 上的机器学习变的轻松、便捷、可扩展，其目标不是重建其他服务，而是提供一种简便的方式找到最好的 OSS 解决方案。该库包含包含的清单用于创建： 用于创建和管理交互式 Jupyter notebook 的 Ju
K8s提供了多种外部数据注入容器的方式，今天我们主要学习环境变量、ConfigMap以及Secret的使用和配置。
Jupyter， 想必大家对这个项目都耳熟能详吧。因为能够实时交互、支持异构计算、部署简单、几乎无运维成本，所以得到了很多人的青睐。笔者的身边也有很多从事科学研究的人选择了 Jupyter 作为编写 Python 的工具，当然也有一部分人选择了 PyCharm。不过笔者还是比较喜欢 VS Code，简单的纯文本编辑功能，利用丰富的插件市场来添加各种想要的功能，无缝支持远程开发，简直就是理想中的编辑器了。但是，今天还是要来考虑一下 Jupyter，毕竟 JupyterLab 的服务功能也是非常强大的。
JupyterHub 为用户组带来了笔记本的强大功能。它使用户能够访问计算环境和资源，而不会给用户带来安装和维护任务的负担。用户——包括学生、研究人员和数据科学家——可以在他们自己的工作空间中完成他们的工作，共享资源可以由系统管理员有效管理。
ConfigMap 是用来存储配置文件的 Kubernetes 资源对象，配置对象存储在 Etcd 中，配置的形式可以是完整的配置文件、key/value 等形式。
gitlab-runner 安装参考 https://docs.gitlab.com/runner/install/ 或者在 gitlab仓库的群组左侧菜单** CI/CD--Runner **页面点击"注册一个群组runner"按钮，里面有快速安装介绍
K8sService能够提供很强大的功能，通过提供ClusterIP可以作为Pod的对外访问接口，并提供软负载均衡。但是Service的ClusterIP地址只能在集群内部访问，如何让集群外部的用户访
当我们拥有一台服务器的时候，通常服务器都可能包含比本地电脑比较好的配置，特别是如果做深度学习的，服务器通常意味着有好的 GPU；然后，Jupyter notebook 允许我们可以非常直观地调试代码，每完成一个函数或者一部分代码，运行一下，保存当前代码的运行结果。
在前面三节中已经讲到如何将我们的应用部署到 k8s 集群并提供对外访问的能力，x现在可以满足基本的应用开发需求了。
最近我们构建和部署服务的方式与原来相比简直就是突飞猛进，像那种笨拙的、单一的、用于构建单体式应用程序的方式已经是过去式了。我们努力了这么久，终于达到了现在的效果。现在的应用为了提供更好的拓展性和可维护性，都会去拆解成各种相互依赖小、解耦性强的微服务，这些服务有各自的依赖和进度。如果你想去构建你所负责的服务，那么从一开始，就应该使用 CI/CD 的方式；当然，如果你走上了这条路， Jenkins 就是你的良师益友。
自从服务上云引入K8S后，我们开发模式也发生了改变。我们最能想到的一种开发流程就是：
在应用启动过程中需要一些敏感信息，比如数据库用户名、密码，如果直接明文存储在容器镜像中是不安全的，K8S提供的方案是Secret。
看到 istio-system 命名空间下 的所有应用都是绿色标识 代表Istio已部署到k8s环境中
一个常见问题是：如何处理不同环境下不同的配置？传统的解决方案是为每个环境都单独设置一个配置文件，比如 rails 项目里一般会有 development、production、test 等几个配置文件，不过此方法不易扩展：更多部署意味着更多新的环境，随着项目的不断深入，开发人员可能还会添加他们自己的环境，这将导致各种配置组合的激增，从而给管理部署增加了很多不确定因素，此外，直接在文件中保存配置的话，如果有用户名密码等敏感信息，往往意味着它们会一并被保存到版本库中，这可能会诱发安全隐患，类似的案例在 github 上已经数不胜数了。关于此类问题，12factor 给出的解决方案是在环境变量中保存配置，如此一来，代码层面上就不用再关注不同环境下配置的差异了，版本库里也不用保存敏感信息了（都保存到环境变量里面了）。
在本文中，您将学习如何在多集群环境中使用 Devtron 在 K8S 上进行应用开发。
你可能已经听过很多遍这个不算秘密的秘密了--Kubernetes Secrets 不是加密的！Secret 的值是存储在 etcd 中的 base64 encoded（编码）[1] 字符串。这意味着，任何可以访问你的集群的人，都可以轻松解码你的敏感数据。任何人？是的，几乎任何人都可以，尤其是在集群的 RBAC 设置不正确的情况下。任何人都可以访问 API 或访问 etcd。也可能是任何被授权在 Namespace 中创建 pod 或 Deploy，然后使用该权限检索该 Namespace 中所有 Secrets 的人。 如何确保集群上的 Secrets 和其他敏感信息（如 token）不被泄露？在本篇博文中，我们将讨论在 K8s 上构建、部署和运行应用程序时加密应用程序 Secrets 的几种方法。
前几天在使用k8s中的CronJob时发现了一个很奇怪的问题， 按照官方文档的demo跑起来是没有任何问题的， 但是当我想要设置每天一个固定时间点例如12点20执行一个job的时候，到了时间之后无论如何都不会执行。
对于上一篇文章我们分享了为什么要使用 ConfigMap ，我们创建 ConfigMap 的时候可以传入单个或者多个键值对，也可以传入文件，还分享了如何简单的传入 ConfigMap 里面的数据作为环境变量
在自动化流程中，对于一个应用来说，从开发阶段的配置管理，到制作容器镜像，再到最后通过K8S集群发布为服务，整个过程涉及到的配置非常多；
1、浅析k8s配置信息 ---- Secret() 以密文的形式存储数据，可以用来保存一些敏感信息，例如：OAuth tokens、私钥、密码、数据库连接、事件总线连接等等需要安全存储的私人数据。 ConfigMap 以明文的形式存储数据，可以用来保存一些非敏感信息，例如：应用的配置信息。 k8s为Secret和ConfigMap提供了4种创建方式（字面量、文件、环境文件、yaml），其实归类来看就是两种创建方式，字面量和文件。 1.1 如何注入到微服务应用程序呢 ？ k8s已经
最近在试用一个付费软件，主要是希望使用他们的Java Agent配合我们的Java应用采集一些数据，给应用做一些分析。试用前对方说的天花乱坠，什么只要一个命令，K8S集群上的对应应用就会自动带着他们的Java Agent跑起来，完全不用改任何应用代码，听的我也很有兴趣看看效果到底如何。当然，实际过程坎坷多了，毕竟，销售的嘴骗人的鬼...不过在不断地和对方研发一起debug的过程中，渐渐的也猜出了所谓的“自动”到底是怎么做到的，写一篇文章和大家分享，也许一样的思路，也能用到今后的工作中，解决一些问题。
features 包里的代码，主要是用于构建 Spark 在 K8S 中的各类资源所需要的特征，个人觉得可以理解成这些 features 就是帮你写各类 Kind 的 YAML 文件。
Kubernetes 假设 Pod 可与其它 Pod 通信，不管它们在哪个主机上。 Kubernetes 给每一个 Pod 分配一个集群私有 IP 地址，所以没必要在 Pod 与 Pod 之间创建连接或将容器的端口映射到主机端口。 这意味着同一个 Pod 内的所有容器能通过 localhost 上的端口互相连通，集群中的所有 Pod 也不需要通过 NAT 转换就能够互相看到。 本文档的剩余部分详述如何在上述网络模型之上运行可靠的服务。
在k8s中最常见的就是yaml文件了，通过一个简单的yaml文件我们就可以完成80%的功能，现在我们来编写一个简单的yaml文件nginx.yaml来启动一个nginx服务：
本文整理自《CNCF x Alibaba 云原生技术公开课》第 8 讲，点击“阅读原文”直达课程页面
我们知道 Kubernetes（或 K8s）是用于管理容器化工作负载和服务的便携式开源平台。它有助于在集群中编排和管理 pod 中的应用程序。它还有效地改进了任务，例如重新部署的零停机时间或容器的自我修复。
kustz 的一个核心理念就是 语义话， 换句话说就是具有 可读性 高， 见名知义。
应用程序通常通过使用专用的 Secret 存储来存储敏感信息，如密钥和 Token，用于与数据库、服务和外部系统进行身份验证的 Secret 等。通常这需要涉及到设置一个 Secret 存储，如 Azure Key Vault、Hashicorp Vault 等，并在那里存储应用程序级别的私密数据。为了访问这些 Secret 存储，应用程序需要导入 Secret 存储的 SDK，并使用它来访问私密数据，这可能需要相当数量的代码，这些代码与应用程序的实际业务领域无关，因此在可能使用不同供应商特定的 Secret 存储的多云场景中，这将成为更大的挑战。
前天正式宣传了一下我的「图解Pandas」（pandas.liuzaoqi.com），短短两天访问量就已经突破一万次。
在上一篇文章中我们安装了nginx application，在这个安装过程中我们部署了deployment文件，service文件，ingress文件。当然有的application还不只这些，还可能有service account，role，rolebinding，configmap，secret等等，这些资源对象构成了完整的application。那么很自然的就想到有没有办法把这些资源当作一个完整的应用包，我们只需要简单的命令就可以完成对于应用的安装升级等操作呢。可以想象一下，我们需要的是类似yum这样的工具来完成k8s应用的安装升级管理，在k8s里helm正是扮演了这样的角色。
在今天的文章中我将介绍Kubernetes中的ConfigMap对象。它的主要用途什么，为什么要用ConfigMap以及在Kubernetes里通常是如何使用ConfigMap的管理应用配置的。
Kubernetes（简称K8S） 是Google开源的分布式的容器管理平台，方便我们在服务器集群中管理我们容器化应用。
在之前的文章中，我们已经了解到如何设置一个多节点的etcd集群。在本文中，我们将利用相同的基础架构来设置和配置一个基于K3s的高可用Kubernetes集群。
上一篇讲了如何安装 K8s，并用 K8s 写了个hello,world来开了个头，这一次我们来了解下 K8s 的核心概念，K8s 的核心概念主要有：Pod、Node、Service 等，这些核心概念还有个高大上的名字叫做：资源对象，他们是通过 K8s 提供的 Kubectl 工具或者是 API 调用进行工作的，然后保存在 ectd 里；
对一个公司来说安全也是最为重要的因为可能一旦出现安全问题可能这个公司就完了,所以对密码管理是一个长久不变的话题,Kubernetes对密码管理提供了Secret组件进行管理,最终映射成环境变量,文件等方式提供使用,统一进行了管理更换方便,并且开发人员并不需要关心密码降低了密码的受众范围从而保障了安全.
–name：也可以缩写为 【-n】，【yourEnv】是新创建的虚拟环境的名字，创建完，可以装anaconda的目录下找到envs/yourEnv 目录
ConfigMap是一个或多个key/value的形式保存在k8s中，内部可以管理变量也可以管理完整的配置文件内容。
本示例描述了如何通过 Minikube 在 Kubernetes 上安装 WordPress 和 MySQL。 这两个应用都使用 PersistentVolumes 和 PersistentVolumeClaims 保存数据。
Define Environment Variables for a Container | Kubernetes
Istio 架构又换了，从 1.5 开始，把控制平面的所有组件组合并成一个单体结构叫 istiod，对于运维部署来说省去很大麻烦。Mixer 组件被移除，新版本的 HTTP 遥测默认基于 in-proxy Stats filter，同时可使用 WebAssembly 开发 in-proxy 扩展。
https://kubernetes.io/zh-cn/docs/tasks/access-application-cluster/web-ui-dashboard/
PurplePanda是一款针对云环境安全的强大工具，该工具主要针对紫队安全研究人员设计（当然也适用于红队或蓝队研究人员），可以帮助广大研究人员识别单个云环境或跨云环境的提权路径。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
