最近的互联网线上事故发生比较频繁，9月19日网上爆料出顺丰近期发生了一起线上删库事件，在这里就不介绍了。 这里分享一下最近发生在我公司的事故，以及如何避免，并且如何处理优化。 该宕机的直接原因是使用 Redis 的 keys * 命令引起的，一共造成了某个服务化项目的两次宕机。 间接原因还有很多，技术跟不上业务的发展，由每日百万量到千万级是一个大的跨进，公司对于系统优化的处理优先级不高，技术开发人手的短缺。 第一次宕机 2018年9月13日的某个点，公司某服务化项目的 RDS 数据库实例连接飙升，CPU 升到 100%，拒绝了其他应用的所有请求服务。 整个过程如下： 监控报警，显示RDS的CPU使用率达到80%以上，DBA介入，准备KILL慢SQL 1分钟内，没有发现明显阻塞的SQL...阅读全文
Querier–查询器处理PromQL的求值。如果是最近的数据，则从大块存储和或内部获取样本其他组件：Ruler–处理alertmanager产生的警报Alertmanager –评估警报规则ConfigsAPI –在Postgres中存储Ruler和Alertmanager的配置Table Manager–负责在选定的块chunk/索引index存储后端中创建表Consul –存储分发服务器distributor生成的一致的哈希环(hash ring)。分发服务器在发送指标时使用散列值来选择ingester。与其他选项的异同ThanosThanos和Cortex具有非常相似的目标：聚合指标，将其存储在块存储中，并为所有度量使用一块single pane。因此，两个项目重用大量Prometheus代码也...阅读全文
deployments，而背后的复杂性被隐藏在简单的抽象中。但为了充分理解它为我们提供的价值，我们需要理解它的内部原理。 本指南将引导您理解从 client 到 Kubelet 的请求的完整生命周期，必要时会通过源代码来说明背后发生了什么。 这是一份可以在线修改的文档，如果你发现有什么可以改进或重写的，欢迎提供帮助！ 1. kubectl 验证和生成器 当敲下回车键以后，kubectl 首先会执行一些客户端验证操作，以确保不合法的请求（例如，创建不支持的资源或使用格式错误的镜像名称）将会快速失败，也不会发送给 kube-apiserver。通过减少不必要的负载来提高系统性能。 验证通过之后， kubectl 开始将发送给 kube-apiserver 的 HTTP 请求进行封装。kube-apiserver 与...阅读全文
了一个闭包——inner_func,并且该闭包持有自由变量——name，因此这也意味着，当函数func的生命周期结束之后，name这个变量依然存在，因为它被闭包引用了，所以不会被回收。 另外再说一点，闭包并不是Python中特有的概念，所有把函数做为一等公民的语言均有闭包的概念。不过像Java这样以class为一等公民的语言中也可以使用闭包，只是它得用类或接口来实现。 nonlocal 语句 在 python 的函数内，可以直接引用外部变量，但不能改写外部变量，因此如果在闭包中直接改写父函数的变量，就会发生错误： 在 python 2 中可以在函数内使用 global 语句，但全局变量在任何语言中都不被提倡，因为它很难控制，python 3 中引入了 nonlocal 语句解决了这个问题...阅读全文
/a2query.1.gz OK /usr/share/man/man8/a2enconf.8.gz OK /usr/share/man/man8/a2enmod.8.gz OK /usr/share/man/man8/a2ensite.8.gz OK /usr/share/man/man8/apache2ctl.8.gz OK 假设你以普通用户的身份运行debsums，没有sudo权限，那么可以使用--ignore-permissions选项，把权限错误当成警告： $ debsums --ignore-permissions 如何利用.Deb文件生成MD5和? -g 选项告诉 debsums 利用 deb 内容生成 MD5，其中： missing――指令debsums利用deb，为不提供MD5和的软件包...阅读全文
用。 学校机房（从 U盘 和 DVD 启动）使用 任何可以（从 U盘 和 DVD ）启动使用的计算机上。 安装向导： 如何在你的硬盘驱动器上安装 Kodachi Linux： 从你的 USB 或 ISO 映像引导。 在桌面菜单上进入 – >系统 – > Refracta 安装程序 – >使用 su – >输入密码 r@@t00 – >简单安装 – >运行 GParted – >设备 – >创建分区表 – >应用 – >分区 – >新建 – >添加 – >应用所有操作 – >关闭 – >关闭 GParted 窗口 – >选择分区 – >确定 – >继续安装 – >关闭窗口 – > y – >配置主机及用户名！不要在这里更改用户名，否则 Kodachi 脚本会出现错误 – >勾选前 2 个框允许...阅读全文
省编辑器，并在每个用户的基础上明确指定的特权。 编辑/etc/sudoers/文件提供了更多的灵活性，但只能当你需要这种灵活性，因为它管理用户帐户时，需要更多的维护使用。 使用visudo是做出改变的唯一推荐的方式/etc/sudoers ，因为它锁定对多个同时编辑该文件，并覆盖文件之前执行其内容的完整性检查。 这有助于防止在那里你错误地配置的情况sudo和，因为你已经失去了解决问题的防止sudo权限。 如果您当前登录的用户名为root用户键入： visudo 如果您在使用一个非root用户签署sudo权限，请键入： sudo visudo 传统上， visudo打开/etc/sudoers中的vi编辑器，这对于没有经验的用户混淆。 默认情况下，新的Debian安装，就应该改用nano ，它...阅读全文
最近有时间，都在看Go，感觉Go语言真的不错，具体自行百度。今天简单说一下算法。 什么是算法一系列的计算步骤，用来将输入数据转化成输出结果算法的意义用于解决特定的问题解决同一个问题的不同算法的效率常常相差非常大，这种差距的影响往往比硬件和软件方面的差距还要大。 算法在我们编程开发中，还是不可或缺的。下面简单来列举一下go语言常见的十大算法。 BubbleSort(冒泡排序) func Sort(list []int, left, right int) { if right == 0 { return } for index,num := range list { if index < right && num > list[index + 1] { utils.SwapGo(list...阅读全文
成一个三节点的 Kubernetes 集群的创建，可以开始愉快的玩耍了。 K3s 的蛋蛋 如果执行 kubectl get pods --all-namespaces，就会看到其它服务的一些 Pod，比如 Traefik。Traefik 在这里起到是反向代理和负载均衡器的作用，它可以让流量从单个入口进入集群后引导到集群中的各个服务。Kubernetes 支持这种机制，但 Kubernetes 本身不提供这个功能，因此 Traefik 是一个不错的选择。...阅读全文
于在 Kubernetes 平台上简化证书管理的软件，它支持对接许多不同的证书源，如 Let's Encrypt 和 HashiCorp Vault。 如果你在使用 Apache APISIX Ingress Controller 时，遇到了证书管理的麻烦，那么使用 Cert Manager 将会是一个不错的选择，本文将介绍如何通过 Cert Manager 来创建证书并对接到 Apache APISIX Ingress Controller。 步骤一：环境准备 如果你希望按照本文的指导进行实际的操作，请确保以下环境和工具已准备就绪： 准备一个可用的 Kubernetes 集群，开发环境中，你可以使用 Kind 和 Minikube 安装 kubectl 安装 Helm v3 请注意，下文所...阅读全文
再用AWS的建立镜像工具转化成一个订制的AMI。那样手动式建立的AMI全过程一般用时费力不易配备，并且容易错误。因此 大家必须一个专用工具来自动化技术全部建立AMI的全过程，与此同时叙述建立AMI的编码能够储存而且根据再配备重复使用，来很大地优化和管理方法AMI建立的全过程。 Packer就这样一个自动化技术建立AMI的专用工具。如下图所显示，Packer根据JSON文件模板来叙述一个建立AMI的全过程，如何配置AMI都由编码叙述。客户只需根据改动这一软件更新来随后实行一个简洁的指令来自动生成订制的AMI。那样订制AMI的全过程则能够直接进入版本号智能管理系统，便捷消费者查看和跟踪订制全过程的转变 。...阅读全文
AMI全过程一般用时费力不易配备，并且容易错误。因此 大家必须一个专用工具来自动化技术全部建立AMI的全过程，与此同时叙述建立AMI的编码能够储存而且根据再配备重复使用，来很大地优化和管理方法AMI建立的全过程。 Packer就这样一个自动化技术建立AMI的专用工具。如下图所显示，Packer根据JSON文件模板来叙述一个建立AMI的全过程，如何配置AMI都由编码叙述。客户只需根据改动这一软件更新来随后实行一个简洁的指令来自动生成订制的AMI。那样订制AMI的全过程则能够直接进入版本号智能管理系统，便捷消费者查看和跟踪订制全过程的转变 。...阅读全文
。 版本发布管理 所有的配置发布都有版本概念，从而可以方便地支持配置的回滚。 灰度发布 支持配置的灰度发布，比如点了发布后，只对部分应用实例生效，等观察一段时间没问题后再推给所有应用实例。 权限管理、发布审核、操作审计 应用和配置的管理都有完善的权限管理机制，对配置的管理还分为了编辑和发布两个环节，从而减少人为的错误。所有的操作都有审计日志，可以方便的追踪问题。 客户端配置信息监控 可以在界面上方便地看到配置在被哪些实例使用。 部署简单 配置中心作为基础服务，可用性要求非常高，这就要求 Apollo 对外部依赖尽可能地少，目前唯一的外部依赖是 MySQL，所以部署简单，只要安装好 Java 和 MySQL 就可以让 Apollo 跑起来。 Apollo 配置中心适用范围 既然 Apollo 定位...阅读全文
Secret 时，大量的 watch 事件会急剧增加 kube-apiserver 的负载，并会导致错误配置过快传播到整个集群。在这种情况中，给不需要经常修改的 ConfigMap 和 Secret 设置 immutable: true 就可以避免类似的问题。注意，设置 immutable: true 之后，ConfigMap 和 Secret 内容更新时需要删除并重新创建，且使用它们的 Pod 也需要删除重建。IPv4/IPv6 双栈支持 BetaIPv4/IPv6 双栈支持在 v1.20 的时候进行了重构，并将于 v1.21 中进入 Beta 版本（默认开启），kubeadm 也已经支持创建 IPv4/IPv6 双栈集群。该特性开启后，Kubernetes Service 和 Pod 会同时分配...阅读全文
非常易于使用。如果你的工作习惯与这些概念不一致，可能会强烈反对Ubuntu易于使用这一观点。 然而，虽然Ubuntu源自Debian，但两者的区别还是很明显。从安装和桌面，到程序包管理及社区，大家认为自己对于Ubuntu和Debian了解的情况可能是错误的，或者至少需要作一些严格限制――这一切使选择哪个发行版适合贵公司的业务战略显得非常困难。 安装方面的区别 眼下，你可以使用哪个发行版取决于拥有的硬件。Debian目前面向大约13种硬件架构：从标准的32位和64位英特尔架构到ARM和PowerPC架构，还支持另外两种正在开发的架构。相比之下，Ubuntu支持32位和64位版本这两大不同的计算机桌面环境，现正在为移动设备开发Ubuntu ARM版本。 要考虑的另一个方面是面向每个发行版的安装程...阅读全文
？ Linux 系统当时的分割方式基本就是磁盘分割。所以如果你下载了所有的磁盘的话，某种意义上你也就下载了一套 Linux 系统。我们认为这个方法不够好，我们要用更适合分工开发的法子来。 我们决定 Debian 的系统开发由资源包来。也就是说，系统的每一个内容、每一个板块都会以资源包的形式存在，这些资源包能够自动整合成一个完整的系统。你下载了这个资源包的时候，它就知道如何移除自己或是升级自己。 分工也一样按照资源包来，哪个资源包出错了就能非常明确地知道是谁的责任。我们会在开发时设定标准和规定，保证任何来源的资源包都能在我们的系统上照常运行。所以你只要下载全资源包，你就有了一整个系统。这感觉就像手工布艺一样，把很多布片拼成一整个作品，只不过实际上原理要比这复杂不少。 当然 Debian 项目的资源包分割法...阅读全文
{} } 跟valueCtx类似，cancelCtx中也有一个context变量作为父节点；变量done表示一个channel，用来表示传递关闭信号；children表示一个map，存储了当前context节点下的子节点；err用于存储错误信息表示任务结束的原因。再来看一下cancelCtx实现的方法：func (c *cancelCtx) Done() <-chan struct{} { c.mu.Lock() if c.done == nil { c.done = make(chan struct{}) } d := c.done c.mu.Unlock() return d } func (c *cancelCtx) Err() error { c.mu.Lock() err := c.err...阅读全文
。此外，不要错过 Kafka Connect 任务重启增强、KStreams 基于时间戳同步的改进以及 MirrorMaker2 更灵活的配置选项。常规变化KIP-750：弃用 Kafka 中对 Java 8 的支持在 3.0 中，Apache Kafka 项目的所有组件都已弃用对 Java 8 的支持。这将使用户有时间在下一个主要版本 (4.0) 之前进行调整，届时 Java 8 支持将被取消。KIP-751：弃用 Kafka 中对 Scala 2.12 的支持对 Scala 2.12 的支持在 Apache Kafka 3.0 中也已弃用。与 Java 8 一样，我们给用户时间来适应，因为计划在下一个主要版本 (4.0) 中删除对 Scala 2.12 的支持。Kafka 代理、生产者、消...阅读全文
this message!