择合适的缓冲区大小，但不会超过此上限。-t 超时时间trz -t 30 或 tsz -t 30 xxx 等，设置超时秒数 ( 默认 20 秒 )。在超时时间内，如果无法传完一个缓冲区大小的数据则会报错并退出。设置为 0 或负数，则永不超时。异常处理方法如果 tmux 不是运行在远程服务器上，而是运行在本地电脑上，或者运行在中间的跳板机上。方案1：使用 tmux -CC 与 iTerm2 集成，请参考 iTerm2 与 tmux -CC 集成。方案2：在本地电脑上安装 trzsz-go，设置 alias ssh="trzsz ssh" 可以方便使用。如果出现了错误，且 trzsz 挂住不能动了：按组合键 control + c 可以停止服务器上的 trz 或 tsz 进程。对于 iTerm2...阅读全文
（Tag Retention） 除了项目配额之外，1.9 版还提供了一项增强功能，用于更好地管理镜像生命周期并优化存储分配，此项功能称为“Tag保留”。Harbor 的存储中可能会迅速累积起大量镜像的文件，特别是在 Harbor 与 CI 系统挂钩在一起以自动生成内部版本时，许多 tag 会在一定时间之后或被下一个内部版本取代后过时。要释放这些已过期的镜像所占用的空间，并满足监管与合规要求，项目管理员可以选择性地定义镜像 tag 的保留策略，以留存具有特定匹配镜像 tag 的镜像，同时删除其他 tag 及其关联的 blob。无论是手动生成还是从 CI/CD 管道自动生成，镜像 tag 通常包含环境和镜像使用情况的大量元数据信息，足以用作定义保留策略的条件。 CVE 例外策略 （Exception...阅读全文
本文作者从事数据库相关工作接近四十年，最近开始使用 MongoDB。在开始使用 MongoDB 之前，作者希望有些事情自己已经知道。根据一般经验，对于数据库是什么以及它们能干什么，人们会有先入为主的认识。为了给他人提供方便，本文列出了一些常见的错误。 本文要点 即使 MongoDB 没有强制要求，设计一个模式还是至关重要。 类似地，在设计模式及访问模式时设计好索引。 避免大对象，尤其是大数组。 谨慎对待 MongoDB 的设置，尤其是关乎安全和稳定性时。 MongoDB 没有查询优化器，因此，对于如何安排查询操作的顺序，你必须格外小心。 创建一个无需身份验证的 MongoDB 服务器 很遗憾，MongoDB 在安装时默认不启用身份验证。在只从本地访问的工作站上，这没什么不好。但是，由于...阅读全文
Kubernetes API在运行时一起提供服务。其他重点改进的地方包括可伸缩的准入控制器（admission controller），可插拔的云提供者，和容器运行时接口（CRI）。 新特性 安全： 网络策略 API（Network Policy API）提升至稳定状态。网络策略通过一个网络插件实现，允许用户对管理哪些 Pod 可以彼此通信的规则进行设置和强制。 节点授权器（Node authorizer）和准入控制插件（admission control plugin）是新增用来限制kubelet基于节点对Secret、Pod和其对象的访问。 Secret的加密和其他etcd中的资源，现在可用并处于alpha状态。 Kubelet TLS 启动现在支持客户端和服务端证书轮换。 由 API 服务器存储的审计日...阅读全文
2021 年每月（以及之后的双月刊）系列“ Debian 热门话题”（日文）撰写在日本组织一些当地 Debian 活动，尤其是东京。Debian 议程为贡献者和用户提供更好的 Debian “体验”。向用户提供“一些尝试”并听取他们的声音，然后在贡献者之间进行讨论。更多的基础设施变化，对 Web、Wiki、BTS、存储库等 Debian 基础架构进行更多更改。知识和技术的更新和转让，与新的贡献者讨论、转移和改进旧的知识体系。此外，Hideki Yamane 还在展示页面中警告“我可能是 DPL 有史以来最差的候选人”：不擅长英语（可以使用 Eng“r”ish ;），所以无法回答一些复杂的问题。没有任何技巧来调解贡献者之间的争吵，只有：保持冷静，保持安全。...阅读全文
在 direct 里面的目标都走上级. --intelligent=intelligent,blocked 和 direct 里面都没有的目标, 智能判断是否使用上级访问目标. 特点： 链式代理, 程序本身可以作为一级代理, 如果设置了上级代理那么可以作为二级代理, 乃至 N 级代理. 通讯加密, 如果程序不是一级代理, 而且上级代理也是本程序, 那么可以加密和上级代理之间的通讯, 采用底层 tls 高强度加密, 安全无特征. 智能 HTTP,SOCKS5 代理, 会自动判断访问的网站是否屏蔽, 如果被屏蔽那么就会使用上级代理 (前提是配置了上级代理) 访问网站; 如果访问的网站没有被屏蔽, 为了加速访问, 代理会直接访问网站, 不使用上级代理. 域名黑白名单，更加自由的控制网站的访问方式...阅读全文
NAND，4D NAND闪存有很强的商业营销味道。 SK Hynix的4D NAND闪存首先会量产TLC类型的，核心容量分别是512Gbt、1Tb，都是96层堆栈，IO接口速度1.2Gbps，不过两者的BGA封装面积是不一样的，1Tb版显然更大一些。 至于QLC类型的，这个未来会是SK Hynix量产的重点，核心容量1Tb，但量产时间会在明年下半年，还需要一些时间。韩联社报道称，SK Hynix公司4日宣布正式宣布96层堆栈的4D NAND闪存，TLC类型，核心容量512Gb，与现有的72层堆栈3D NAND闪存相比，4D NAND闪存的核心面积减少了30%，单片晶圆的生产输出增加了50%，而且性能也更强——读取速度提升30%，写入速度提升25%。 根据官方所说，4D NAND闪存今年内会量产，而...阅读全文
图工具就能生成 SVG 图片。 上面图片中，最顶层的函数g()占用 CPU 时间最多。d()的宽度最大，但是它直接耗用 CPU 的部分很少。b()和c()没有直接消耗 CPU。因此，如果要调查性能问题，首先应该调查g()，其次是i()。 另外，从图中可知a()有两个分支b()和h()，这表明a()里面可能有一个条件语句，而b()分支消耗的 CPU 大大高于h()。 五、局限 两种情况下，无法画出火焰图，需要修正系统行为。 （1）调用栈不完整 当调用栈过深时，某些系统只返回前面的一部分（比如前10层）。 （2）函数名缺失 有些函数没有名字，编译器只用内存地址来表示（比如匿名函数）。 六、Node 应用的火焰图 Node 应用的火焰图就是对 Node 进程进行性能抽样，与其他应用的操作是一样的...阅读全文
“sidecar”概念，其中平台容器（译者注：此处指 sidecar 代理容器）可以在部署时以后期绑定操作功能的形式，与应用程序容器动态注入到一起，。服务网格使用这种 sidecar 方法在运行时将代理添加到应用程序 pod 中，并连接这些代理以处理所有传入和传出流量。这允许服务网格以与应用程序代码解耦的方式交付功能。应用程序和平台之间的关注点分离是服务网格主张的核心价值：当然，这些功能可以直接在应用程序中实现，但是通过解耦，我们允许安全团队和开发人员相互独立地迭代，同时仍然努力实现安全但功能齐全的应用程序的共同目标。由于服务网格处理进出应用程序之间的默认网络，因此它可以很好地处理零信任问题：工作负载身份可以从 Kubernetes 中的 pod 身份而不是其 IP 地址中获取。可以通过在双向 TLS 中...阅读全文
签名的证书。 我习惯把视图调整为目录视图。 左上角有个下拉框，Folder View. 这里系统是安装完了，但是还需要一些配置. 设置网络Datacenter - Nodes - node System - Network 现在服务器是通过具体的硬件网卡来获取 IP 地址接入互联网。 如图: 但是我们需要新建一个桥接网卡，VM 会通过这个桥接网卡来配置 IP 地址，类比桌面环境下用 VMWare 开虚拟机，通过桥接上网之类的。 这里需要先删掉 Network Device 上面的 IP 地址，因为 IP 地址不能同时分配到两张网卡上，所以记下你的 IP 地址和网关，当然，你的服务器后台也应该有这些。 那么，问题来了，删掉后，IP 地址没有配置到网卡上，我们是不是无法访问到这台服务器了呢？会立...阅读全文
#TTYPath=/dev/console MaxLevelStore=warning MaxLevelSyslog=warning MaxLevelKMsg=warning MaxLevelConsole=info #MaxLevelWall=emerg #LineMax=48K 配置目录及其优先级 默认设置是在编译期间确定的， 所以仅在确实需要修改默认设置的情况下， 才需要使用配置文件。位于 /etc/systemd/ 目录中的初始配置文件， 仅包含了展示选项默认值的注释， 目的在于方便系统管理员查看和直接修改。 如果软件包想要自定义某些默认设置， 那么必须将自定义的配置文件安装到 /usr/lib/systemd/*.conf.d/ 目录中。 /etc/ 目录仅供系统管理员使用。 系统管理员可以利用...阅读全文
的开源 Metasploit Framework 安装程序等开源项目；另一个是核心开发已经完成的不稳定分支。如果在过去的一年里你已经在 Github 检出了 Metasploit，你可能已经使用了后者，其默认提示符是 “msf5>”。 之前，一个特性可能会在一个 PR 中停留数月，并且仍然会造成在直接向 Kali Linux 或其他发行版推送之前出现不能被发现的 bug。而通过 Metasploit 开发的不稳定分支，开发团队现在可以在逐步升级到 Metasploit 稳定版前，更快速彻底地完成迭代，并且更简单地收到真实反馈。一些特性甚至早期就被合并到了 4.x 分支，因为它们在 Metasploit 5.0 发布前就被认为是稳定的。其他特性需要更长时间来稳定，并在最终的...阅读全文
型代码为 33。SRV的记录格式为： _Service._Proto.Name TTL Class SRV Priority Weight Port Target Service: 服务名称，前缀“_”是为防止与DNS Label（普通域名）冲突。 Proto: 服务使用的通信协议，_TCP、_UDP、其它标准协议或者自定义的协议。 Name: 提供服务的域名。 TTL: 缓存有效时间。 CLASS: 类别 Priority: 该记录的优先级，数值越小表示优先级越高，范围0-65535。 Weight: 该记录的权重，数值越高权重越高，范围0-65535。 Port: 服务端口号，0-65535。 Target: host 地址。 客户端查询到多条记录的时候，使用优先级最高的记录。对相同优先...阅读全文
Redis 官网 redis.io 昨日罕见地宕机了一段时间。宕机原本不是什么新鲜事，但戏剧性的是网站的报错信息居然是连接不上 Redis。 Redis::CannotConnectError at / Error connecting to Redis on 127.0.0.1:6379 (Errno::ECONNREFUSED) ▲ 看到这，忍不住刷一句：禁止套娃！ Redis 作者 Antirez 很快修复了问题，并解释了宕机的原因。原来是因为他最近在运行 redis.io 的实例上安装了 Try Redis（用于在线体验 Redis 数据库），可能是未能对 session key 进行良好的垃圾回收，从而导致内存累积，最终因为内存溢出（OOM ）引发宕机。对此，Antirez 表示...阅读全文
VE 对所有对象（例如 VM、storage、nodes 等）使用基于角色的用户和权限管理。新的 LDAP 同步使 LDAP 用户和组同步到 Proxmox 用户和组权限框架中。添加了对 API 令牌的全面支持和集成，从而允许其他系统、软件或 API 客户端对REST API 的大部分进行无状态访问。API 令牌可以为单个用户生成，并且可以选择配置单独的权限和到期日期以限制访问的范围和持续时间。如果 API 令牌遭到破坏，则可以撤销该令牌，而不必禁用用户本身。 进一步的显着增强： QEMU/KVM：已启用对复制磁盘的实时迁移（使用 zfs 进行存储复制）的支持。由于简化了卸载过程，因此测试 Ceph 存储变得更加容易。 下载地址：https://www.proxmox.com...阅读全文
USB 2.0 插槽的位置卸下了开关模式电源，并在 USB-C 接口旁添加了一个新开关，这样可以提供更高的峰值电流以匹配 8GB 内存版本的需求。 操作系统镜像方面，现在 Raspberry Pi 支持 64 位，其包含与常规 32 位镜像相同的应用程序集和相同的桌面环境，不过只是针对 Debian arm64 构建的。同时现在开始，32 位和 64 位操作系统镜像都不再使用 “Raspbian” 这一名称，改用新的统一的名称：Raspberry Pi OS，这样更便于用户识记。 64 位镜像下载地址：https://www.raspberrypi.org/forums/viewtopic.php?f=117&t=275370 在这一年时间里，Raspberry Pi 4 已经卖出了近 300...阅读全文
接收我的交易通知。】 然后点击 【提交】，等待审批即可。部分是在线秒批（应该是机审），个别需要等待一段时间。11 到这一步就注册好了。然后设置账户，包括登录名和密码之类的。接着，创建登录账户。记牢。以后登录就靠这个。12 启用数字安全令牌，点击启用。这一步是开启短信验证码功能。13 设置完成，会显示你的两个账户。分别是美元账户和新币账户。点击开始即可进入账户。14 账户充值OCBC对于我们大陆来说属于离岸账户，是个境外银行。所以我们入金的时候需要从国内银行跨境汇款过去。 一般流程是，购汇然后再跨境汇款（转账）。这个过程资料要认真填写。下面是给这个账户汇款可能用到的信息：收款行所在地选新加坡，收款行地址：63 Chulia Strel #10-00, OCBC Centre East...阅读全文
channel通道golang的并发模型是序列通信处理CSP（communicating sequential process）——使用通信来共享内存 ，避免goroutine因竞争共享内存频繁加锁产生的性能问题。基本数据结构golang中提供了一个特殊的类型channel实现goroutine之间的通信。channel类似于队列，先进先出。channel数据结构源码在src/runtime/chan.go下。chan 使用 hchan 表示，它的传参与赋值始终都是指针形式，每个 hchan 对象代表着一个 chan。hchan 中包含一个缓冲区 buf，它表示已经发送但是还未被接收的数据缓存。buf 的大小由创建 chan 时的参数来决定。qcount 表示当前缓冲区中有效数据的总量...阅读全文
以同时管理多个 Kubernetes 集群，更方便地管理多个集群。 丰富的权限管理 ：将资源抽象化为部门、项目级别，角色的权限可以更细化的控制，适用于多部门、多项目的统一集中管理。 多种登录模式 ：支持企业级 LDAP 登录、支持 OAuth2 登录，支持数据库登录多种模式。 完备的审计 ：所有操作都会有完整的审计功能，方便追踪操作历史。 开放平台 ：支持 APIKey 开放平台，用户可自主申请相关 APIKey 并管理自己的项目。 多层次监控 ：提供多级别的监控统计信息，实时关注集群的运行状态。 架构图 整体采用前后端分离的方案： 前端采用 Angular 框架进行数据交互和展示，使用 Ace 编辑器进行 Kubernetes 资源模版编辑。 后端采用 Beego 框架做数据接口处理，使用...阅读全文
库？服务需要支持多大的流量？ 这些都是很重要的问题，但服务是动态并且变化的：二进制版本不断更新，实例被添加和删除。架构也就需要随之演进：可能需要在某个特定的集群添加新的缓存，移除一些过时的日志等等。 在2014年，我们发现自己不能充分地适应服务的灵活性。对于绝大多数服务，我们使用人工编制的工作流来变更基础架构：推送x，然后y；手动执行不常见的变更。 但是团队通常需要管理数十个服务，每个服务都有很多job，数据库，配置以及自定义的管理流程。已有的解决方案因为如下两大原因无法扩展： 基础架构配置和API是异构的，并且很难连接在一起——比如，不同的服务使用不同的配置语言，抽象级别，存储和推送机制等等。因此，基础架构不一致，很难确定出通用的变更管理。生产变更管理的流程很脆弱，不理解变更之间的联系...阅读全文
。IOChaos：模拟具体某个应用的文件 I/O 故障，例如 I/O 延迟、读写失败。TimeChaos：模拟时间跳动异常。KernelChaos：模拟内核故障，例如应用内存分配异常。平台类型故障：AWSChaos：模拟 AWS 平台故障，例如 AWS 节点重启。GCPChaos：模拟 GCP 平台故障，例如 GCP 节点重启。应用层故障：JVMChaos：模拟 JVM 应用故障，例如函数调用延迟。混沌实验场景混沌实验场景由一组混沌实验和应用状态检查组成，旨在帮助用户在平台上实现混沌工程闭环。用户运行混沌场景，可以通过一系列的混沌实验，不断地扩大爆炸半径（包括攻击范围）和增加故障类型。运行混沌实验后，用户可以方便地检查当前的应用状态，判断是否需要进行后续混沌实验。同时用户可以不断地迭代混沌实验场景，积累...阅读全文
（PPA）。你可以在升级后逐一启用它们。 关闭所有正在运行的应用。 停止任何你可能已经启用的运行中的服务。升级完成后，你可以通过 systemctl 启动它们。这包括 Web 服务器、SSH 服务器、FTP 服务器或任何其他服务器。 确保你有稳定的互联网连接。 并为你的系统留出足够的停机时间。因为根据你的系统配置，Debian 版本升级需要时间大约在 1.5 小时到 2 小时之间。 将 Debian 10 Buster 升级到 11 Bullseye 确保你的系统是最新的，而且你的软件包列表是最新的。 sudo apt update && sudo apt upgrade 使用下面的命令安装 gcc-8-base 包。这是必须的，因为在历史上曾出现过升级失败的情况，这是因为下面的软件包中包含了某些...阅读全文
使用 Linux 进行命令行操作时，一不留神 SSH 客户端就断开了连接，如何配置 SSH 客户端保持连接？ 第一种：修改配置文件 /etc/ssh/ssh_config 在文件末尾添加： ``` TCPKeepAlive yes ServerAliveInterval 300 ``` 第二种 在 iTerm2 的 Perferences > Profiles > session 中设置找到选项, 勾选 When idel, send ASCII code就可以了 ``` ☑️ When idle, send ASCII code 0 every 60 seconds ``` ASCII和时间间隔可自定义。通过这个配置，可以达到保持 SSH 连接的目...阅读全文
在前一篇文章中，我们介绍了 Debian Stretch 环境下，Kubernetes 集群安装的准备工作。本文我们将继续介绍 k8s集群 的安装配置工作。 第4步 - 设置主节点 在本节中，您将设置主节点。 但是，在创建任何Playbooks之前，值得介绍一些概念，例如Pod和Pod网络插件 ，因为您的群集将同时包含这两个概念。 pod是运行一个或多个容器的原子单元。 这些容器共享资源，例如文件卷和网络接口。 Pod是Kubernetes中的基本调度单元：pod中的所有容器都保证在调度pod的同一节点上运行。 每个pod都有自己的IP地址，一个节点上的pod应该能够使用pod的IP访问另一个节点上的pod。 单个节点上的容器可以通过本地接口轻松进行通信。 然而，pod之间的通信更复杂，并...阅读全文
等方式已经越来越无法满足开发人员对配置管理的需求。Apollo 配置中心应运而生！ Apollo 配置中心功能特点 正是基于配置的特殊性， Apollo 在设计之初就立志于成为一个有治理能力的配置管理平台。当前提供了以下一些特性， 统一管理不同环境、不同集群的配置 Apollo 提供了一个统一界面集中式管理不同环境（environment）、不同集群（cluster）、不同命名空间（namespace）的配置。同一份代码部署在不同的集群，可以有不同的配置，通过命名空间（namespace）可以很方便的支持多个不同应用共享同一份配置，同时还允许应用对共享的配置进行覆盖。 配置修改实时生效（热发布） 用户在 Apollo 修改完配置并发布后，客户端能实时（1秒）接收到最新的配置，并通知到应用程序...阅读全文
常见做法。 那如何解决侵入性的问题呢？这个问题随着容器编排技术的成熟有了新的解法。Kubernetes可以不侵入应用层，在容器层解决问题，比如K8S Service就具有服务发现、负载均衡的能力，HPA具有动态扩容的能力。随着K8S的快速发展，云原生的概念，也就越来越深入人心，那如何利用好K8S提供的基座能力，将更多的分布式能力下沉，让应用开发回归业务呢？其中Service Mesh提出的Sidecar模式，就很好的解决了微服务架构中网络通信的问题。Sidecar主要就是用来处理诸如服务发现、负载均衡、请求熔断等一系列非业务需求，应用在部署时动态插入Sidecar，服务间的通信通过Sidecar进行代理，以完成对服务间网络通信的接管。 到这里，微服务开发在Service Mesh的帮助下，已...阅读全文
/token kubernetes_sd_configs: - role: node relabel_configs: - target_label: __address__ replacement: kubernetes.default.svc:443 - source_labels: [__meta_kubernetes_node_name] regex: (.+) replacement: /api/v1/nodes/${1}/proxy/metrics/cadvisor target_label: __metrics_path__ - action: labelmap regex: __meta_kubernetes_node_label_(.+) 直接访问Kubelet的apiserver接...阅读全文
期，并使得更多贡献者乐于投身其中并建立起更具活力的生态系统。 项目态势 CNCF方面已经建立起一个野心勃勃的项目，希望以可视化方式呈现Kubernetes项目中各项贡献的具体内容。K8s DevStats[10]则展示了各大型企业贡献者带来的成果。在本轮版本发布期间，开放问题的数量基本保持不变，但fork与项目各独立库数量则上涨了约20%。自上次发布以来，提交者数量略有上升，但整体来看基本保持稳定。Kubernetes目前拥有75000多条评论，仍然是GitHub上最受关注的项目之一。 原文参考这里。相关链接： https://kubernetes.io/docs/reference/workloads-18-19/ https://github.com/kubernetes...阅读全文
我的首选功能是重新实现ACL GENPASS。现在，它使用基于SHA256的HMAC，并接受一个可选参数来告诉服务器要生成多少位不可猜测的伪随机字符串。Redis在启动时从/ dev / urandom获得内部密钥，然后在计数器模式下使用HMAC来生成其他随机数：这样，您可以滥用API，并在每次需要时调用它，因为它将非常快。是否想为您的应用程序生成无法猜测的会话ID？只需致电ACL GENPASS。依此类推。 4. 现在，对PSYNC2（复制协议）进行了改进。Redis现在将能够修整协议中的最终PING，从而能够更频繁地进行部分重新同步，从而使副本和母版更有可能找到共同的偏移。 5. 带有超时的Redis命令现在要好得多：不仅BLPOP和其他以前接受秒的命令现在都能接受十进制数字，而且实际分...阅读全文
：publish 到镜像队列的所有消息总是被直接 publish 到 master 和所有的 slave 之上。这样一旦 master 失效了，message 仍然可以继续发送到其他 slave 上。 简单来说，镜像队列机制就是将队列在三个节点之间设置主从关系，消息会在三个节点之间进行自动同步，且如果其中一个节点不可用，并不会导致消息丢失或服务不可用的情况，提升 RMQ 集群的整体高可用性。 先来看下设置镜像队列后的效果： 镜像队列会出现+2标识， 1.如何设置队列为镜像队列 有两种方式，通过命令行或者通过 RMQ 的控制面板。 通过命令行设置镜像队列 rabbitmqctl set_policy [-p Vhost] Name Pattern Definition [Priority] -p Vhost...阅读全文
。它播放的序列由你决定，但默认情况下它包括一个加密货币挖掘模拟器、composer PHP 依赖管理器、内核编译器、下载器、内存管理等等。不过，我最喜欢的是显示 simcity 加载消息的设置。因此，只要没有人检查得太仔细，你就可以花整个下午的时间等待电脑完成进度条。 Genact 有 linux、os x 和 Windows 版本，Rust 源码可以在 github 上找到。 Hollywood Hollywood 采取了更直接的方式。它本质上是在终端中创建一个随机数和拆分屏幕的配置，并启动看起来很忙的应用程序，如 htop、目录树、源代码文件和其他应用程序等，并每隔几秒钟进行切换。它以 shell 脚本的形式组合在一起，因此可以很容易地根据你的需要进行修改。 Hollywood 的源代码可...阅读全文
律动 BlockBeats 消息，5 月 25 日，据官方消息，牛油果 Enumivo 团队宣布推出新项目 EVO Chain，旨在复制一条 ETH2。官方表示，将在区块高度 12,520,000 至 12,800,000 区间内进行代币空投。 用户需要在此区间内，向 0x3fEa51dAab1672d3385f6AF02980e1462cA0687b 地址发送 0 ETH，成功后便可获得 4 EVO，同时团队将获得 1 EVO。单一地址发送交易次数不限，EVO 总量 1 亿枚。 团队同时表示，对 DPoS 已经失望，此前发行于 EOS 链上的项目将会迁移至 EVO Chain 上。...阅读全文
本文翻译自 Jack Roper 的文章 Kubernetes Best Practice。译者：文章中作者从应用程序开发、治理和集群配置三个方面给出了一些 Kubernetes 的最佳实践，同时翻译过程中也加入了我过往的一些使用经验。有误的地方，也欢迎大家指正。在这篇文章中，我将介绍一些使用 Kubernetes (K8s) 时的最佳实践。作为最流行的容器编排系统，K8s 是现代云工程师掌握的事实标准。众所周知，不管使用还是维护 K8s 复杂的系统，因此很好地掌握它应该做什么和不应该做什么，并知道什么是可能的，将是一个好的开局。这些建议包含 3 大类中的常见问题，即应用程序开发、治理和集群配置。最佳实践目录使用命名空间使用就绪和存活探针（译者注：还有启动探针）使用自动缩放使用资源请求和约...阅读全文
prometheus存在单点问题，具体痛点可以这么描述： prometheus单机存储和抓取能力都有上限，容易单点故障。 虽然有一种方式是通过部署N个prometheus分别抓取不同的target来分摊压力的，但是grafana就要为不同的图表配置不同的prometheus地址，复杂程度比较棘手。 thanos+prometheus可以解决这个问题，它提供了一个核心能力： 1，thanos querier组件可以反向代理到N个prometheus，然后grafana直接指向thanos querier即可，thanos querier会从N个prometheus同时查询数据，返回满足Promql的数据结果； 2，如果N个prometheus抓取的数据存在重复的，那么thanos...阅读全文
、Hyperloglogs等。 Redis具备LRU淘汰、事务实现、以及不同级别的硬盘持久化等能力，并且支持副本集和通过Redis Sentinel实现的高可用方案，同时还支持通过Redis Cluster实现的数据自动分片能力。 Redis的主要功能都基于单线程模型实现，也就是说Redis使用一个线程来服务所有的客户端请求，同时Redis采用了非阻塞式IO，并精细地优化各种命令的算法时间复杂度，这些信息意味着： Redis是线程安全的（因为只有一个线程），其所有操作都是原子的，不会因并发产生数据异常 Redis的速度非常快（因为使用非阻塞式IO，且大部分命令的算法时间复杂度都是O(1)) 使用高耗时的Redis命令是很危险的，会占用唯一的一个线程的大量处理时间，导致所有的请求都被拖慢。（例如时间复杂度为O(N)的...阅读全文
Debian 10 Buster 即将发布。第一个发布候选版已经发布，我们预期可以在接下来几周内，会见到最终版。如果你期待对 Debian 10 Buster 的新版本有所期待，那么让我告诉你这个版本里面会有什么。 Debian 10 Buster 发布计划 Debian 10 Buster 的发布日期并没有确定。为什么这样呢？不像其他分发版，Debian 并不基于时间发布。相反地它主要关注于修复 release-critical bug。发布版重要 Bug 要么是严重的安全问题（CVE），要么是一些其他阻止 Debian 发布的严重问题。 Debian 在它的软件归档中分为三个部分，叫做 main、contrib 和 non-free。在这三者之中，Debian 开发者和发布管理者最关心...阅读全文
安装，但使用 deb 包安装会自动生成开启启动的脚步在 /etc/init.d 目录下,采用哪种方式安装就因人而异了 接下来就需要编译配置文件 $ vi /etc/shadowsocks-libev/config.json 然后将配置文件改为 { "server":"0.0.0.0", "server_port":443, "password":"yourpassword", "method":"aes-256-cfb", "timeout":60 } 其中 server：主机域名或者IP地址，尽量填 0.0.0.0 来代表了本机 ip server_port：服务器监听端口 password：自定义密码 method：加密方式 默认为table,其他有rc4,rc4-md5,aes-128...阅读全文
美国当地时间8月16日，即今天，Debian 在官网发文庆祝诞生 25 周年。 Debian 于1993年8月16日由 Ian Murdock 首次发布，最初将其称为"Debian Linux Release"。当时，他将这封著名的电子邮件发送到 comp.os.linux.development 邮件列表，宣布他正在开发新的 Linux 发行版，并正在寻找建议。他将其称为 Debian Linux Release，并表示这是由 Linux 开发者从头开始开发的，尽管它受到 Softlanding Linux System (SLS) 的启发。 Debian 的名称由 Ian Murdock 当时的女友 Debra 和 Ian Murdock 自己的名字合并而成，所以 Debian 一词是...阅读全文
firewalld），因此也推荐使用此方法。检查 firewalld 运行状态，输出应为 running：1firewall-cmd --state接下来设置端口转发：123456sudo firewall-cmd --zone=public --permanent --add-port 本机端口号/tcpsudo firewall-cmd --zone=public --permanent --add-port 本机端口号/udpsudo firewall-cmd --zone=public --permanent --add-forward-port=port=本机端口号:proto=tcp:toport=目标端口号:toaddr=目标地址sudo firewall-cmd --zone=public...阅读全文
由于人工智能 / 机器学习日益集成到应用和业务流程中，因此生产级机器学习模型需要更多可扩展的基础设施和计算能力，以用于训练和部署。 现代机器学习算法在大量数据上进行训练，并且需要数十亿次迭代才能使成本函数最小化。这类模型的垂直扩展会遇到操作系统级别的瓶颈，包括可提供的 CPU、GPU 和存储的数量，而且对于这种类型的模型，已经证明效率并不高。更为高效的并行处理算法，例如异步训练和 allreduce 式训练，需要一个分布式集群系统，由不同的 worker （工作器）以协调的方式同时学习。 可扩展性对于在生产环境中服务深度学习模型也非常重要。将单个 API 请求处理到模型预测端点可能会触发复杂的处理逻辑，这将花费大量时间。由于更多用户访问模型的端点，为了有效地处理客户端请求，需要更多服务实例...阅读全文
都要用G1垃圾收集器，因为年轻代内存比较大，用G1可以设置GC最大停顿时间，不至于一次minor gc就花费太长时间，当然，因为像kafka，rocketmq，es这些中间件，写数据到磁盘会用到操作系统的page cache，所以JVM内存不宜分配过大，需要给操作系统的缓存留出几个G。 2.1 线上问题及优化 2.1.1 消息丢失情况 消息发送端： （1）acks=0： 表示producer不需要等待任何broker确认收到消息的回复，就可以继续发送下一条消息。性能最高，但是最容易丢消息。大数据统计报表场景，对性能要求很高，对数据丢失不敏感的情况可以用这种。 （2）acks=1： 至少要等待leader已经成功将数据写入本地log，但是不需要等待所有follower是否成功写入。就可以继续发...阅读全文
长足发展，戳穿了它很难安装这个流言。目前的安装程序是市面上最灵活的安装程序之一。如果你接受默认设置、安装它建议的一群软件包，它就会进行安装，安装时间与Fedora的Anaconda大致一样。然而如果你自行选择，安装和选择一个个软件包所花的时间要长得多。这就是为什么率先推出快速安装程序的Ubuntu建议使用快速解决问题的Debian安装程序版本。 1.Debian社区 除了技术方面外，Debian还拥有免费软件领域最庞大、最创新的社区之一。该项目的邮件列表上热烈地讨论政策和技术选择；重大问题在Debian维护人员当中进行投票表决，包括谁是下一任项目负责人。所有投票取决于Condorcet方法，这是最公正的表决方法之一。在过去，该社区常常不欢迎女性，但这种情况在改善；总体上来讲，Debian在力...阅读全文
阻止器 这款应用程序对我来说不可或缺。我的密码很长，每当我离开Ubuntu电脑一段时间，Ubuntu锁屏就会锁住屏幕。 但有时正当我起劲地在BuzzFeed上读一篇长文或者观看YouTube视频时，它也会锁住屏幕。这种情况下，我不想锁屏来干扰我，此时可以使用caffeine。 Caffeine提供了一种快速抑制(阻止)屏幕保护程序或锁屏的方法。只要你在需要它时启用它，不需要它时禁用它! 7. KdenLive视频编辑器 你需要在上传到YouTube之前修饰一个视频片段?想为长长的视频播客增添漂亮的转场和炫酷的效果?那么，你应该使用Kdenlive。 Kdenlive是一款非线性视频编辑器，它很出色：用起来不仅很容易，还很可靠(其他Linux视频编辑器容易崩溃)。 替代方案：Flowblade...阅读全文
xfs 从 v5 开始支持查看文件的创建时间。使用 dmesg 命令，可以查看系统当前使用的 xfs 的版本：
```
# dmesg | grep -iE 'xfs.*\s+mounting' | head -1
```
如何查看 xfs 上文件的创建时间？
找到文件的 inode 信息后，就可以直接查看，
```
# stat -c '%i' test.txt
7827295
```
然后获取文件的创建时间，
```
# xfs_db -r -c "inode 7827295" -c "p v3.crtime.sec"
比较糙的方法，是直接用 uptime， 或者 who -b 这样的命令 样例， ``` [centos@new-py ~]$ uptime 01:17:00 up 12 days, 17:48, 1 user, load average: 1.08, 1.13, 1.14 [centos@new-py ~]$ who -b system boot 2022-12-22 07:28 ``` 细致一点的方法是，通过 /proc/uptime 计算系统启动的准确时间。 ``` cat /proc/uptime 5113396.94 575949.85 ``` 第一数字即是系统已运行的时间5113396.94 秒，运用系统工具 date 即可...阅读全文
% 的 Elasticsearch 启用了验证插件，另外有 2% 则关闭了 Elasticsearch。2018 年 11 月份，美国还曾发生一起 ElasticSearch 服务器在没有密码的开放状态下泄露了将近 5700 万美国民众个人信息的事件。当时共泄漏超过 73GB 数据，并且几个数据库被缓存在服务器内存中，其中一个数据库包含的个人信息就达到了 56,934,021 份。2018 年 12 月份，巴西最大的订阅电视服务之一的 Sky Brasil 在没有密码的情况下将 ElasticSearch 服务器暴露在互联网上，其 3200 万客户数据在网上暴露了很长时间，存储数据包括客户姓名、电子邮件地址、密码、付费电视包数据、客户端 IP 地址、个人地址、付款方式、设备型号等。 根据...阅读全文
模型的差别则在于一系列的函数处理一批数据包。这种方法的主要目的是解决当 pipeline 变复杂时所遇到 i-cache miss 较高的问题。 标量处理模型 vs 向量处理模型 标量处理模型在性能上不如向量处理模型的另一个原因，就是在不同处理函数（业务逻辑）之间，报文传递到下一个处理函数的方式上有所不同。前者只是简单地用 pointer assignment 的方法来传递，若处理基于不同批次的情况下，由于低效的 pointer assignment，会导致处理一批报文时性能低下。 而对于向量包处理模型而言，向量包处理模型反而可以减少上述标量处理模型因批处理而导致性能不理想的情况。这是因为在向量模型中，报文在业务逻辑之间的传输除了可以通过最原始的 pointer assignment 之外...阅读全文
Seafile 是一款开源的企业云盘，注重可靠性和性能。支持 Windows, Mac, Linux, iOS, Android 平台。支持文件同步或者直接挂载到本地访问。Seafile 的最新稳定版 6.1.4 已发布，更新如下： 云文件浏览器： 更新文件时不使用断点续传的上传功能 通过图标的显示来表示一个文件已被缓存 当文件更改后且无法上传到服务器时显示警告图标 用户可以重新对上传失败的本地修改文件进行上传 添加一个命令打开本地缓存文件夹 上传文件或文件夹时改进错误提示消息 [mac] 修复 doc/xls 文件下载后自动上传的 bug 一些 UI 的修复和改进 其他更新： 不显示 127.0.0.1 的连接状态 禁止编辑本地同步路径，用户只能选择路径 一些 UI 的修复和改进 完整更...阅读全文
和图像的互相转换，而是所有模态之间都可以方便地互相转化。 第三个方向是，模型可以持续学习。目前的模型如GPT都停滞在当初训练好的状态，并不会随着使用次数的增加而自我优化。我相信未来可以改变这一点。 如果上述三点都能实现的话，我们就可以解锁无数全新的应用场景，实现真正的科技革新，帮助人类实现科技的飞跃式前进。而且我相信，我们也有办法利用AI推动科研进步和新知识的产生。 我认为，现在普遍存在的一种错误观点是：“虽然语言模型的功能已经比较完善，还可以应用到图像和视频领域，将应用智能的边际成本降得非常低，但归根结底，它只是模仿人类做过的东西，不能为人类产生新知识，不能治疗癌症，也不能拓展人类已知的科学领域。”我相信，AI的发展会让持这种观点的人大吃一惊。 Reid Hoffman：AI将如何影响未来...阅读全文
存在本地的日志，大概就是类似于这个样子：上图显示，共有八条日志数据，其中已经提交了7条，提交的日志都将通过状态机持久化到本地磁盘当中，防止宕机。日志复制的保证机制如果两个节点不同的日志文件当中存储着相同的索引和任期号，那么他们所存储的命令是相同的。（原因：leader最多在一个任期里的一个日志索引位置创建一条日志条目，日志条目所在的日志位置从来不会改变）。如果不同日志中两个条目有着相同的索引和任期号，那么他们之前的所有条目都是一样的（原因：每次RPC发送附加日志时，leader会把这条日志前面的日志下标和任期号一起发送给follower，如果follower发现和自己的日志不匹配，那么就拒绝接受这条日志，这个称之为一致性检查）日志的不正常情况一般情况下，Leader和Followers的日志...阅读全文
