Kafka 3.0新特性全面曝光，真香！
不重不丢实现浅谈TCP BBR 拥塞控制算法成倍提升访问速度背后原理本文由高可用架构翻译。技术原创及架构实践文章，欢迎通过公众号菜单「联系我们」进行投稿。高可用架构改变互联网的构建方式...阅读全文
InfraPub 为您找到相关结果 554 个
Redis 6.0.0 GA已正式发布
辨率得到了改进，以使其永远不会比当前的“ HZ”值更糟，不管客户端连接的数量是多少。 6. RDB文件现在可以更快地加载。根据文件的实际组成（较大或较小的值），您可以期望获得20/30％的改进。现在，当有许多客户端连接时，INFO也更快，这是一个长期存在的问题，现在终于消失了。 7. 我们有一个新命令STRALGO，它实现了复杂的字符串算法。到目前为止，唯一实现的方法是LCS（最长的公共子序列），LCS是一种重要算法，用于比较冠状病毒的RNA（通常比较其他生物的DNA和RNA）。冠状病毒这件事太大，Redis内部需要保留一些痕迹。 原文参考 Redis 6.0.0 GA is out!...阅读全文
PostgreSQL 13 正式版发布
hstore等。 对于需要安全认证方法的应用，PostgreSQL 13 允许客户端在使用 SCRAM 身份认证时要求通道绑定，并且 PostgreSQL 外部数据包装器(postgres_fdw)现在可以使用基于证书的认证。详情请查看发布公告。 下载地址：https://www.postgresql.org/download/...阅读全文
开源社区纠纷不断：20 年的 Debian 开发者被排挤出项目
近日，据外媒报道，一位在 Debian 项目中服务超过 20 年的开发者 Norbert Preining 在去年 12 月被降级为维护者，这一行为导致他决定离开该项目。Preining 称，Debian 客户经理团队认为他“多年来一直在欺负项目成员”、“不能与社区团队沟通”。在接受采访时，Preining 表示他现在已经加入了 Arch Linux 项目，将在以后的博文中进行更多的解释。Debian 是一款为数极少的纯社区驱动的 Linux 发行版，而不是由商业公司或者政府机构所掌控。虽然 Debian 采用了 Linux Kernel （操作系统的核心），但是大部分基础的操作系统工具都来自于 GNU 工程， 因此又称为 Debian GNU/Linux。DAM 认为 Preining...阅读全文
Dubbo 2.7.0发布 分布式RPC服务框架
Dubbo 2.7.0 发布。Dubbo 是阿里巴巴公司开源的一个高性能优秀的服务框架，使得应用可通过高性能的 RPC 实现服务的输出和输入功能，可以和 Spring 框架无缝集成。 据开源中国对 Dubbo 的项目负责人北纬的采访 Dubbo 重启维护一年多，现在还活着吗？，新版本的更新亮点有： Dubbo 2.7.0 添加了社区呼声很高的 异步化支持 、以及 注册中心与配置中心分离 这两个特性。与 2.6 及以前的版本相比， 异步化支持 不再局限于基于 Future 接口的异步，也不再仅仅局限于只能在客户端异步。具体来说，Dubbo 2.7.0 版本全面拥抱 JDK8，在客户端开始支持基于 CompletableFuture 的异步编程范式，在服务端支持基于 AsyncContext...阅读全文
Go1.16 新特性：一文快速上手 Go embed
：go:embed helloworld/*。 总的来讲，Go1.16 embed 特性很好的填补了 Go 语言在打包静态文件资源的一块原生空白领域。同时也说明了 Go 官方的确在不断地吸收社区的一些良好的想法和经验。 分享 Go 语言、微服务和奇怪的系统设计 ???? 长按关注煎鱼，在知识的海洋里遨游 学习资料分享，关注公众号回复指令： 回复【000】，下载 LeetCode 题解大全。回复【001】，下载 Go 进阶图书 Mastering Go。...阅读全文
Elastic search 6.0.0 正式发布 大量新特性
性就是序列 ID，它允许基于操作的分片恢复。 以前，如果由于网络问题或节点重启而从集群断开连接的节点，则节点上的每个分区都必须通过将分段文件与主分片进行比较并复制任何不同的分段来重新同步。 这可能是一个漫长而昂贵的过程，甚至使节点的滚动重新启动非常缓慢。 使用序列 ID，每个分片将只能重放该分片中缺少的操作，使恢复过程更加高效。 使用排序索引更快查询 通过索引排序，只要收集到足够的命中，搜索就可以终止。它对通常用作过滤器的低基数字段（例如 age, gender, is_published）进行排序时可以更高效的搜索，因为所有潜在的匹配文档都被分组在一起。 稀疏区域改进 以前，每个列中的每个字段都预留了一个存储空间。如果只有少数文档出现很多字段，则可能会导致磁盘空间的巨大浪费。现在，你付出你...阅读全文
Linux 上如何禁用 USB 存储设备
为了保护数据不被泄漏，我们使用软件和硬件防火墙来限制外部未经授权的访问，但是数据泄露也可能发生在内部。 为了消除这种可能性，机构会限制和监测访问互联网，同时禁用 USB 存储设备。 在本教程中，我们将讨论三种不同的方法来禁用 Linux 机器上的 USB 存储设备。所有这三种方法都在 CentOS 6＆7 机器上通过测试。那么让我们一一讨论这三种方法。 方法 1：伪安装 在本方法中，我们往配置文件中添加一行 install usb-storage /bin/true， 这会让安装 usb-storage 模块的操作实际上变成运行 /bin/true， 这也是为什么这种方法叫做伪安装的原因。 具体来说就是，在文件夹 /etc/modprobe.d 中创建并打开一个名为...阅读全文
分布式 NewSQL 数据库 TiDB
时，进行 rename table 时潜在的问题修复多数据路径配置下进行 rename table 会导致数据丢失的问题修复某些场景下 TiFlash 存储空间上报错误的问题修复开启 Region Merge 情况下从 TiFlash 读取时潜在的问题ToolsTiDB Binlog修复因为 TiFlash 相关的 DDL job 导致 Drainer 同步中断的问题 #948 #942BR修复关闭 checksum 情况下，仍然执行 checksum 的问题 #223修复 TiDB 开启 auto-random 或 alter-pk 时，增量备份失败的问题 #230 #231 详细更新说明请参考官网说明，点击这里访问 TiDB 的详细文档。...阅读全文
Linux 进程 PID 编号最大为多少
默认值如下： 可见，虽然是64位系统，但默认也设置了32768，确实如手册中描述一致。通过： echo value > /proc/sys/kernel/pid_max 手动修改，可以设置预期的最大pid数值（2^22以下） 附Linux内核源码地址： 官网链接：https://www.kernel.org/ git: https://git.kernel.org/ 镜像：https://mirrors.edge.kernel.org/pub/...阅读全文
Open Source Initiative 批准四个新的开源许可证
许可证。 四个新的许可证 首先是 Cryptographic Autonomy License（CAL）。这个许可证是为分布式密码学应用而设计的。现有的开源许可证无法保证开放性，因为如果没有义务与其他对等体共享数据，那么一个对等体就有可能损害网络的运行。所以，CAL 除了是一个强大的版权许可以外，还包括向第三方提供独立使用和修改软件所需的权限和材料，而不使第三方有数据或功能的损失。 随着分布式密码学在加密结构的点对点共享中越来越多的使用，如果更多的开发者发现自己需要一个像 CAL 这样的法律工具，也就不足为奇了。我们希望由此产生的许可证是清晰易懂的，并希望开源从业者会发现它大有用处。 在我们之前的报道中曾提到，欧洲核子研究组织 CERN 提交的 CERN Open Hardware...阅读全文
LFS 8.0 正式发布：从零开始编译自己的 Linux 发行版
》（LFS）是杰勒德·比克曼斯等人编写的久负盛名的安装Linux的教科书，描述了从源代码编译Linux系统的方法。这本书可以从在Linux From Scratch网站上免费下载到，下载链接如文末。书中详细地描述了如何从零开始构建一个完整的 Linux 系统，不过 LFS 包含的套件较少，一般来说 BLFS 提供的套件更多，其几个相关的子项目有如下这些： Beyond Linux From Scratch（BLFS） 标准LFS仅仅安装了足够让系统启动的基本软件，以及使新系统能够编译新软件包的开发工具。BLFS包括了更多的软件包，且都有相应指导。 Crosss Linux From Scratch（CLFS） 为需要进行交叉编译（即在一个平台上编译另一个平台的代码）的用户提供指导，正式版本为1.0...阅读全文
Kubernetes调度算法浅析
给每个节点和待分配的pod进行打分。1.首先可用的node和pod会被打分函数进行打分，分数在0-10分之间。并且每个打分函数还有一个权重值。那么一个可用的node节点最后的总分就是：Σ函数打分*函数的权重值。 node节点总分 =（函数1的打分 * 函数1权重值）+......+（函数n的打分 * 函数n的权重值） 2.打分函数即优先级函数的种类： 这里只介绍了一部分的优先级函数算法，还有许多算法在这里未解释有兴趣的小伙伴可以上网查一下哦。 小结 kube-scheduler组件将整个集群资源调配变得很科学。比如该如何分配pod的副本到其他的node节点中，或者如何分配pod使得集群运转的更加高效。此外kube-scheduler还支持第三方的调度器进行扩展，所以是一种插件化的实现。...阅读全文
提前尝鲜，从 Debian 10 升级到 Debian 11
（PPA）。你可以在升级后逐一启用它们。 关闭所有正在运行的应用。 停止任何你可能已经启用的运行中的服务。升级完成后，你可以通过 systemctl 启动它们。这包括 Web 服务器、SSH 服务器、FTP 服务器或任何其他服务器。 确保你有稳定的互联网连接。 并为你的系统留出足够的停机时间。因为根据你的系统配置，Debian 版本升级需要时间大约在 1.5 小时到 2 小时之间。 将 Debian 10 Buster 升级到 11 Bullseye 确保你的系统是最新的，而且你的软件包列表是最新的。 sudo apt update && sudo apt upgrade 使用下面的命令安装 gcc-8-base 包。这是必须的，因为在历史上曾出现过升级失败的情况，这是因为下面的软件包中包含了某些...阅读全文
历数2017年五大Linux痛点
统的消失 许多用户都在哀叹他们最喜爱的发行版和软件项目中不再支持32位操作系统。越来越少的产品继续支持32位平台，这将会带来市场份额的降低和用户的流失。幸运的是，我们谈论的是开源，所以只要有人还在关心32位平台，你至少会有几个32位系统可选择。 5.不支持X-forwarding 很多长期用户经常使用X-forwarding，并将其看作一个关键功能。但随着Linux有越来越多的人使用，其对于X-forwarding的测试和支持有所减少，尤其是新应用程序。随着网络的透明度不断发展，情况可能会在好转之前变得更糟。 与去年相比有哪些变化 ·视频（特别是加速器加速；最新的视频卡；专用驱动程序；高效的电源管理） ·蓝牙支持，特定的wifi芯片和打印机，电源管理以及暂停/恢复，对许多用户来说仍然是麻烦的...阅读全文
Debian 上安装搭建 Shadowsocks 服务
在使用了一段时间后，决定由 CentOS 转移到 Debian 上，以便在低配置的服务器上网站能更加的稳定，Shadowsocks 服务也有之前的 python 版本转移到了 shadowsocks-libev 版本，原因是 libev 的版本是用 C 语言写的，会更加的节省内存，更重要的是该 libev 一直在不断的维护着，更新也很频繁。 搭建环境 本人还是在 Vultr.com 的 VPS 上安装了 Debian 8.0 x86 minimal 系统，在 Debian 8(Jessie) 编译 libev 版本需要开启 debian-backports 来安装 dh-systemd 和 init-system-helpers. 首先要在 debian 的源列表中添加 backports...阅读全文
HAProxy用法详解 最详细中文文档
一、HAProxy简介 （1）HAProxy 是一款提供高可用性、负载均衡以及基于TCP（第四层）和HTTP（第七层）应用的代理软件，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。 HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。HAProxy运行在时下的硬件上，完全可以支持数以万计的 并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中， 同时可以保护你的web服务器不被暴露到网络上。 （2）HAProxy 实现了一种事件驱动、单一进程模型，此模型支持非常大的并发连接数。多进程或多线程模型受内存限制 、系统调度器限制以及无处不在的锁限制，很少能处理数千并发连接。事件驱动模型因为在有更好的资源和时间管理的用户端(User...阅读全文
深入了解Docker背后的namespace技术
容器中创建namespace，不要让他影响到你，我选择提供一个容器预加载所有依赖项的方法。我使用 --net host标志，这样可以在容器内看到host的网络接口。也需要提供--privilged标签，以保证拥有正确的权限去通过容器创建新的namespace。 以下是Dockerfile内的内容： FROM debian:jessie RUN apt-get update && apt-get install -y \ gcc \ vim \ emacs COPY containers/ /containers/ WORKDIR /containers CMD ["bash"] 我会使用C语言来解释这个例子，因为它比Go语言更容易去解释底层的细节。 NET Namespace network...阅读全文
社交巨人Facebook使用Linux和Btrfs的姿势
被我们称之为“影子层”的地方进行——我们可以在一个非生产环境重放生产网络的流量，这样我们能够在一个非常安全的地方检测系统的稳定性和性能。我们可以像做实验那样一边加大流量一边说：“好了，我先给它（测试环境）5％的生产网络流量，然后一路增加到100%，看看会有什么发现吧。”像做A/B测试那样，我就能得到两个内核在整个实验过程中对比鲜明的数据。 我们有工具能验证内核并帮助测试上游内核。这样比较容易发现上游内核新的有意思的bug，而非只是找到已经被上游内核修复过的bug。 Linux.com：您比较担心什么问题？ Chris Mason：就运行Linux内核或者文件系统而言，我们还没遇到什么问题；况且有这么多的社区在支持Linux，我也没有必要担心什么。 Linux.com：您参与Linux开发也有...阅读全文
架构师详解 Nginx 架构
引言：众所周知，Nginx 服务器是一个高性能的 Web 和反向代理服务器。Nginx 在激烈的 Web 服务器竞争中依旧保持良好的发展势头，一度成为 Web 服务器市场的后期之秀，这一切跟 Nginx 的架构设计是分不开的。 一. Nginx 模块化设计 高度模块化的设计是 Nginx 的架构基础。Nginx 服务器被分解为多个模块，每个模块就是一个功能模块，只负责自身的功能，模块之间严格遵循“高内聚，低耦合”的原则。 核心模块 核心模块是 Nginx 服务器正常运行必不可少的模块，提供错误日志记录、配置文件解析、事件驱动机制、进程管理等核心功能。 标准 HTTP 模块 标准 HTTP 模块提供 HTTP 协议解析相关的功能，如：端口配置、网页编码设置、HTTP 响应头设置等。 可选...阅读全文
Kubernetes 部署 Nacos 1.4 集群 · 小豆丁
性： 服务发现： 支持 DNS 与 RPC 服务发现，也提供原生 SDK 、OpenAPI 等多种服务注册方式和 DNS、HTTP 与 API 等多种服务发现方式。 服务健康监测： Nacos 提供对服务的实时的健康检查，阻止向不健康的主机或服务实例发送请求。 动态配置服务： Nacos 提供配置统一管理功能，能够帮助我们将配置以中心化、外部化和动态化的方式管理所有环境的应用配置和服务配置。 动态 DNS 服务： Nacos 支持动态 DNS 服务权重路由，能够让我们很容易地实现中间层负载均衡、更灵活的路由策略、流量控制以及数据中心内网的简单 DNS 解析服务。 服务及其元数据管理： Nacos 支持从微服务平台建设的视角管理数据中心的所有服务及元数据，包括管理服务的描述、生命周期、服务的静...阅读全文
协议介绍之深入了解 gRPC
选择。 如果大家对解析 HTTP/1.x 很感兴趣，可以研究下 http-parser，一个非常高效小巧的 C library，见过不少框架都是集成了这个库来处理 HTTP/1.x 的。 Request/Response HTTP/1.x 另一个问题就在于它的交互模式，一个连接每次只能一问一答，也就是client 发送了 request 之后，必须等到 response，才能继续发送下一次请求。 这套机制是非常简单，但会造成网络连接利用率不高。如果需要同时进行大量的交互，client 需要跟 server 建立多条连接，但连接的建立也是有开销的，所以为了性能，通常这些连接都是长连接一直保活的，虽然对于 server 来说同时处理百万连接也没啥太大的挑战，但终归效率不高。 Push 用...阅读全文
理解 Linux 的虚拟内存
前不久组内又有一次我比较期待的分享：“Linux 的虚拟内存”。是某天晚上加班时，我们讨论虚拟内存的概念时，leader 发现几位同事对虚拟内存认识不清后，特意给这位同学挑选的主题。 我之前了解一些操作系统的概念，主要是毕业后对自己大学四年的荒废比较懊恼，觉得自己有些对不起计算机专业出身，于是在工作之余抽出时间看了哈工大在网易云课堂的操作系统公开课，自己也读了一本讲操作系统比较浅的书 《Linux内核设计与实现》，而且去年自己用 C 写简单的服务器时，也追根究底了解了更多的系统底层知识。多亏了这些知识，让我对应用层的知识更有掌控感，也在上次排查问题时（从应用到内核查接口超时）助了我一臂之力。 前几天另一位同事来问另一个虚拟内存相关的问题，我才发现对于虚拟内存，我的理解还不够深刻，一些概念还...阅读全文
Gitlab CI 配置文件 .gitlab
update --init --recursive 注意：如果想要此功能正常工作，子模块必须配置（在.gitmodules）下面中任意一个： 可访问的公共仓库http(s)地址， 在同一个GitLab服务器上有一个可访问到另外的仓库的真实地址。更多查看Git 子模块文档。 Job stages attempts GitLab引入，要求GItLab Runner v1.9+。 正在执行的job将会按照你设置尝试次数依次执行下面的stages： 变量 描述 GET_SOURCES_ATTEMPTS 获取job源的尝试次数 ARTIFACT_DOWNLOAD_ATTEMPTS 下载artifacts的尝试次数 RESTORE_CACHE_ATTEMPTS 重建缓存的尝试次数 默认是一次尝试。 例如...阅读全文
阿里巴巴版 JDK 首发 GA 版 生产环境可用
增强和安全修复，主要针对的场景是数据中心大规模 Java 应用部署情况下，Java 应用稳定性、效率以及性能的优化与提高。从目前公开的功能和披露的规划上来看，Dragonwell 8 具有下述三大重要特性： JwarmUp JwarmUp 是为了解决双十一抢购场景下，阿里巴巴 Java 系统 warmup 的痛点。以普通的 Java 应用举例，JVM 需要经过解释执行 (interpreter) 找到热点，然后通过 JIT 编译器来加速热点方法的运行。对于高并发场景，应用启动之后会有很长时间处于寻找热点、编译热点的状态。这时，很多性能指标 (CPU 使用率、TPS 吞吐量、 RT 响应时间) 不是非常理想。换句话说，当 Java 应用启动并提供服务之后，在相当长的时间内处于 warmup 状...阅读全文
HTTP状态码详解
HTTP状态码（HTTP Status Code）是用以表示网页服务器HTTP响应状态的3位数字代码。它由 RFC 2616 规范定义的，并得到RFC 2518、RFC 2817、RFC 2295、RFC 2774、RFC 4918等规范扩展。所有状态码的第一个数字代表了响应的五种状态之一。 各状态码具体含义 1xx 消息 这一类型的状态码，代表请求已被接受，需要继续处理。这类响应是临时响应，只包含状态行和某些可选的响应头信息，并以空行结束。由于 HTTP/1.0 协议中没有定义任何 1xx 状态码，所以除非在某些试验条件下，服务器禁止向此类客户端发送 1xx 响应。 100 客户端应当继续发送请求。这个临时响应是用来通知客户端它的部分请求已经被服务器接收，且仍未被拒绝。客户端应当继续发送...阅读全文
Linux：为什么那么多人讨厌 Systemd
Systemd在Linux社区引起了无限争议。一些Linux用户对systemd的反对绝不屈从，还有一些Linux用户对systemd喜爱有加，还有很多人满不在乎。近日，关于systemd的话题又出现在社区中，很多人分享了自己的想法。一时兴起，笔者梳理了几个比较经典的回答。 为什么不喜欢systemd? 不断地听到很多人抱怨systemd有多么不好，但它还是被极大地普及了，并且我在网上所读到的很多文章都在介绍systemd的好处，比如更快的启动时间和更完善的日志记录，据说过去在fedora-13上开机速度测试，upstart是27秒，而systemd仅用了24秒。 有人认为unix是做一件事，就把它做好，而systemd则是把pid 1扩张到最大化。这可能是很多人讨厌systemd的重大原...阅读全文
Stackstorm 入门介绍
可扩展套件，与你的基础环境交互，执行流程如下： 从各个服务系统通过push或pull的方式把event传给sensors， sensors会产生一个trigger到规则配置中查询该trigger对应的动作或者工作流将来自工作流的Action发送到消息队列（内置rabbitmq）中Actions到达外部的系统后就执行相应的动作日志和审计历史被推送到数据库进行存储（Mongodb）处理后的结果被发送回规则引擎进行进一步处理 Stackstorm的更新非常活跃，最新的发布信息从官方网站上可以看到。目前最新的版本是 2.10.1。 Stackstorm工作原理 目录...阅读全文
Debian 使用VSFtpd安装配置架设FTP服务器
0不限止 anon_max_rate 匿名最大传输速度，0为无限制 local_max_rate 本地用户最大传输速度，0为无限制 max_clients 最多客户端连接，0为无限制 max_per_ip 一个ip的最大连接数，0为无限制 更多的配置内容请访问vsftpd的官方网站查看： http://vsftpd.beasts.org/vsftpd_conf.html 配置本地组访问FTP 首先创建用户组clin003和FTP的目录 groupadd clin003-com (组名是随便取的,只是便于管理以后可以随时cat /etc/group |grep clin003-com) mkdir /tmp/clin003 (我直接给用户分配管理/var/www文件,用来管理apache的...阅读全文
AWS EKS 添加IAM用户角色 - SRE运维博客
和 system:nodes。有关更多信息，请参阅 Kubernetes 网站上的默认角色和角色绑定。 {{< /notice >}} 创建 rbac.yaml --- apiVersion: rbac.authorization.k8s.io/v1 kind: ClusterRole metadata: name: reader rules: - apiGroups: ["*"] resources: ["deployments", "configmaps", "pods", "secrets", "services"] verbs: ["get", "list", "watch"] --- apiVersion: rbac.authorization.k8s.io/v1 kind...阅读全文
2017 热门开源自动化测试框架优缺点对比
松分组。 允许创建并行测试。 缺点： 只支持 Java ，至少需要具备 Java 编程语言的基础知识。 必须投入时间进行框架设置和设计。 如果你使用 Java ，并正寻找端到端的自动化测试框架，同时愿意投入一点时间去设置框架，你应该考虑使用 TestNG 。 6. Jasmin Jasmine 是一个 JavaScript 单元测试框架， 也被称为 JavaScript 的行为驱动开发（BDD）测试框架。适用于网页、Node.js 项目或任何可以运行 JavaScript 的地方。它主要与 AngularJS 配对使用。 优点： 除了 JavaScript ，还可以运行在 Python 和 Ruby 中。如果想在你的服务器端运行客户端测试，它可以帮助你。 被许多 CIs 使用和支持。 内置用...阅读全文
Debian、Ubuntu安装源配置文件说明
」。 Debian 多媒体源 一些多媒体软件因牵涉到版权问题，包括硬件解码器，Debian 官方并未收录，有一网站专门填补该空缺，见 http://www.deb-multimedia.org。 最后忠告：不要同时启用多个源，同一仓库的源启用一个即可，否则容易引起混乱。以下实例便是列有多套而仅启用一套。...阅读全文
Rust 1.37.0 稳定版发布
::bufferCell::from_mutCell::as_slice_of_cellsDoubleEndedIterator::nth_backOption::xor[{i,u}{8,16,32,64,128,size}::reverse_bits] 和 Wrapping::reverse_bitsslice::copy_within 获取 Rust 1.37.0 方式如下： $ rustup update stable 或者访问官网获取：https://www.rust-lang.org/install.html. .详情见发布说明...阅读全文
兼容 tmux 的文件上传/下载工具 trzsz ( trz / tsz ) 使用指南 支持进度条和目录传输
xxx ( 加上 -q 选项 )，则在传输文件时不显示进度条。-y 覆盖模式trz -y 或 tsz -y xxx ( 加上 -y 选项 )，如果存在相同文件名的文件就直接覆盖。-b 二进制模式trz -b 或 tsz -b xxx ( 加上 -b 选项 )，二进制传输模式，对于压缩包、图片、影音等较快。-e 转义控制字符二进制模式时，控制字符可能会导致失败，trz -eb 或 tsz -eb xxx ( 加上 -e 选项 ) 转义所有已知的控制字符。-d 传输文件夹trz -d 或 tsz -d xxx ( 加上 -d 选项 )，则可以上传或下载指定文件夹和文件。-B 缓冲区上限trz -B 20m 或 tsz -B 2M xxx 等，设置最大缓冲区上限 ( 默认 10M )。会自动根据网速选...阅读全文
如何对一个deb包解压、修改、重新打包 全过程
deb解包封包工具 08-21 此软件用于解包封包deb包 win下解压deb文件的插件 03-03 How to install DEB plugin: 1. Unzip the deb.wcx to the Total Commander directory 2. In Total Command ubuntu下deb的解压方法 feigeswjtu的专栏 12-25 1万+ 承接上一篇文章中的第二步，解压ubuntu下的deb文件，还是网上搜索吧，http://blog.csdn.net/monkey_d_meng/article/details/6034268这篇文章将的很详细，但是对菜鸟来说还是有点高深，只是说解压deb的方法，没办法了，自己man dpkg查看吧，结果找到了，没...阅读全文
你应该选择Cinnamon作为Linux桌面环境的十个理由
。 我们还可以在其中找到“Create New Document”选项，借此在~/Templates目录中创建一个文档模板并列出现有模板选项。它使用的是用户默认的办公应用，我个人选择了LibreOffice。 8. 多工作区。Cinnamon与其他桌面环境一样提供多桌面功能，并将其称为“工作区”。工作区选择器位于Cinnamon面板中，且会显示每个工作区的窗口缩略图。不过，我发现工作区选择器有时候无法及时跟上窗口的显示位置，所以我通过调整让选择器仅显示工作区数量，而非工作区内的具体窗口。 9. Nemo。大多数桌面都会使用自己的默认应用，Cinnamon也是如此。我个人最喜爱的桌面文件管理器是Krusader，但Cinnamon默认使用Nemo，所以我对它进行了测试。Nemo确实相当出色，界面干...阅读全文
Terraform 学习总结 — Terraform 简介
点上检查一下，发现名称为 NickResourceGroup 的 Resource Group 已经创建成功了。 总结 Terraform 支持的平台非常多，像 AWS，Azure 等大厂自然是不用说了，一些小的厂商也可以通过提供 provider 支持 Terraform，从而让整个生态变得非常活跃。如果大家想在 DevOps 实践中引入基础设施即代码，无论是面对的是公有云还是私有云，相信 Terraform 都不会让你失望。...阅读全文
为何说微软不会基于Linux内核重构Windows
Window）已经转移。 对此，Barnes 认为微软不会基于 Linux 内核来重构 Windows 理由如下 1.内核 Windows 系统中的 NT 内核提供了一定程度的向后兼容、长期支持和驱动程序可用性，而 Linux 还在不断完善中。如果想要基于 Linux 重构，这必然需要耗费数百万美元。微软有很多付费客户可以继续按原样支持 Windows，某些已经有数十年了。 基于 Linux 重构 Windows，并不像 Raymond 所说的那样能够帮助微软节省开支。很多盈利公司的存在都是为现有的操作系统而服务的。即便是最终基于 Linux，也可能会导致不良的内核单一化。 Windows 和 macOS 的竞争，才能让 Linux 变成更好的操作系统。而更理想的结果是开源创新能够在所有操作系统之间传...阅读全文
监控Kubernetes集群证书过期时间的三种方案 - OSCHINA
博客 (ewhisper.cn) Prometheus Operator 与 kube-prometheus 之二 - 如何监控 1.23+ kubeadm 集群 - 东风微鸣技术博客 (ewhisper.cn) x509-certificate-exporter/deploy/charts/x509-certificate-exporter at master · enix/x509-certificate-exporter (github.com) 三人行, 必有我师; 知识共享, 天下为公. 本文由东风微鸣技术博客 EWhisper.cn 编写....阅读全文
Golang 操作 Kafka 样例
1. Kafka介绍 1.1.1. Kafka是什么 kafka使用scala开发，支持多语言客户端（c++、java、python、go等） Kafka最先由LinkedIn公司开发，之后成为Apache的顶级项目。 Kafka是一个分布式的、分区化、可复制提交的日志服务 LinkedIn使用Kafka实现了公司不同应用程序之间的松耦和，那么作为一个可扩展、高可靠的消息系统 支持高Throughput的应用 scale out：无需停机即可扩展机器 持久化：通过将数据持久化到硬盘以及replication防止数据丢失 支持online和offline的场景 复制代码 1.1.2. Kafka的特点 Kafka是分布式的，其所有的构件borker(服务端集群)、producer(消息生产...阅读全文
不要光想着价格 QLC 与 TLC 闪存有什么不同
在这个互联网时代，游戏、电影、照片等数据越来越大，硬盘容量将会面临着前所未有的挑战。虽然传统的机械硬盘可以解决容量问题，但是速度太慢，体验糟糕，并不是最优的个人存储解决方案。我们渴求大容量的SSD，不过超过TB大容量SSD动不动就几千元的售价，对于支付能力有限用户实际上没有意义。SSD的成本主要来源于闪存，在TLC闪存能够实现TB容量可惜价格未能降下来。只有不断开发新类型的闪存，解决容量与价格的矛盾，才能让SSD真正在大数据时代发挥应有作用。 这时，QLC 闪存就应运而生， 目前，东芝和西数先后宣布成功开发基于四比特单元3D NAND闪存芯片，即QLC闪存，这也意味着QLC SSD将要来临。那么，它与TLC闪存又有什么区别，能否取代TLC成为SSD主流闪存之选？ 先来了解一下什么是TLC...阅读全文
改善 Debian Linux 软件包管理的七款工具
说，你可以用它来设定软件包安装时向你提出哪种类型的问题、重置问题的优先级，或者尽管软件包破损仍强行安装。 dpkg-reconfigure可用来配置基于Debian系统的几乎方方面面。由于出现了配置安装系统的其他工具，它的多用途性在丧失，不过dpkg- reconfigure仍可用于配置诸如此类的特性：时区、视频驱动程序、打印机和扫描仪。Ubuntu弃用了dpkg- reconfigure，但是它在其他基于Debian的发行版中仍很有用。 4.netselect-apt 如今，互联网连接的速度已经非常快。然而，一些软件包代码库的速度仍比其他代码库要快;在使用高峰期间，流行的软件包代码库会降低速度。有时候，根本就缺少高速连接。 对于注重速度的那些人来说，netselect-apt为你的位置列出...阅读全文
我要彻底放弃 Debian 操作系统！-Michael Stapelberg
FTP，通过该服务接收我的包，并在响应中返回权威的决定：拒绝或接受。对于接受的包，通过一个状态页面来显示包的状态，以及可以通过镜像网络提供包的时间。包应在构建完成后，几分钟内即可进入可访问状态。 陈旧的基础设施：bug追踪 我非常害怕与Debian的bug追踪系统交互。debbugs是一款始于1994年的软件，目前仅供Debian和GNU项目使用。 Debbugs负责处理电子邮件，也就是说它的处理是异步的且很麻烦。尽管我们在Debian最快的机器上运行了Debbugs，但是它的Web界面加载速度依然非常慢。 尤其是bugs.debian.org的Web界面是只读的。为reportbug（1）（https://manpages.debian.org/stretch/reportbug...阅读全文
深入理解Golang之context
:= srv.newConn(rw) c.setState(c.rwc, StateNew) // before Serve can return go c.serve(ctx) } } 2、建立连接之后会基于传入的context创建一个valueCtx用于存储本地地址信息，之后在此基础上又创建了一个cancelCtx，然后开始从当前连接中读取网络请求，每当读取到一个请求则会将该cancelCtx传入，用以传递取消信号。一旦连接断开，即可发送取消信号，取消所有进行中的网络请求。func (c *conn) serve(ctx context.Context) { c.remoteAddr = c.rwc.RemoteAddr().String() ctx = context.WithValue(ctx...阅读全文
细数k8s支持的4种类型的container - 侃豺小哥
初始化容器，该容器要等到API准备好后才能成功退出。只有在初始化容器成功完成其工作之后，应用程序容器才会启动。 初始化容器不能像应用程序容器那样使用运行状况和就绪探针。原因是它们要成功启动和退出，就像Jobs和CronJobs的行为一样。 同一Pod上的所有容器共享相同的卷和网络。您可以利用此功能在应用程序及其初始化容器之间共享数据。 正如我们刚刚讨论的那样，init容器总是比同一个Pod上的其他应用程序容器先启动。结果，调度程序对init容器的资源和限制赋予了更高的优先级。必须仔细考虑这种行为，因为这可能会导致不良后果。例如，如果您有一个初始化容器和一个应用程序容器，并且将初始化容器的资源和限制设置为高于应用程序容器的资源和限制，那么只有在有一个可用节点满足初始化的情况下，才调度整个Pod...阅读全文
Kafka生产问题总结以及性能优化
消息发送端： 发送消息如果配置了重试机制，比如网络抖动时间过长导致发送端发送超时，实际broker可能已经接收到消息，但发送方会重新发送消息 消息消费端： 如果消费这边配置的是自动提交，刚拉取了一批数据处理了一部分，但还没来得及提交，服务挂了，下次重启又会拉取相同的一批数据重复处理 一般消费端都是要做消费幂等处理的，比如每条消息使用redis的setnx分布式锁，把消息放redis里，这样两次消息一样的话，第二次的消息是放不进去的。 2.1.3 消息乱序 如果发送端配置了重试机制，kafka不会等之前那条消息完全发送成功才去发送下一条消息，这样可能会出现，发送了1，2，3条消息，第一条超时了，后面两条发送成功，再重试发送第1条消息，这时消息在broker端的顺序就是2，3，1了 所以，是否一...阅读全文
开源社区的运作模式：Debian Vs. Ubuntu
。Debian计划并没有盈利组织支援，它的开发团队完全由来自世界各地的志愿者。Debian经常被认为是一个Linux发行版，但实际上Debian所涵盖的并不仅仅是Linux，还有GNU、FreeBSD等多种作业系统，因此Debian的官方称呼叫做“Debian通用操作系统”。 采用Linux核心的Debian GNU/Linux是后来很多Linux发行版的基础，Ubuntu正是其中最知名的一个发行版。Ubuntu的官方支持者是Canonical公司，六个月一次的Ubuntu新版本发布都是由Canonical负责，但大部分编码、分发、文档、翻译等工作都是由社区志愿者完成。 接下来，让我们进一步了解这两个项目的成员结构。 Debian的成员结构 Debian只有两种官方背景的成员角色：Debian开发者...阅读全文
谷歌公开了内部管理Infra层的两个工具的Paper
个简化的Web应用，由这些部分组成： 为了冗余而在两个集群上运行的二进制文件，实现前段逻辑负载均衡，有集群前和全局的配置全局的Spanner数据库 生产或者服务基础架构提供服务所需的基础模块来服务用户的请求，比如，Borg集群管理系统[2]，网络交换机的firmware等等。每个这些组件都是一个asset。 Shakespeare服务使用多个基础架构提供者：Borg来运行二进制文件，GSLB[1]管理负载均衡，以及Google共享的Spanner基础架构。 控制平面是服务用于管理生产服务基础结构的平面——比如，添加一台VM或者搭建负载均衡器。控制平面可以包括人工（“我会把新的二进制文件拷贝到服务器上”）到复杂的自动化系统（“我使用机器学习来控制变更”）。控制平面包括变更管理：控制平面里的逻辑...阅读全文
Linux系统诊断-内存基础
果是特权进程（privileged）,会减分(-)进程如果对硬件设备进行直接访问，会减分(-)3.在哪儿可以看到进程的打分？/proc/
SVN切换分支用法汇总
path:"中输入目标分支的远程地址，例如http://localhost/branches/develop/。Step 3：单击“OK”按钮，等待操作完成即可。四、SVN切换分支常见问题处理在使用SVN进行分支切换的过程中，可能会遇到一些常见的问题。为了方便大家解决这些问题，下面列举了一些经常遇到的问题及其解决方法：1. SVN switch的URL地址错误在使用SVN switch命令进行分支切换时，如果URL地址有误，可能会导致切换分支失败。此时，可以按照以下步骤进行处理：Step 1：检查URL是否正确；Step 2：确认URL地址是否可以访问。2. 更新操作失败在进行分支切换的过程中，可能会遇到更新操作失败的问题。这时，我们可以使用以下方法来解决这个问题：Step 1：检查网络连接是否正...阅读全文
最新评论
