来看，DevOps 的采用率从 2015 年到 2016 年增加了约 8％，预计这一数字将在 2019 年大幅增长。 根据 Statista 的报告，很多商业组织正在采用 DevOps，2018 年增长率高达 17％，而 2017 年则为 10％左右。 你可以在 RightScale 上查看完整的报告。Forrester 的报告中也明确提到了 2018 年将是 DevOps 年。我们看到了将影响来年 DevOps 发展的八个事实。 焦点从 CI 管道转到 DevOps 装配线 管道为应用程序提供了从源码控制到生产环境的一套完整的可视化视图。你可以在某个地方看到所有的内容。现在不仅要做 CI（持续集成），还要做 CD（持续交付）。企业正投入时间和精力，以便更多地了解如何自动化完整的软件开发过程...阅读全文
Streams 时间戳同步KIP-695增强了 Streams 任务如何选择获取记录的语义，并扩展了配置属性的含义和可用值max.task.idle.ms。此更改需要 Kafka 消费者 API 中的一种新方法，currentLag如果本地已知且无需联系 Kafka Broker，则能够返回特定分区的消费者滞后。KIP-715：在流中公开提交的偏移量3.0开始，三个新的方法添加到TaskMetadata接口：committedOffsets，endOffsets，和timeCurrentIdlingStarted。这些方法可以允许 Streams 应用程序跟踪其任务的进度和运行状况。KIP-740：清理公共 API TaskIdKIP-740代表了TaskId该类的重大革新。有几种方法和所有内部字段已被...阅读全文
理内存的 C 地址。 我们知道系统里的基本单位都是 Byte 字节，如果将每一个虚拟内存的 Byte 都对应到物理内存的地址，每个条目最少需要 8字节（32位虚拟地址->32位物理地址），在 4G 内存的情况下，就需要 32GB 的空间来存放对照表，那么这张表就大得真正的物理地址也放不下了，于是操作系统引入了 页（Page）的概念。 在系统启动时，操作系统将整个物理内存以 4K 为单位，划分为各个页。之后进行内存分配时，都以页为单位，那么虚拟内存页对应物理内存页的映射表就大大减小了，4G 内存，只需要 8M 的映射表即可，一些进程没有使用到的虚拟内存，也并不需要保存映射关系，而且Linux 还为大内存设计了多级页表，可以进一页减少了内存消耗。操作系统虚拟内存到物理内存的映射表，就被称为页表...阅读全文
互联网工程指导委员会(IETF)释出了传输层安全性协议的最新版本 TLS 1.3。TLS 被广泛用于创建安全连接，TLS 1.3 是基于 TLS 1.2，主要区别是移除了较少使用的弱加密算法，移除 MD5 和 SHA-224 哈希支持，请求数字签名，集成 HKDF，移除许多不安全或过时特性的支持，不再支持静态 RSA 密钥交换，握手将默认使用前向安全 Diffie-Hellman，客户端只需要一次往返就能与服务器建立安全和验证的连接，等等。Firefox 和 Chrome 都已经支持 TLS 1.3 的草拟版本。 TLS 1.3是一种新的加密协议，它既能提高各地互联网用户的访问速度，又能增强安全性。我们把使互联网实现安全通信的基础性技术称为传输层安全协议（TLS）。TLS是安全套接层协议...阅读全文
打破长达半世纪的 IP 协议，重塑互联网，可能实现吗？华为正在尝试中。据《金融时报》报道，华为联合中国工会、中国电信、中国工业和信息化部向国际电信联盟（International Telecommunication Union，ITU）提出一项名为“New IP” 的提案。 华为在提交的议案文章（题为“New IP framework and Protocol for Future Applications”）中介绍到，New IP 是一种新型互联网协议框架，能够更好地支持新兴网络应用，比如多网络和全息通信等，将从根本上支持网络层的可变长度、多语义地址以及用户定制的网络。 华为指出，现有的 IP 协议已面临着网络挑战，主要有两个方面：一是 AR/VR、全息通信等新兴应用的发展需要更高效和定...阅读全文
要选择在哪些环境和集群下使用 4.3.3 在Namespace中添加配置项 接下来在这个新建的namespace下添加配置项 添加完成后就能在FX.Hermes.Producer的namespace中看到配置。 4.3.4 发布namespace的配置 4.3.5 客户端获取Namespace配置 对自定义namespace的配置获取，稍有不同，需要程序传入namespace的名字。更多客户端使用说明请参见Java客户端使用指南。 Config config = ConfigService.getConfig("FX.Hermes.Producer"); Integer defaultSenderBatchSize = 200; Integer senderBatchSize...阅读全文
去管资源问题。这需要我们去提供一个海量的集群去跑客户的应用，这就存在一个问题，多个客户的应用可能跑在一个节点上，考虑 Docker 本身的隔离问题，我们需要类似虚拟化容器的计算方式去做隔离，同时又希望拥有 Docker 本身轻量级快速启动的效率，现在看来，虚拟化容器是比较符合这个需求的。 尾声 通过和叶理灯的交谈，梳理了我对云计算、容器技术和 Serverless 等方面的一些认识，作为一个几年来亲自践行云计算发展，并有深入探讨和研究的专家，他的观点和认识或许值得从业云计算行业的技术人员参考。...阅读全文
。 其中，实际投票前的讨论期长度是由项目负责人决定的（这一点没有变化），但新的规则是将这个时期的时长限制在两到三周。 对选票的任何实质性修改（例如增加新的选项）将会使得讨论期至少再增加一周，但这个时长仍然不能超过最长期限。如果讨论期能继续延长的时长少于 24 小时了，就不能再进行这类实质性修改了。 项目负责人有权将讨论期缩短或延长一周，但缩短讨论期的情况下也必须要确保能至少还有 48 小时的时间。 如此一来，无论是哪个流程，都为讨论时间设置了一个上限。同时，也准备了一些机制来防止被迫投票的情况。 “如果人们在这个过程中不觉得自己被人欺负了，那么他就会更容易接受一个不符合他意愿的决策。” Allbery表示。 03 行动 尽管离开了 Debian，Joey 还是在今年11月的一场访谈中表达了自己对...阅读全文
。事实上，Linux出色的可靠性与灵活性使它成为关键性基础设施内不可或缺的核心要素。 那么究竟是什么神奇的力量让Linux这样一位“私生子”变成世界的主宰?根据VAR Guy网站的总结，Linux成功的原因包括分布式开发方法、务实的意识形态、切实可行的内核设计以及庞大且活跃的Linux社区。 2. Fedora 25成为首款默认使用Wayland的Linux发行版 Fedora 25将Wyland作为它兼容机上的默认显示协议。为什么选择Wayland?Fedora开发者Matthias Clasen表示它能够实现客户端间彼此隔离、更适合现代显示系统(不包含不必要的核心字体或核心渲染等‘累赘’)且能够实现原有X系统无法实现的多种功能(例如输入转换以及在合并桌面与全屏客户端之间进行顺畅过渡...阅读全文
的支持。可以将docker的/metrics端点暴露给插件： $ docker plugin install --grant-all-permissions cpuguy83/docker-metrics-plugin-test:latest $ curl http://127.0.0.1:19393/metrics 这个插件仅用于示范。它在主机的网络上运行了一个反向代理，能将请求转发给插件中的本地的指标套接字。在真实场景中，可能会将收集的指标数据发送给外部的服务，或者使它可以被一个服务如Prometheus访问并收集。 注意尽管指标插件在非实验性的daemon中可以使用，指标标签（metrics label）仍应该被看作是实验性的，可能在Docker未来的版本中发生改动。 日志驱动插件 添...阅读全文
源。相反，我们需要另一种形式的身份：以某种内在方式与工作负载、用户或系统相关联。而且这种身份需要以某种方式进行验证，而这种方式本身并不需要信任网络。这是一个具有丰富含义的大要求。提供网络安全但依赖于 IP 地址等网络标识符（如 IPSec 或 Wireguard）的系统不足以实现零信任。策略有了新的身份模型，我们现在需要一种方法来捕获每个身份的访问类型。在上面的边界方案中，通常授予一系列 IP 地址对敏感资源的完全访问权限。例如，我们可能会设置 IP 地址过滤，以确保仅允许防火墙内的 IP 地址访问敏感服务。在零信任的情况下，我们反而需要执行必要的最低访问级别。基于身份以及任何其他相关因素，应尽可能限制对资源的访问。虽然我们的应用程序代码可以自己做出这些授权决策，但我们通常会使用在应用程序之...阅读全文
本文翻译自 Wasm Labs @ VMware OCTO 的 blog： WebAssembly: Docker without container，已获得授权这是 Wasm Labs 在 2022 年 12 月 15 日在冬季 Docker Community All Hands 7 的关于 Docker+WebAssembly 的演讲的文字版。作者：Asen Alexandrov，Wasm Labs 工程师文中的我们均指作者或 Wasm Labs。由于文章内容翔实、篇幅较长我们将分成上下两篇分享，上篇将注重在概念阐释，如 Wasm 是什么，Wasm 与 Docker 的关系是什么。下篇文章将更具实践性，将以 PHP 为例带领大家实践 Docker + Wasm。最近，Docker 宣...阅读全文
态。这时，虽然 Java 能够对外提供服务，但服务质量较差，如果该阶段的用户并发较高，那么就会造成服务质量降级乃至服务崩溃。 为了优化这一过程，通常的工业实践会在 Java 启动后引入 " 预热 "(warmup) 步骤，通过人为导入数据来让应用提前加热。在预热完成之前，用户请求通过网络控制不让它发送到 Java 进程，在预热完成之后才打开流量限制让 Java 真正提供服务。这个做法可以部分缓解上述问题，但是该方案在很多场景下会有一些局限性，在很多情况下，获取一份高质量的预热数据是很困难的。而预热数据的正确性直接影响预热效果，与实际情况相符的数据可以提高编译质量，如果不一致，有时反而会造成反面效果，比如一种常见的情况是预热时漏掉重要方法调用。更糟糕的情况是由于和实际情况不一致，导致 JVM...阅读全文
，controller.quorum.voters 配置中提供的节点ID必须与提供给服务器的节点ID匹配。比如在Controller1上，node.Id必须设置为1，以此类推。注意，控制器id不强制要求你从0或1开始。然而，分配节点ID的最简单和最不容易混淆的方法是给每个服务器一个数字ID，然后从0开始。（二）下载并解压安装包bigdata01下载kafka的安装包，并进行解压：[hadoop@bigdata01 kraft]$ cd /opt/soft/[hadoop@bigdata01 soft]$ wget http://archive.apache.org/dist/kafka/3.1.0/kafka_2.12-3.1.0.tgz[hadoop@bigdata01 soft]$ tar -zxf kafka_2.12-3.1.0...阅读全文
务器都是一个代理(Broker). 消费者可以订阅一个或多个话题，并从Broker拉数据，从而消费这些已发布的消息。 5.Partition(分区)：Topic物理上的分组，一个topic可以分为多个partition，每个partition是一个有序的队列。partition中的每条消息都会被分配一个有序的id（offset） Message：消息，是通信的基本单位，每个producer可以向一个topic（主题）发布一些消息。 复制代码 1.1.5. 消息 消息由一个固定大小的报头和可变长度但不透明的字节阵列负载。报头包含格式版本和CRC32效验和以检测损坏或截断 1.1.6. 消息格式 1. 4 byte CRC32 of the message 2. 1 byte "magic...阅读全文
context链可能是这样的：当前cancelCtx的父节点context并不是一个可取消的context，也就没法记录children。timerCtxtimerCtx是一种基于cancelCtx的context类型，从字面上就能看出，这是一种可以定时取消的context。type timerCtx struct { cancelCtx timer *time.Timer // Under cancelCtx.mu. deadline time.Time } func (c *timerCtx) Deadline() (deadline time.Time, ok bool) { return c.deadline, true } func (c *timerCtx) cancel...阅读全文
header 主要有 Call-Definition 以及 Custom-Metadata。Call-Definition 里面包括 Method（其实就是用的 HTTP/2 的 POST），Content-Type 等。而 Custom-Metadata 则是应用层自定义的任意 key-value，key 不建议使用 grpc- 开头，因为这是为 gRPC 后续自己保留的。 Length-Prefixed-Message 主要在 DATA frame 里面派发，它有一个 Compressed flag 用来表示该 message 是否压缩，如果为 1，表示该 message 采用了压缩，而压缩算啊定义在 header 里面的 Message-Encoding 里面。然后后面跟着四字节的...阅读全文
的灵感有一部分也来自于 Linux。 事实上 Debian 的子任务思路就是继承了 Linux 的理念。有些人负责写文件系统，有些人负责写驱动程式。就算你不过是路人甲，你要是给 Linux 编写一套新的文件系统然后发给 Linus，说不定就你写的东西就真的被采用了。 所以我希望 Debian 的用户也能够毫无顾忌地给我们提意见，比如「嘿你知道吗，我觉得在 Debian 的系统里加这个软件包会超赞的。」我觉得这是件大好事，因为只要跟着我们发布的系统模型走，用户是完全有可能开发出自己的软件包的。而且如果你遵循我们的指南和标准，那你的软件包在我们的系统上运行应该不成问题。 Deb-Ian 这个名字的来源想必已是众所周知的了；Murdock 在 1999 年告诉我， 我妻子叫 Deb，我叫 Ian...阅读全文
本文翻译自 Wasm Labs @ VMware OCTO 的 blog： WebAssembly: Docker without container。这是 Wasm Labs 在 2022 年 12 月 15 日在冬季 Docker Community All Hands 7 的关于 Docker+WebAssembly 的演讲的文字版。作者：Asen Alexandrov，Wasm Labs 工程师。文中的我们均指作者或 Wasm Labs。本篇文章将更具实践性，将以 PHP 为例带领大家实践 Docker + Wasm。上篇文章我们了解了服务端 Wasm 为什么有着重要的作用、什么是 WasmEdge 以及如何让解释型语言编写的程序在 Wasm 里运行，这篇文章，我们将通过动手示例了...阅读全文
、为Linux做些许贡献，也就知足了。 2，有什么话或者寄语要送给我们 LinuxStory 的读者吗？ 答：想说对一些新手或对自己学习没信心的年轻人说：非计算机专业、30多岁才接触Linux的我都行，你有大把的时间和精力，为什么不行？ 别人都说兴趣不能作为职业，成为职业后你会丢了兴趣。通过对您的了解，小编觉得您是一位真正把Linux当作兴趣、爱好的Linuxer！是一名内心狂热而外显高冷Linux爱好者！正如清风博主这个名字，您对Linux的喜爱如清风一样纯粹！您把对她的关注和钻研悄悄融入了您的生活，您对Linux的态度让小编佩服不已！非常感谢清风老师给小编这样一次机会来了解您，祝您工作顺利，家庭幸福！ 原文出自这里： https://linuxstory.org/qingfeng...阅读全文
checkout -b branch_name tag_name //将tag拷贝到新分支上修改 建议：在每次发版后当标签，方便后面线上有问题能及时修改 6.储藏（stash） 当修改了代码后发现自己改错分支了。或者，不想将修改的东西提交上去，则可以储藏起来，到合适时候恢复 git stash //会把所有未提交的修改（包括暂存的和非暂存的）都保存起来，用于后续恢复当前工作目录，当前的工作目录就干净了。 git stash pop //重新应用缓存的stash,将缓存堆栈中的第一个stash删除，慎用 git stash apply //将缓存堆栈中的stash多次应用到工作目录中，但并不删除stash拷贝 git stash list //查看现有stash git stash drop+名字...阅读全文
本文翻译自 Jack Roper 的文章 Kubernetes Best Practice。译者：文章中作者从应用程序开发、治理和集群配置三个方面给出了一些 Kubernetes 的最佳实践，同时翻译过程中也加入了我过往的一些使用经验。有误的地方，也欢迎大家指正。在这篇文章中，我将介绍一些使用 Kubernetes (K8s) 时的最佳实践。作为最流行的容器编排系统，K8s 是现代云工程师掌握的事实标准。众所周知，不管使用还是维护 K8s 复杂的系统，因此很好地掌握它应该做什么和不应该做什么，并知道什么是可能的，将是一个好的开局。这些建议包含 3 大类中的常见问题，即应用程序开发、治理和集群配置。最佳实践目录使用命名空间使用就绪和存活探针（译者注：还有启动探针）使用自动缩放使用资源请求和约...阅读全文
、Kubernetes 方面有着丰富且极具深度的实践，我们将这些宝贵生产实践归纳、转化成产品能力，以帮助用户更有效、更快捷地定位生产环境问题。使用这个排查全景图可以通过以下方法：大体结构上是以服务和 Deployment（应用）为入口，大多数开发只需要关注这一层就行了。重点关注服务和应用是否错慢，服务是否连通，副本数是否符合预期等再往下一层是提供真正工作负载能力的 Pod。Pod 重点关注是否有错慢请求，是否健康，资源是否充裕，下游依赖是否健康等最底下一层是节点，节点为 Pod 和服务提供运行环境和资源。重点关注节点是否健康，是否处于可调度状态，资源是否充裕等。常见问题排查一、网络问题网络是 Kubernetes 中最棘手、最常见的问题，因为以下几个原因给我们定位生产环境网络问题带来麻烦：Kubernetes...阅读全文
期工作的创始人身上看到了这样一个问题：当人们习惯了舒适的生活、稳定的工作和无论做什么都会取得成功的名气时，就很难将这些置于身后了（人们总是将他们的生活方式与下一年的工资相匹配）。即使他们真的离开了，也非常有可能再回来。与长期利益相比，短期诱惑和便利往往更具吸引力，也更符合人的天性。 但当你摆脱了这些枯燥无味的工作，你可以跟随直觉，将时间花在那些有趣的事情上。而想做到这一点，尽可能长时间地过着朴素灵动的生活是一个很好的方法。当然，任何选择的背后都有相应的代价。 6 保持专注 专注可以让我们在工作中取得事半功倍的效果。 磨刀不误砍柴工，在我认识的人中，那些花时间想明白了未来方向的人最后都得到了不错的结果。由此可见，做正确的事比长时间做事更重要。很多人都将自己的时间花在了无关紧要的事情上面。 一旦...阅读全文
据《欧盟一般个人数据保护条例》（GDPR）第4条第1款的规定，“个人数据”指与已经识别（identified）或可被识别（identifiable）的自然人（“数据主体”）相关的任何信息。 其中，“可被识别的自然人”，指通过姓名、识别号码、位置数据、在线身份识别码等标识符，或通过针对该自然人的身体、生理、遗传、心理、经济、文化或社会身份等特定相关的一个或多个要素，能够直接或间接地被识别出的个人[1]。 判断自然人是否可被识别，应考虑数据控制者或另外一人可能合理使用到的所有方式（all the means reasonably likely to be used）。判断何种方式为“可能合理使用到”，应考虑所有客观因素：例如当前现有的技术、技术的发展、识别所需的成本和时间等[2]。 由于实践中交...阅读全文
动化软件领域的领导者、应用程序自动化领域的创新者，也是 DevOps 运动的创始人之一。Chef 与全球 1000 多家最具创新力的公司合作，以实现他们数字化转型的愿景，并提供可快速交付软件的实践和平台。 Ansible Ansible 是一种开源的软件预备、配置管理和应用程序部署工具。它可以在许多类 Unix 系统上运行，既可以配置类 Unix 系统也可以配置微软 Windows。它自带声明式语言来描述系统配置。 Puppet Puppet 提供的能力可以定义系统所需的软件和配置，然后在初始设置后保持指定状态。 用户使用与 Ruby 类似的声明式领域特定语言（DSL）来定义指定环境或基础架构的配置参数。Puppet 使用称为 Facter 的一个实用程序获取系统信息，该程序跟随...阅读全文
基于fredx181原创的 DebLive Bookworm obdog 桌面的英语自生系统，配以四个不同的中文输入法平台，我一共创造出以下24个含中文输入法平台的自生系统光碟（大多少于500mb）： A. 8 个含中文输入法的英语自生系统光碟: (下载地址: https://sourceforge.net/projects/icakechineselanguagepets/files/DebLive_bookworm/Live_CD_eng/) 64 位元: 小企鹅 （fcitx） 输入法平台(含23个中文输入法): DLBw64_obdog_fcitx_eng_20220201.iso 智能汇流排（ibus） 输入法平台(含23个中文输入法...阅读全文
本教程介绍如何在一个 U 盘上安装多个 Linux 发行版。这样，你可以在单个 U 盘上享受多个现场版live Linux 发行版了。 我喜欢通过 U 盘尝试不同的 Linux 发行版。它让我可以在真实的硬件上测试操作系统，而不是虚拟化的环境中。此外，我可以将 USB 插入任何系统(比如 Windows 系统)，做任何我想要的事情，以及享受相同的 Linux 体验。而且，如果我的系统出现问题，我可以使用 U 盘恢复! 创建单个可启动的现场版 Linux USB 很简单，你只需下载一个 ISO 文件并将其刻录到 U 盘。但是，如果你想尝试多个 Linux 发行版呢?你可以使用多个 U 盘，也可以覆盖同一个 U 盘以尝试其他 Linux 发行版。但这两种方法都不是很方便。 那么，有没有在单个...阅读全文
Kubernetes 中， pod 从创建到成功运行会分别处于不同的阶段，每个阶段又分为不同的状态，本文将简单介绍这个环节。 在 K8S 源码中，使用了 PodPhase 这个变量定义这几个阶段信息，如下图所示： 运行中（PodRunning）：该 Pod 已经绑定到了一个节点上，Pod 中所有的容器都已被创建。至少有一个容器正在运行，或者正处于启动或重启状态。等待中（PodPending）: 创建 Pod 的请求已被 Kubernetes 系统接受，但有一个或者多个容器镜像尚未创建。可能的原因有，写数据到etcd，调度，pull镜像，启动容器这四个阶段中的任何一个阶段，pending 伴随的事件通常会有：ADDED, Modified这两个事件的产生。等待时间包括调度 Pod 的时间和下...阅读全文
贡献开源代码，开放 Linux 系统安装，微软正在向这两个曾经抵触的“敌人”敞开怀抱。继 SUSE 和 Ubuntu 之后，Windows 10 的应用商店刚刚又加入了两个新的 Linux 发行版 —— Debian GNU/Linux Stretch 和 Kali Linux。 事实上，Kali 团队在 2 月 21 日就曾宣布了这个消息，并发布了一个安装演示视频。只不过当时该发行版并未得到 Windows Subsystem for Linux (WSL) 的官方支持。在和 WSL 团队的通力合作下，现在用户在 Windows 10 应用商店上简单点击 “获取” 就能进行安装。 Kali Linux 是基于 Debian 的发行版，旨在实现高级渗透测试和安全审计，适用于各种信息安全任务...阅读全文
Google Partners Podcast主持人Alex Langshur主持了一个播客节目，主题是关于谷歌HR如何寻找和培养优秀经理人。嘉宾是来自谷歌人力发展部门的Sarah Calderon，她在节目中介绍了谷歌是如何选择、培训和培养他们的经理人的。 Langshur引用了他的前上司的话，“一个优秀的经理人让一份艰难的工作变得具有挑战性和价值…而一个糟糕的经理人在一个好的岗位上表现平平，把一份艰难的工作搞得支离破碎”，以此强调选择正确经理人是多么重要。在访谈过程中，Sarah介绍了拥有7万名员工和数千名经理人的谷歌公司是如何选择、管理和培养经理人的。 Sarah概括了谷歌在培养经理人方面的五个要点： 表现优秀的员工不一定就是好的经理人，管理岗位所需要的技能是不一样的。只是在某个领域...阅读全文
今天，我来为大家解读一幅来自 TurnOff.us 的漫画 “InSide The Linux Kernel” 。TurnOff.us 是一个极客漫画网站，作者 Daniel Stori 画了一些非常有趣的关于编程语言、Web、云计算、Linux 相关的漫画。今天解读的便是其中的一篇。 在开始，我们先来看看这幅漫画的全貌！ Inside the Linux Kernel 这幅漫画是以一个房子的侧方刨面图来绘画的。使用这样的一个房子来代表 Linux 内核。 地基 作为一个房子，最重要的莫过于其地基，在这个图片里，我们也从最下面的地基开始看起： Filesystem 地基（底层）由一排排的文件柜组成，井然有序，文件柜里放置着“文件”——电脑中的文件。左上角，有一只胸前挂着 421 号牌的小企...阅读全文
Debian 开发者最近一直在讨论一个不太正统的想法 —— 在他们的年度 DebConf 开发者大会上，嘉宾在发表演讲后不允许向其提问，或要求他们回答。据说，这种禁止问答的想法来自 Python 开发者大会的政策，他们的会议也禁止在演讲后向嘉宾提问/回答，目的是帮助新人。 Debian 开发者大都拒绝了在 DebConf 大会上发表演讲后不允许进行 Q&A 的想法，因为开发者/贡献者的年度聚会是关于协作和为这个领先的 Linux 发行版培养新的想法。禁止 Q&A 这个想法是由 Debian 项目负责人 Chris Lamb 提出的，他在看到 PyCascades Python 大会上演讲完明确禁止进行问答环节后，发起了对这个想法的讨论。 这个在太平洋西北地区举办的年度 Python 大会决...阅读全文
然避免不了，为了更加从容的应对这些故障，就搞了一个工具 Chaos Monkey 会随机停止生产环境中的虚拟机，通过观察系统在真实故障中的表现来确保程序的健壮性，也通过实战来验证各种高可用技术是否靠谱。接着冒出了 Chaos Gorilla，会停止一整个可用域中的所有机器；最后还有Chaos Kong，直接停掉一整个 Region，非常有挑战精神（丧心病狂）。 为了更好的观察系统在故障时的情况，还研发了全局可视化系统，代号 Flux，可以将整个系统的逻辑架构和各服务之间的流量可视化在大屏幕上，效果图如下： 他们每个月有一个活动：将一个 Region 里的机器全部关掉，看 Netflix 服务是否正常。有兴趣看视频的可以移步这里。 另外，Netflix 除了云服务，还有自建CDN，即 Open...阅读全文
DPDK 全称为 Data Plane Development Kit ，是近年来在高速网络通信行业中炙手可热的一种网络报文处理加速框架。DPDK 从十年前诞生直至发展到今天已经可以支持业界主流的高端网卡以及各类加速硬件设备，同时也支持主流的各个CPU 体系结构（可以运行于 X86, Arm, Power 等平台）。同时也可以运行于 Linux/FreeBsd/Windows 等主流操作系统之上。DPDK因为其优异的性能指标被广泛的应用于网关/负载均衡/SDN/虚拟交换的各个场景。 本文主要介绍 DPDK 中的 libgraph 设计思想以及实现，libgraph 的设计思想源自于开源项目 Vector Packet Processor(VPP)。VPP 中的向量包处理优化方案是...阅读全文
什么是装饰器？ 装饰器（Decorator）相对简单，咱们先介绍它：“装饰器的功能是将被装饰的函数当作参数传递给与装饰器对应的函数（名称相同的函数），并返回包装后的被装饰的函数”，听起来有点绕，没关系，直接看示意图,其中 a 为与装饰器 @a 对应的函数， b 为装饰器修饰的函数，装饰器@a的作用是： 简而言之：@a 就是将 b 传递给 a()，并返回新的 b = a(b) 栗子： 上面使用@dobi来表示装饰器，其等同于：qinfeng = dobi(qinfeng)因此装饰器本质上就是个语法糖，其作用为简化代码，以提高代码可读性，运行上段代码的结果为： 解析过程是这样子的： 1.python 解释器发现@dobi，就去调用与其对应的函数（ dobi 函数） 2.dobi 函数调用前要指...阅读全文
我们将介绍，如何在三个树莓派上，创建出一套 Kubernetes 集群并正常使用。在这种场景下，主节点的内存和 CPU 资源较有限，执行 Kubernetes 任务时性能会有折扣，想做升级也不容易。 在开始之前，我们先介绍 K3s 这个项目。K3s 被誉为是最轻量级的 Kubernetes 发行版，它针对低配的 x86 和 ARM 处理器优化，可以让 Kubernetes 在树莓派上运行得更好。 基于 Raspbian 的 kubernetes 集群 本文我们将介绍如何使用 K3s 在树莓派上创建 Kubernetes 集群。系统我们用的是树莓派最流行的 Raspbian。 准备工作 在开始创建 Kubernetes 集群之前，我们需要准备， 至少一个树莓派，包括 SD 卡和电源网线，普通...阅读全文
如果 RabbitMQ 集群只有一个 broker 节点，那么该节点的失效将导致整个服务临时性的不可用，并且可能会导致 message 的丢失（尤其是在非持久化 message 存储于非持久化 queue 中的时候）。可以将所有 message 都设置为持久化，并且使用持久化的 queue，但是这样仍然无法避免由于缓存导致的问题：因为 message 在发送之后和被写入磁盘并执行 fsync 之间存在一个虽然短暂但是会产生问题的时间窗。通过 publisher 的 confirm 机制能够确保客户端知道哪些 message 已经存入磁盘，尽管如此，一般不希望遇到因单点故障导致服务不可用。 如果 RabbitMQ 集群是由多个 broker 节点构成的，那么从服务的整体可用性上来讲，该集群对...阅读全文
Vultr 最近不断发力，活动是一个接一个，今天VPS大学就收到了Vultr推出的最新活动，新用户免费送50美元，有效期半年，VPS可选14机房，日本节点，支持Windows。可以PayPal付款！ Vultr.com这家的VPS非常灵活，VPS你可以开了关、关了删、想开就开、想删就删,大商家，不容易跑路，全部VPS都是SSD硬盘，等等，优势还是比较多的。 优惠码：DOMORE，仅限新用户，半年内有效，用不完自动过期，老用户不适用这一枚优惠码。 本次新用户获取50刀Vultr官方注册网站：www.vultr.com 2017年5月7日，官方补货，可以买了纽约和迈阿密机房的月付2.5美元的VPS。 网络测试： 法兰克福（德国） http://fra-de-ping.vultr.com...阅读全文
-consumer-groups.sh --bootstrap-server localhost:9092 --list 查看kafka消息队列特定组的消费积压情况（主要看CURRENT-OFFSET、LOG-END-OFFSET的值，判断Kafka堆积情况）kafka-consumer-groups.sh --bootstrap-server localhost:9092 --describe --group g1 查看指定topic上每个partition的offsetkafka-run-class.sh kafka.tools.GetOffsetShell --broker-list localhost:9092 --topic infras_cn 例子： ``` # 创建一...阅读全文
在今年 10 月份，深圳支流科技把微服务网关 APISIX 贡献给 Apache 基金会后，过了仅仅一个多月的时间，Apache APISIX 发布了一个新的版本 0.9。 Apache APISIX 的 0.9 版本，是经过 APISIX 开发者社区和 Apache 孵化器社区投票发布的官方版本，企业和个人用户都免费使用。 Apache APISIX 进入 Apache 孵化器的这一个多月的时间里，代码贡献者从 27 人增加到 45 人，几乎每个工作日都有新的贡献者加入；新合并的 PR 有 82 个，平均每个工作日有 3 个 PR 合并；使用的公司包含了贝壳找房、腾讯云、网易、NASA等知名企业和科研机构， Apache APISIX 是微服务 API 网关，不仅可以帮你处理传统的南北向...阅读全文
Linus Torvalds近日发布了Linux内核5.8，近一个半月后，他撰文回顾了这一版本，并宣布这个版本是一个 "真正的大更新"，以至于让人想起4.9版本。"我一直到最后一刻才考虑做一个rc8，但考虑到周围没有任何大的迫在眉睫的担忧时，不希望再等一周。"Torvalds解释道。 在这个新版本的内核带来了更新后的驱动程序，添加支持一系列的Adreno GPU芯片，如405，640，和650版本，新的Spectre补丁，以及exFAT完善。 Radeon驱动在这个版本中也得到了改进的支持，Power 10芯片也是如此，其推出目前预计将在明年某个时候进行。 但正如Torvalds在6月时所说，Linux内核5.8是一个大规模升级的版本，而且有数不清的小改进。"在5.8合并窗口中，我们已经修...阅读全文
AWS的预留实例（Reserved Instance）是一种计费方式，并不是一种计算实例，简单讲是一个“包年包月”的优惠方式。购买RI后，可以获得30%以上，至最高 75% 的优惠。你可能会说：“这些我都知道，并且RI我已经在用了。” 你真的熟悉 RI 吗？ 我们知道预留实例（RI）分为两种: 标准RI与可转换RI（CRI），可转换RI的价格往往较高而不容易被接受，而我们又经常遇到需要调整RI，那么我们购买的标准RI能不能进行适当的转换呢？答案是没问题的，AWS为满足客户的需求，提供了很灵活性的设定。 今天主要介绍一下RI的三个灵活属性：大小灵活性匹配，合并拆分，可转换(CRI)，我们暂且这么称呼，三者适用于不同的场景，是互相补充的关系。 大小灵活性匹配 场景：区域范围RI 、相同实例类型...阅读全文
Ruby on Rails 是一个快速开发的Web框架，Web设计人员和开发人员利用它能实现动态的全功能Web应用程序。 本文使用 Phusion Passenger 或mod_rails 方法部署 Rails 应用程序。 Passenger 允许您直接在Apachen应用程序中嵌入 Rails 应用程序，而无需使用FastCGI或复杂的Web服务器代理。 安装Passenger和依赖关系 1.安装使用Ruby，构建Ruby模块和运行Rails应用程序所需的系统包 sudo apt-get install build-essential libapache2-mod-passenger apache2 ruby ruby-dev libruby zlib1g-dev libsqlite3...阅读全文
Cincoze 刚刚推出了面向嵌入式应用的全新紧凑型迷你工作站，除了采用至强 E 系列处理器，还支持自定义 I/O 扩展。从外形来看，Diamond Extreme 系列的 DX-1100 周身被硕大的散热片包围，但较小的体型，很适合空间受限的环境。处理器方面，客户可选英特尔八代酷睿、或至强 E-2100 系列 CPU 。 值得一提的是，DX-1100 工作站为办公室和工业环境提供了极其强大的连接选项，可定制 I/O 的功能相当受客户欢迎。 Cincoze DX-1100 采用了全金属机身，能够为容量 3.2L 的内部空间带来不错的被动式散热性能（TDP 80W 封顶）。 此外，主板上提供了 2 根 DDR4 SO-DIMM 内存插槽、2 个前端可访问的 2.5 英寸热插拔 SATA 托架...阅读全文
本站放出了Linode各个机房的测试结果，但是可能很多国内用户对Linode还是不是很熟悉，这里打算写一篇文章给想要入手Linode VPS的朋友提供一个参考，其实过程很简单，唯一麻烦的是，需要有一张VISA或者MASTERCARD的信用卡，因为Linode默认不支持PayPal付款，只支持信用卡付款。 Linode官网：www.linode.com 首先，我们通过上面哪个链接打开Linode官网，打开后页面如下： 页面上有三个输入框，分别是输入邮箱，用户名和密码，我们按照要求输入之后，来到一个提示页面： 这里提示我们已经往我们邮箱发送了一封邮件，我们打开邮箱，能看到有一封邮件，如图： 用填写注册信息的浏览器打开邮件里面的验证链接，来到这个界面： 这是说欢迎我们，内容可以不用管，点击其中的...阅读全文
引言：众所周知，Nginx 服务器是一个高性能的 Web 和反向代理服务器。Nginx 在激烈的 Web 服务器竞争中依旧保持良好的发展势头，一度成为 Web 服务器市场的后期之秀，这一切跟 Nginx 的架构设计是分不开的。 一. Nginx 模块化设计 高度模块化的设计是 Nginx 的架构基础。Nginx 服务器被分解为多个模块，每个模块就是一个功能模块，只负责自身的功能，模块之间严格遵循“高内聚，低耦合”的原则。 核心模块 核心模块是 Nginx 服务器正常运行必不可少的模块，提供错误日志记录、配置文件解析、事件驱动机制、进程管理等核心功能。 标准 HTTP 模块 标准 HTTP 模块提供 HTTP 协议解析相关的功能，如：端口配置、网页编码设置、HTTP 响应头设置等。 可选...阅读全文
Google 发布了一个名为 container-diff 的开源项目，这是一个分析和比较容器镜像的工具，可用来分析 Docker 镜像之间的差异。 container-diff 可通过几个不同的标准来检查镜像，包括： Docker 镜像历史 镜像文件系统 Apt 包管理器 pip 包管理器 npm 包管理器 上述分析可以在单个镜像上执行，也可以在两个镜像上执行以进行比较。 该工具可以帮助用户更好地了解他们的镜像内部发生了什么变化，并让他们更好地了解镜像包含什么内容。 单个分析： container-diff analyze [Run default analyzers] container-diff analyze
--type=history [History...阅读全文
在 Debian Stretch 中，系统自带的 PHP 版本已经默认为 PHP 7.0。我们如何在 Debian 9 中，把 PHP 的版本降为 Php 5 呢？本文提供了一种多个 PHP 版本共存的方案，我们以安装配置 PHP-5.6 为例，并且支持在多个 PHP 的版本中切换。 首选，我们需要配置一个新的安装源，以便安装 php 5.6 的包，这里我们选择 deb.sury.org ， 打开终端，运行以下命令， apt-get install apt-transport-https lsb-release ca-certificates 然后下载安装对应的GPG key 文件，使用命令， wget -O /etc/apt/trusted.gpg.d/php.gpg https...阅读全文
本文大部分内容翻译总结自《Software Engineering at Google》 第10章节 Documentation。 另外，该书电子版近日已经可以免费下载了 https://abseil.io/resources/swe_at_google.2.pdf，有兴趣的同学可以下载翻阅下。 首先声明，本问所说的文档不仅限于纯文本文档，还包含代码注释(注释也是一种特殊形式的文档)。 ## 文档的重要性 ## 高质量的文档对于一个组织或团队来说有非常多的益处，比如让代码和API更容易理解、错误更少；让团队成员更专注于目标；也可以让一些手工操作更容易；另外如果有新成员加入的话有文档也会让他们更快融入…… 写文档有比较严重的收益滞后性，不像测试，你跑一个测试case，它能立即告诉你是对还是错...阅读全文
