虽然AWS平台早已早已为使用者带来了十分详细和高品质的工具箱，但在具体运用中含的软件还没有尤其方便快捷或是能满足客户的必须，因而，紧紧围绕全部AWS平台，客户及其许多专业开发设计AWS专用工具的企业发布了很多和AWS规范专用工具互为补充的第三方开发环境。这种专用工具集中化在系统软件布署管理方法自动化技术，系统架构图自动生成可视化工具，及其服务器资源监管专用工具等AWS技术栈的最底层服务项目。 系统软件布署管理方法自动化技术专用工具. 中国开发者利好消息！AWS（亚马逊云计算）中国区新用户注册即可免费使用12个月云服务产品啦！每注册一个新用户均可享受新的12个月免费云服务器数据库等产品！快来加入我们吧！ 免费12个月链接： https://aws.amazon.com/cn...阅读全文
虽然AWS平台早已早已为使用者带来了十分详细和高品质的工具箱，但在具体运用中含的软件还没有尤其方便快捷或是能满足客户的必须，因而，紧紧围绕全部AWS平台，客户及其许多专业开发设计AWS专用工具的企业发布了很多和AWS规范专用工具互为补充的第三方开发环境。这种专用工具集中化在系统软件布署管理方法自动化技术，系统架构图自动生成可视化工具，及其服务器资源监管专用工具等AWS技术栈的最底层服务项目。 系统软件布署管理方法自动化技术专用工具. 中国开发者利好消息！AWS（亚马逊云计算）中国区新用户注册即可免费使用12个月云服务产品啦！每注册一个新用户均可享受新的12个月免费云服务器数据库等产品！快来加入我们吧！ 免费12个月链接： https://aws.amazon.com/cn/free...阅读全文
互联网工程指导委员会(IETF)释出了传输层安全性协议的最新版本 TLS 1.3。TLS 被广泛用于创建安全连接，TLS 1.3 是基于 TLS 1.2，主要区别是移除了较少使用的弱加密算法，移除 MD5 和 SHA-224 哈希支持，请求数字签名，集成 HKDF，移除许多不安全或过时特性的支持，不再支持静态 RSA 密钥交换，握手将默认使用前向安全 Diffie-Hellman，客户端只需要一次往返就能与服务器建立安全和验证的连接，等等。Firefox 和 Chrome 都已经支持 TLS 1.3 的草拟版本。 TLS 1.3是一种新的加密协议，它既能提高各地互联网用户的访问速度，又能增强安全性。我们把使互联网实现安全通信的基础性技术称为传输层安全协议（TLS）。TLS是安全套接层协议...阅读全文
。 在 2019 年，将会发生从 CI 管道到 DevOps 装配线的转变。DevOps 装配线专注于自动化和连接多个团队执行的活动，例如开发人员的 CI，运维人员的基础架构配置和配置管理，测试人员的测试自动化，SecOps 的安全补丁，发布负责人的语义版本控制和部署到多种环境，等等。 下图展示了单个应用程序或服务的典型装配线： 自动化将成为主要焦点 关于 DevOps，我们谈论了很多自动化方面的内容。如果可能的话，零接触（zero-touch）自动化就是未来的发展方向。这并不是说你一定要自动化一切，只是说如果有必要，你就应该能够做到。了解 DevOps 周期的六个“C”，并确保在这些阶段之间应用自动化，这才是关键，这将是 2019 年的主要目标。 测试人员要学习编码 DevOps 对知道如何编...阅读全文
winehq-stable wine启动初配置 可参考Debian wiki的wine，这是使用wine前的第一步，在终端中输入 winecfg 依次按提示安装mono,gecko，要等待部分安装时间，然后再出现Configuration界面，点OK wine字体配置 wine界面字体显式是调用Linux操作系统的字体，若之前复制了windows的字体到/usr/share/fonts中的话，这部分一般就没有问题。没有的话可以复制一部分过去，或者研究下怎么使用其他字体和替代方案。 但这不够，还要配置wine内模拟的windows字体，这部分字体在/home/your_username/.wine/drive_c/windows/Fonts/（其中your_username换成你的实际用户名），把...阅读全文
CentOS 的构建和分发做出贡献。CERN 帮助 CentOS 提供基础架构，他们还组织了 CentOS DoJo 活动（LCTT 译者注：CentOS Dojo 是为期一日的活动，汇聚来自 CentOS 社群的人分享系统管理、最佳实践及新兴科技。），工程师可以汇聚在此共同改进 CentOS 的封装。除了 OpenStack 和 CentOS 之外，CERN 还是其他开源项目的深度用户，包括用于配置管理的 Puppet、用于监控的 Grafana 和 InfluxDB，等等。“我们与全球约 170 个实验室合作。因此，每当我们发现一个开源项目的改进之处，其他实验室便可以很容易地采纳使用。”Bell 说，“与此同时，我们也向其他项目学习。当像 eBay 和 Rackspace 这样大规模的装机量提高了...阅读全文
/Native 也将迎来 IDE 的支持。官方表示首先将在 C/C++ IDE CLion 中试用该功能，目前正在发布一个名为 Kotlin/Native plugin for CLion 的插件，该插件支持使用 CMake 作为构建系统。其中包含来自 IntelliJ IDEA 的 Kotlin 插件中全部代码编辑功能集，同时初步支持项目创建、测试与调试等操作。 使用 React 和 Kotlin 创建现代 Web 应用 对于使用 Kotlin 进行 Web 前端开发的开发者，Andrey Breslav 在大会上还公布了另外一个重大消息 —— 正式发布了针对 React.js 的官方 Kotlin 封装工具。此外，还有一个名为 create-react-kotlin-app 的工具集 —— 通过...阅读全文
作者：京东零售 石朝阳 在说IO多路复用模型之前，我们先来大致了解下Linux文件系统。在Linux系统中，不论是你的鼠标，键盘，还是打印机，甚至于连接到本机的socket client端，都是以文件描述符的形式存在于系统中，诸如此类，等等等等，所以可以这么说，一切皆文件。来看一下系统定义的文件描述符说明： 从上面的列表可以看到，文件描述符0,1,2都已经被系统占用了，当系统启动的时候，这三个描述符就存在了。其中0代表标准输入，1代表标准输出，2代表错误输出。当我们创建新的文件描述符的时候，就会在2的基础上进行递增。可以这么说，文件描述符是为了管理被打开的文件而创建的系统索引，他代表了文件的身份ID。对标windows的话，你可以认为和句柄类似，这样就更容易理解一些。 由于网上对linux...阅读全文
于单点失效是有弹性的，但是同时也需要注意：尽管 exchange 和 binding 能够在单点失效问题上幸免于难，但是 queue 和其上持有的 message 却不行，这是因为 queue 及其内容仅仅存储于单个节点之上，所以一个节点的失效表现为其对应的 queue 不可用。 举例说明，如果一个 RMQ 集群由三个节点组成（RMQ集群节点的模式也是有讲究的，一般三个节点会有一个 RAM，两个 DISK），exchange、bindings 等元数据会在三个节点之间同步，但 queue 上的消息是不会同步的，且不特殊设置的情况下，Queue 只会在一个节点存在。 可能有的同学会提另一个问题，我从三个 RMQ 节点的监控面板，都可以看到这个 Queue？这个是对的，这是由于 Queue 的元...阅读全文
的最细粒度的身份验证和授权。虽然服务网格可以提供帮助，但 Kubernetes 安全性仍然是一个复杂而微妙的话题，需要从多个层次进行了解。零信任是一种位于现代安全实践前沿的强大的安全模型。这也是一个容易引起轰动和炒作的术语，因此很难消除噪音。那么，究竟什么是零信任，对于 Kubernetes，它究竟意味着什么？在本文中，我们将从工程的角度探讨什么是零信任，并构建一个基本框架来理解它对 Kubernetes 运维和安全团队等的影响。介绍如果你正在构建现代云软件，无论是采用 Kubernetes 还是其他软件，可能都听说过“零信任”一词。零信任的安全模式变得如此重要，以至于美国联邦政府已经注意到：白宫最近发布了一份联邦零信任战略的备忘录，要求所有美国联邦机构在年底前满足特定的零信任安全标准...阅读全文
1. Kafka介绍 1.1.1. Kafka是什么 kafka使用scala开发，支持多语言客户端（c++、java、python、go等） Kafka最先由LinkedIn公司开发，之后成为Apache的顶级项目。 Kafka是一个分布式的、分区化、可复制提交的日志服务 LinkedIn使用Kafka实现了公司不同应用程序之间的松耦和，那么作为一个可扩展、高可靠的消息系统 支持高Throughput的应用 scale out：无需停机即可扩展机器 持久化：通过将数据持久化到硬盘以及replication防止数据丢失 支持online和offline的场景 复制代码 1.1.2. Kafka的特点 Kafka是分布式的，其所有的构件borker(服务端集群)、producer(消息生产...阅读全文
Monit是一个跨平台的用来监控Unix/linux系统（比如Linux、BSD、OSX、Solaris）的工具。Monit特别易于安装，而且非常轻量级（只有500KB大小），并且不依赖任何第三方程序、插件或者库。 Monit可以监控服务器进程状态、HTTP/TCP状态码、服务器资源变化、文件系统变动等等，根据这些变化，可以设定邮件报警、重启进程或服务。易于安装、轻量级的实现以及强大的功能，让Monit成为一个理想的后备监控工具。 官网：https://mmonit.com/monit文档：https://mmonit.com/monit/documentation/monit.html最新版本：https://mmonit.com/monit/dist/monit-5.20.0...阅读全文
分配器在固定大小的内存池中可实现即时内存分配，这能够显著减少创建一个会话的时长； 6，树型存储：侧重于使用作者多年前开发的弹性二叉树，实现了以O(log(N))的低开销来保持计时器命令、保持运行队列命令及管理轮询及最少连接队列； 7，优化的HTTP首部分析：优化的首部分析功能避免了在HTTP首部分析过程中重读任何内存区域； 8，精心地降低了昂贵的系统调用，大部分工作都在用户空间完成，如时间读取、缓冲聚合及文件描述符的启用和禁用等； 所有的这些细微之处的优化实现了在中等规模负载之上依然有着相当低的CPU负载，甚至于在非常高的负载场景中，5%的用户空间占用率和95%的系统空间占用率也是非常普遍的现象，这意味着HAProxy进程消耗比系统空间消耗低20倍以上。因此，对OS进行性能调优是非常重要的...阅读全文
本文从 Redis 的基本特性入手，通过讲述Redis的数据结构和主要命令，对 Redis 的基本功能进行直观介绍。之后概览Redis提供的高级能力，并在部署、维护、性能调优等多个方面进行进一步的介绍。本文适合使用Redis的普通开发人员，以及对Redis进行选型、架构设计和性能调优的架构设计人员。 目录 概述 Redis的数据结构和相关常用命令 数据持久化 内存管理与数据淘汰机制 Pipelining 事务与Scripting Redis性能调优 主从复制与集群分片 Redis Java客户端的选择 概述 Redis是一个开源的，基于内存的结构化数据存储媒介，可以作为数据库、缓存服务或消息服务使用。 Redis支持多种数据结构，包括字符串、哈希表、链表、集合、有序集合、位图...阅读全文
导语 | kafka3.0的版本已经试推行去zk的kafka架构了，如果去掉了zk，那么在kafka新的版本当中使用什么技术来代替了zk的位置呢，接下来我们一起来一探究竟，了解kafka的内置共识机制和raft算法。一、Kafka简介Kafka是一款开源的消息引擎系统。一个典型的Kafka体系架构包括若干Producer、若干Broker、若干Consumer，以及一个ZooKeeper集群，如上图所示。其中ZooKeeper是Kafka用来负责集群元数据的管理、控制器的选举等操作的。Producer将消息发送到Broker，Broker负责将收到的消息存储到磁盘中，而Consumer负责从Broker订阅并消费消息。（一）Kafka核心组件producer：消息生产者，就是向broker...阅读全文
件公司Tableau卖给了Salesforce公司。AWS业务有点像自助餐，给开发者和终端用户提供了几百种在线服务自由选择，另外每年还不断推陈出新。从财务角度看，这一业务还是个“黑箱”。亚马逊没有披露云计算业务的具体营收来源，也没有给出各个子版块的利润率情况。AWS诞生初期，就是作为一个基础计算服务的外包供应商，包括计算资源和数据存储等。可以判断，该业务大部分收入和利润仍然来自这些业务。科技业人士克里·奎因（Corey Quinn）曾经在私营的Duckbill集团担任首席云经济学家，帮助客户公司降低他们在亚马逊云计算的开支。奎因预测，AWS一半以上的收入来自于EC2计算服务。这一服务相当于让企业用户在亚马逊数据中心租赁到了实体服务器虚拟的“一部分”。奎因表示，计算服务再加上“弹性块存储...阅读全文
-apiserver 的角度来看，它已经验证了我们的身份并且赋予了相应的权限允许我们继续，但对于 Kubernetes 而言，其他组件对于应不应该允许发生的事情还是很有意见的。所以这个请求还需要通过 Admission Controller 所控制的一个 准入控制链 的层层考验，官方标准的 “关卡” 有近十个之多，而且还能自定义扩展！ 虽然授权的重点是回答用户是否有权限，但准入控制器会拦截请求以确保它符合集群的更广泛的期望和规则。它们是资源对象保存到 etcd 之前的最后一个堡垒，封装了一系列额外的检查以确保操作不会产生意外或负面结果。不同于授权和认证只关心请求的用户和操作，准入控制还处理请求的内容，并且仅对创建、更新、删除或连接（如代理）等有效，而对读操作无效。 Note 准入控制器的工作方式与授权者和验证...阅读全文
脚本开头使用了#!/bin/sh而不是#!/bin/dash，从而自掘坟墓，损人害己。由此可见Ubuntu本身就不是一个严肃的产品，不适合作为操作系统使用。 只有让用户经常遇到麻烦，为Ubuntu提供服务的公司才能最大限度地赚钱。要多赚钱，不但要让每个用户多使用服务，还要扩大用户群。这就要从Windows世界不择手段地拉拢用户。 Ubuntu为了讨好Windows用户不惜东施效颦。作出了一些破坏*nix惯例的修改，例如学习Windows的Program Files目录，将不同软件装到各自的目录而不是分散在统一目录结构中，导致类似tkConfig失效等Ubuntu特有问题。 综上所述，Ubuntu完全就是一个用砸钱的办法耧取商业利益同时祸害自由软件社区的发行版。一般人无论是从自身利益还是从社会...阅读全文
程序和通用App，支持Win 10的所有配置（Windows 10，Windows 10 IoT Core，Windows Mobile）。 另外还提供了对QNX 7和iMX.7的支持。(本段是官方声明的逐字翻译。作为跨平台神器，每个版本支持的系统与平台均不一样，有兴趣的请去看官方日志。我目前只使用linux Qt，关于windows平台版本的问题不要再问我啦。) 还有完全支持C ++ 11， 支持Wayland多进程， 提升了Qt Lite， 提升了Qt串行总线模块用于设备总线通信（CAN＆ModBus）的通信功能，全面支持Gamepad，增加了新模块Qt remote object,还有Web，Network，定位等内容的一些更新。 总结就是眼花缭乱的新特性确实很有亮点，但并不是每个项目...阅读全文
做得很突出是不够的，不是每个人都适合做管理。要找到好的经理人，需要观察他们是如何与其他员工共事的，看看他们是否具备足够的灵活性并是否能够拥抱变化。要想知道一个人是否适合管理岗位，可以先分配一些小任务给他们，比如让他带实习生或者让他管理一个小项目。经过一段时间的观察后，看看他是否胜任。 培训经理人需要几个月的时间。Calderon建议这个时间不要太长，以免养成不好的习惯，只要等到他们开始理解管理者角色的时候就可以了。在谷歌，这个时间一般是三个月。Calderon说，不要在他们还没开始工作或刚开始工作时就培训他们，而是要让他们先工作几个月，让他们对工作有所了解，并经历一些挑战。到了培训阶段，不要只是纸上谈兵，而是真正赋予他们管理者的角色。 不要一开始就让他们承担太多的工作。一个新经理人刚开始工作...阅读全文
识别码。 Windows用户同样可以使用微代码来完成更新，但是这些针对Windows的微代码补丁得等到微软首先完成测试之后才会正式发布。 在Linux中使用新版本的微代码数据文件 对于Linux用户来说，可以轻松地使用新版本的微代码数据来更新Linux发行版，因为这些微代码文件一般都是以系统更新的形式推送给用户的。为了安装新版本的微代码补丁，最好的方法就是使用Linux发行版自带的Package管理器来完成安装。 对于Debian和Ubuntu发行版的用户来说，可以使用apt命令来安装Intel的微代码数据包。除了更新补丁之外，Package管理器还会安装例如iucode-toll之类的其他依赖组件。Redhat以及CentOS用户还可以使用yum并搜索microcode_ctl来完成更新...阅读全文
Tesla P100上商用了HBM 2技术，不过消费级市场上使用HBM 2技术还是AMD去年的RX Vega显卡，但是因为HBM 2显存的成本太过昂贵，RX Vega上实际上使用了两组4GB HBM 2，等效位宽比第一代减少一半，尽管频率大幅提升，所以实际带宽反而低了一些。 见识过HBM的玩家对该技术肯定印象深刻，那么未来它又该如何发展呢？HPE（惠普企业级）公司的Nicolas Dube日前分享了他的一些观点，在他看来DDR内存要走到尽头了（DDR is Over），特别是一些需求高带宽的场合中。 根据他分享的一些数据，HBM 2内存将在2018年大量应用，HBM 3将在2020年左右应用，改进版的HBM 3+技术在2022年应用，2024年则会有HBM 4内存，带宽及容量也会逐级增长，比如现在的...阅读全文
/ { grpc_pass grpc://localhost:50051; } } 示例里在nginx层给gRPC服务添加了ssl证书，而内部代理到gRPC服务器仍然是使用明文的交互方式，也就是在Nginx层，做到了SSL offloading。 gRPC客户端也是需要TLS加密。如果是使用自签名证书等未经信任的证书，客户端都需要禁用证书检查。在部署到生产环境时，需要将自签名证书换成由可信任证书机构发布的证书，客户端也需要配置成信任该证书。 代理加密的gRPC 如果Nginx内部代理的gRPC也需要以加密的方式交互，这种情况就需要把明文代理协议grpc://替换为grpcs://。这首先要gRPC服务器是以加密的方式发布服务的。Nginx层修改如下： grpc_pass grpcs://localhost...阅读全文
依赖项的版本。 根据 Fluin 的说法，它可以执行代码修改和转换，使代码符合最新的最佳实践。 “我们想回到平衡稳定性和创新的核心理念上，因此，要在这些工具的工作方式和更新代码方面突破界限。”Fluin 说。 该团队还添加了 ng add 命令 ，可以执行诸如将应用程序转变为 Progressive Web App 或将 NativeScript 添加到现有项目等功能。 版本 6 的另一个预期功能是用于 Angular Material 和 Component Dev Kit 的树组件。 除了 6.0 版之外，该团队正在重写视图引擎并增加对 Bazel 的支持。...阅读全文
-document/ Yearning 由于Inception是一个基础工具，如果要做SQL审核，系统级的业务操作（提DDL&DML，审核，执行等）还需要一个人机交互的界面，Yearning 就是这么一个 Python 实现的 web 系统。 Yearning的文档地址：https://cookiey.github.io/Yearning-document/ Inception安装 参考资料：http://mysql-inception.github.io/inception-document/install/ Inception的编译，使用源码编译时，首先需要对bison包进行降级（yum收录的是3.0.4，源码编译2.5） bison 2.5的源码编译 代码获取：http://ftp.gnu.org...阅读全文
根据这两个名字在美国英语的发音而读作 /'dɛbiːjən/。 作为一个大的系统组织框架，Debian 旗下有多种不同操作系统核心的分支计划，主要为采用 Linux 内核的 Debian GNU/Linux 系统，其他还有采用 GNU Hurd 内核的 Debian GNU/Hurd 系统、采用 FreeBSD 核心的 Debian GNU/kFreeBSD 系统等。现在大家说 Debian 的时候，默认就是 Debian GNU/Linux。 25 年前，当 Ian Murdock 在 comp.os.linux.development 邮件列表中宣布 “即将完成全新的 Linux 发行版， [...] Debian Linux 发行版”时，没有人会想到"Debian Linux...阅读全文
投票，也就是弹劾机制，可将任期内的当权者赶下台；它严格限定了在委员会里，只允许少于 50% 的成员是企业（5 人委员会里最多有 2 个）；并且关注到核心开发者的选举/淘汰、如何更新治理提案等问题。 而且，PEP 8016 中也提出了新的 PEP 流程，目前的 PEP 流程是提案人确定 PEP 的选题方向，提案人负责收集与整合来自整个社区的反馈。然后，相关领域的专家们汇总全部讨论，并开启为期 14 天的审查，之后进行社区投票。如果一个 PEP 很有争议，任何专家成员都可发起动议来拒绝通过它，这需要超过 2/3 的票数。PEP 8016 的 PEP 流程：理事会在必要时可直接地批准/否决 PEP，但最好是设置流程来避免这样做决策，例如，将决策权委派给团队或者 BDFL 代表。 7 种治理方案一览...阅读全文
目最佳用户，贡献者和合作伙伴颁发社区成就奖。 12月，Harbor 首次登陆 KubeCon 北美大会，项目成员发表了数场演讲，吸引了世界各地的粉丝前来交流。目前，Harbor 项目组每月定期举行社区电话例会，讨论发展路线图，并与国内外的企业及个人建立了广泛的合作关系，社区生态发展得如火如荼。 年近岁末， 经过 Harbor 社区三个多月的不懈努力，Harbor v1.7版本正式发布！新版本带来诸多新功能： · 镜像构建历史 - 用户可查看容器镜像的构建历史和内容； · 镜像复制（retagging）- 提供了在镜像上传至Harbor后重新创建镜像tag的能力。此功能在CI流水线中提升镜像到生产状态或者通过编程方式重新tag镜像，亦或将特定镜像重新tag或者移动到其它仓库或者项目等场景中特别...阅读全文
性类型限定 class A { public string $name; public Foo $foo; } 不得不说，PHP越来越接近Java等强类型语言 Improved type variance 协变返回类型： class ParentType {} class ChildType extends ParentType {} class A { public function covariantReturnTypes(): ParentType { /* … */ } } class B extends A { public function covariantReturnTypes(): ChildType { /* … */ } } 依赖（是不是很熟悉）： class...阅读全文
在Debian及其衍生的系统中，我们需要经常使用的软件包管理命令，对系统进行管理，以便系统达到预期的状态。Debian系统中，常用的软件包命令有 apt、apt-get、dpkg、apt-cache等，这里我们着重列举常见的一些用法。 软件包查询（不需要sudo权限） $ apt-cache search pkg_keyword #列出匹配关键字的软件包 $ apt search pkg_keyword #列出匹配关键字的软件包，包括了版本信息 $ apt list pkgname #查找该软件包，会显示版本信息 $ apt-cache show pkgname #查询软件包详细信息 $ apt show pkgname #查询软件包详细信息 $ apt-cache depends...阅读全文
。 明确处理错误 健壮的程序其实是由处理故障案例的片段组成的，并且需要在故障出现之前处理好。冗余的if err != nil { return err }比出了故障再一个个去处理更有价值。panic 和 recover 也一样。 尽早 return，不要深陷 每次缩进时都会在程序员的堆栈中添加另一个先决条件，这会占用他们短期内存中的 7±2 个片段。避免需要深层缩进的控制流。与其深入嵌套，不如使用守卫子句将成功路径保持在左侧。 并发权留给调用者 让调用者选择是否要异步运行你的库或函数，不要强制他们使用异步。 在启动 goroutine 之前，要知道它什么时候会停止 goroutines 拥有资源、锁、变量与内存等，释放这些资源的可靠方法是停止 goroutine。 避免包级别的状态 要完成明确和...阅读全文
编辑——编译——刷新——测试（edit-compile-flash-test）周期。 这些测试都是自动完成的，用户无需离开自己的代码编辑器。此外，还可以使用 pw_target_runner 模块在多个设备上并行运行测试，从而节省更多时间。 团队开发代码需要强调一致性，然而，设置 lint、配置代码格式以及添加自动的提交前检查等通常会使这项工作无限期延迟。这时，Pigweed 的 pw_presubmit 模块可派上用场。它会基于用户可能已经使用的工具提供现成的 Lint 集成套件，并预先配置好，可以立即供微控制器开发人员使用。 至于该项目为什么取名为 “Pigweed”，谷歌给出了解释：“Pigweed，又称 amaranth ，是一种营养丰富的谷物和绿叶沙拉菜，也是一种快速生长的杂草...阅读全文
的大目标是制定800Gbase-R规范（base-R表示当前媒体上的当前标准系列，base-T和base-C表示前几代）。 与以前的以太网迭代一样，许多技术将被重用和开发。800Bbase-R规范（或800gbe）需要对媒体访问控制（MAC）和物理编码子层（pc）进行新的定义。这些将从 IEEE 802.3bs 标准中 400GbE 的现有规范中重新定义，重新定义为在8条 106gbps 信道上工作。为了兼容性，规范中的其他部分（如前向错误控制）保持不变。 RobStone等技术工作组主席说：“这项工作的目的是尽可能重新利用标准的400GbE逻辑，以创建一个800GbE的MAC和PC规范，从而为实施多速率以太网端口的用户提供最低的开销成本。”...阅读全文
#2342TiFlash添加上报 DeltaTree 引擎读写负载相关 metrics 信息支持 fromUnixTime 和 dateFormat 函数下推默认禁用粗粒度索引过滤器TiDB Ansible新增 TiFlash 监控 #1253 #1257优化 TiFlash 配置参数 #1262 #1265 #1271优化 TiDB 启动脚本 #1268 Bug 修复 TiDB修复 merge join 在某些场景下 panic 的问题 #15920修复在计算选择率时重复考虑某些表达式的问题 #16052修复极端情况下 load 统计信息可能出现的 panic 的问题 #15710修复 SQL query 中存在等价表达式在某些情况下无法识别导致报错的问题 #16015修复从一个数据库中查询另一个数据库的...阅读全文
包 Packages: Cargo提供的让我们创建, 测试和分享Crates的工具.箱 Crates: 提供类库或可执行文件的模块树模块 Modules and use: 管理和组织路径, 及其作用域和访问权限路径 Paths: 如结构体(structs), 函数(function), 或模块(module)等事物的命名方式包(Packages)和箱(Crates)包(Package)通过Cargo创建. 每一个包(Package)都有一个Cargo.toml文件. 包(Package)包含箱(Crates)的规则如下:只能包含0或1个类库箱(library crates)可以包含任意多个二进制箱(binary crates)至少有一个箱(Crate), 可以是类库箱(library...阅读全文
关。 18. 针对单点故障——实施冗余。 19. 为了容错性和持久性——实施数据复制。 20. 对于用户到用户的快速通信 — 使用 Websockets。 21. 分布式系统中的故障检测——实现心跳。 22. 数据完整性——使用校验和算法。 23. 高效的服务器扩展——一致性哈希。 24. 去中心化数据传输——考虑 Gossip 协议。 25. 基于位置的功能 — 使用四叉树、Geohash 等。 26. 避免特定的技术名称 — 使用通用术语。 27. 高可用性和一致性的权衡——最终一致性。 28. 对于IP解析和域名查询——DNS。 29. 处理网络请求中的大数据——实施分页。 30. 缓存删除策略 — 首选...阅读全文
》（LFS）是杰勒德·比克曼斯等人编写的久负盛名的安装Linux的教科书，描述了从源代码编译Linux系统的方法。这本书可以从在Linux From Scratch网站上免费下载到，下载链接如文末。书中详细地描述了如何从零开始构建一个完整的 Linux 系统，不过 LFS 包含的套件较少，一般来说 BLFS 提供的套件更多，其几个相关的子项目有如下这些： Beyond Linux From Scratch（BLFS） 标准LFS仅仅安装了足够让系统启动的基本软件，以及使新系统能够编译新软件包的开发工具。BLFS包括了更多的软件包，且都有相应指导。 Crosss Linux From Scratch（CLFS） 为需要进行交叉编译（即在一个平台上编译另一个平台的代码）的用户提供指导，正式版本为1.0...阅读全文
混沌实验场景，以及方便地将已有的混沌实验场景复用到其他应用混沌实验中，大大降低了混沌实验的成本。目前混沌实验场景提供的功能有：编排串行混沌实验编排并行混沌实验支持状态检查步骤支持中途暂停混沌实验支持使用 YAML 文件定义和管理混沌实验场景支持通过 Web UI 定义和管理混沌实验场景具体的实验场景配置，参考具体创建 Chaos Mesh Workflow。可视化操作Chaos Mesh 为用户提供了单独的 Chaos Dashboard 组件，即可视化支持。Chaos Dashboard 极大地简化了混沌实验，用户可以直接通过可视化界面来管理和监控混沌实验，仅需点一点鼠标就能够定义混沌实验的范围、指定混沌注入的类型、定义调度规则，以及在界面上获取到混沌实验的结果等。安全保障Chaos...阅读全文
语化的标识符或添加二进制整型字面量”等轻微改变，因为“这些改变很容易实现”。 Cox谈到了重大变化，例如“对错误处理的额外支持，或引入不可变或只读值类型，添加某种形式的泛型或其他尚未被建议的重要主题。” 从Google的角度来看，Go 2的主要目标是“解决Go在可扩展性方面的重要不足”。Cox提到了生产期的扩展性（云环境中运行并发应用）和开发期的扩展性（大量的开发人员在一个较大的代码库上并行协作）。 大部分主题是介绍和解释用于修改Go的五个步骤： 有关此过程的更多详细信息，我们建议您阅读博客文章Toward Go 2。有兴趣为Go 2推荐新功能的用户请参考GitHub上的关于该语言的Wiki。 查看英文原文：Google Discusses Go 2 感谢张卫滨对本文的审校。...阅读全文
Linux Kernel 5.11 为期两周的窗口合并期即将于今天结束。Linux 5.11 合并了很多新特性和令人激动的改进，正式版将会在明年 2 月和大家见面。Linux 5.11 作为非 LTS 长期支持版本，是 2021 年首个主要的稳定内核版本。 Linux Kernel 5.11 新版本的工作量比较繁重，主要涉及了大量英特尔和 AMD 的更改，改进 Syscall User Dispatch 以便于让 Wine 运行更新的 Windows 游戏，持续 IO_uring 改进，优化 Btrfs 文件系统，并会整合联想贡献的 ThinkPad 掌托传感器检测等。 在英特尔方面，经过多年的努力 Linux 5.11 中将合并 SGX Enclaves，英特尔的图形驱动也支持整数缩放支...阅读全文
（USB-C、3A）、GPIO 接头支持 5V DC @ 3A、或以太网供电（需单独的 PoE HAT）。工作温度：0 - 50 ℃摄氏度。 据悉，树莓派 4 主板及桌面套件已于今日开售，感兴趣的朋友可访问与之合作的 element14、OKdo 等授权零售商，或前往英国剑桥 Grand Arcade 购物中心的实体店。 1GB 版本的售价为 35 美元 / 33 英镑，2GB 版本为 45 美元 / 43 英镑，4GB 版本为 55 美元 / 53 英镑 —— 约合 288 / 376 / 464 RMB 。...阅读全文
档: monotonic time 位处理操作 新增加了math/bits包， 提供了很多位运算的函数。 Test Helper函数 新加｀(T).Helper和(B).Helper m｀， 用来标记调用的函数是一个测试辅助函数，当输出文件名和行数的时候，这个函数回呗忽略。 标准库的微小改动 标准库也有一些小的功能的加入和提升， 比如image、net、runtime、sync等。 并行编译 支持并行地编译函数，并且在Go 1.9中势默认设置。如果不想并行编译，设置GO19CONCURRENTCOMPILATION为0。 ./... 会忽略vendor下的包 这一条很有用，以后你在Makefile中可以直接使用./...,而不是曲折地将vendor文件夹排除。 如果你想使用vendor下的包...阅读全文
Scrapy 是一个为了爬取网站数据，提取结构性数据而编写的应用框架。 可以应用在包括数据挖掘、信息处理或存储历史数据等一系列的程序中。本文着重介绍 Scrapy 架构及其组件之间的交互。 Scrapy 组件介绍 Scrapy Engine 引擎负责控制数据流在系统中所有组件中流动，并在相应动作发生时触发事件。 详细内容查看下面的数据流(Data Flow)部分。 调度器(Scheduler) 调度器从引擎接受request并将他们入队，以便之后引擎请求他们时提供给引擎。 下载器(Downloader) 下载器负责获取页面数据并提供给引擎，而后提供给spider。 Spiders Spider 是 Scrapy用户编写用于分析response并提取item(即获取到的item)或额外跟进的...阅读全文
/ buster main ui # Uncomment line below then 'apt-get update' to enable 'apt-get source' #deb-src http://archive.raspberrypi.org/debian/ stretch main ui jessie、wheezy 版本的系统按照之前修改软件源的的规则修改即可，这里不再赘述。 Ctrl+o 保存，之后回车确认，然后 Ctrl+x 退出。 更新 配置好了可以尝试更新，用下面的命令分别更新软件源列表、软件版本和系统内核版本，完整的更新过程需要等挺久的。一般只用更新软件源列表即可。 #更新软件源列表 sudo apt-get update #更新软件版本 sudo apt-get upgrade...阅读全文
KVM。KVM 访客崩溃报告中添加其它信息，这使得在使用 KVM 虚拟化时更容易诊断和修复问题。 文件系统与存储 增强 Device Mapper MultipathingSCSI Multiqueue 驱动使块层可以通过 SSD 和多核系统很好地扩展性能 Stratis，一种管理本地存储的简单解决方案XFS 支持共享写时复制（COW）数据扩展区功能，因此两个或多个文件可以共享一组公共数据块。 此外还有关于网络、身份认证管理与安全等方面的内容，详情查看发布说明： https://blogs.oracle.com/linux/announcing-the-release-of-oracle-linux-8...阅读全文
个包含最新版本的开发版本，且仅支持TLS1.2。这种非主流操作真的很少见——目前只有Mozilla的“Modern”配置设置才推荐使用TLS 1.2。 保持OpenSSL库的长期Debian开发人员Kurt Roeckx写道：“我希望Buster发布对TLS 1.2的支持将足够高，不需要再次启用[TLS 1.0和1.1]。 ” Buster是Debian 10的代号，它是Linux发行版的下一个主要版本。没有宣布发布日期，但距离上一个版本的发布已经超过一年了。 对于只想使用旧版本的人，Roeckx并不留情，他说：“强烈建议你添加对TLS1.2的支持，或让对方添加支持。” 或许等到Buster发布的那天，仅支持TLS1.2不再是骚操作或大胆的配置。但熟悉SSL / TLS和Web PKI的人士...阅读全文
http://packages.dotdeb.org wheezy all 完成之后更新源： apt-get update 接下来就可以开始安装nginx、mysql、php了。 2.MySQL 使用apt工具安装： apt-get install -y mysql-server mysql-client 安装过程中会询问root密码，输入你想设定的密码就可以。安装完成后执行如下配置命令： mysql_secure_installation 按提示往下走就行，过程中会询问是否更改root密码、是否移除匿名用户、是否禁止root远程登录等，自己按需配置即可。 注：我在使用mysql的过程中发现远程客户端无法连接到数据库，后来发现问题是“/etc/mysql/my.cnf”文件中“bind...阅读全文
Docker 镜像，Alpine 只有仅仅 5 MB 大小，并且拥有很友好的包管理机制。 Docker 官方推荐使用 Alpine 替代 Ubuntu 做为容器的基础镜像。这样会带来众多好处，镜像下载速度更快，镜像安全性提升，主机之间的切换更方便，占用更少磁盘空间等。 下表是官方容器镜像的大小对比： REPOSITORY TAG IMAGE ID VIRTUAL SIZE alpine latest 4e38e38c8ce0 4.799 MB debian latest 4d6ce913b130 84.98 MB ubuntu latest b39b81afc8ca 188.3 MB centos latest 8efe422e6104 210 MB 获取并使用官方镜像 由于镜像很小，下载时间往往很短...阅读全文
心的 Debian GNU/kFreeBSD 系统等。现在大家说 Debian 的时候，默认就是 Debian GNU/Linux。 Debian GNU/Linux 被全球数百万计算机用户使用，并在十多种架构上得到支持，在生活中的方方面面为我们提供服务。从你附近机场的内部运作到你的汽车娱乐系统，从托管你喜欢的网站的云服务器到与它们通信的物联网设备，Debian 都是他们背后的支持。 今天，Debian 项目是一个庞大而蓬勃发展的组织，拥有由志愿者组成的无数自组织团队。虽然它通常看起来很混乱，但该项目由两个主要的组织文件维持：Debian 社会契约(Debian Social Contract)，用以提供改善社会的愿景，以及 Debian 自由软件指南(Debian Free...阅读全文
依靠 Checkpoint 机制，进行二阶段提交，从而保证数据的 Exactly-once 一致性。 具体可以这样说：在 Checkpoint 过程中，每个算子只会进行准备提交的操作。比如数据会提交到外部的临时存储目录下，所有任务都完成这次 Checkpoint 后会收到一个信号，之后才会执行正式的 commit，把所有分布式的临时文件一次性以事务的方式提交到外部系统。 这种算法在当前有限流的情况下，作业结束后并不能保证有 Checkpoint，那么最后一部分数据如何提交？ 在 1.14 中，这个问题得到了解决。Task 处理完所有数据之后，必须等待 Checkpoint 完成后才可以正式的退出，这是流批一体方面针对有限流任务结束的一些改进。 三、checkpoint 机制 1. 现有...阅读全文
