据库等。 配置需要治理 权限控制，由于配置能改变程序的行为，不正确的配置甚至能引起灾难，所以对配置的修改必须有比较完善的权限控制，不同环境、集群配置管理，同一份程序在不同的环境（开发，测试，生产）、不同的集群（如不同的数据中心）经常需要有不同的配置，所以需要有完善的环境、集群配置管理。 Apollo 配置中心基本使用 Apollo 基础模型 用户在配置中心对配置进行修改并发布；配置中心通知 Apollo 客户端有配置更新；Apollo 客户端从配置中心拉取最新的配置、更新本地配置并通知到应用。 界面概览 上图是 Apollo 配置中心中一个项目的配置首页，在页面左上方的环境列表模块展示了所有的环境和集群，用户可以随时切换。页面中央展示了两个 namespace（application 和...阅读全文
apache2-utils.md5sums apg.md5sums apparmor.md5sums app-install-data.md5sums app-install-data-partner.md5sums ... 记住：使用-g选项与--generate=missing一样，你可以试着为apache2软件包生成md5和，只要运行下面这个命令： $ sudo debsums --generate=missing apache2 由于我系统上的apache2软件包已经有md5和，它会显示下列输出，这与运行$ sudo debsums apache2的结果一样。 想了解更多有意思的选项和使用方面的信息，请参阅debsums参考手册页。 $ man debsums 在本文中，我们介绍了如何对照MD5...阅读全文
应用相结合，但也有人认为微软是在以怀柔政策弱化开源社区并将借此引导Linux走向毁灭。 4. 慕尼黑市计划放弃Linux 2004年，德国慕尼黑市开始大规模利用LiMux这款定制化Linux发行版取代Windows，同时利用OpenOffice.org及后来的LibreOffice替换微软Office。然而令人惊讶的是，尽管该市曾于2013年宣布Linux与开源技术转移已经取得成功，但慕尼黑如今正试图重新回归微软怀抱。不过值得庆幸的是，LiMux未来将与Windows并存且继续得到更新。 5. 俄罗斯大力推广 Linux 与慕尼黑市相反，俄罗斯正积极拥抱Linux与开源项目。俄罗斯议会国家杜马起草了一份法案，要求在政府采购活动中优先考虑开源软件。这一决定在很大程度上是为了提升安全水平。俄罗斯...阅读全文
-interactive" 在重新加载 SSH 服务器之前，最好检查一下在配置中没有出现任何错误，执行以下命令测试： sshd -t 如果没有标识出任何错误，用新的配置重载 SSH： systemctl reload sshd.service 现在一切都应该开始工作了。现在，当你登录到你的服务器时，你将需要使用 SSH 密钥，并且当你被提示输入： Verification code: 打开 Authenticator APP 并输入为您的服务器显示的 6 位代码。...阅读全文
谷歌开源了一套代码评审（Code Review）规范，它是谷歌一套通用的工程实战指南，几乎涵盖了所有编程语言与各种类型的项目，这个规范代表了谷歌长期发展以来最佳实战经验的集合，谷歌表示希望开源项目或其他组织能够从这套规范中受益。 代码评审，也称代码复查，如果一个团队正在使用任务分支工作流，那么在所有代码编写完成并通过自动化测试之后，在代码合并之前，就会启动代码评审。通常的目的是查找系统缺陷，保证软件总体质量和提高开发者自身水平，代码评审的所有工具和过程都是为了这个目的而构建的。代码评审对于敏捷团队来说的作用如下： 代码评审共享知识通过代码评审可以更好的进行工作评估代码评审能让你享受休假通过代码评审指导新工程师 既然代码评审要进行众多的检查，那么找一个优秀的评审者就非常重要了。一般对于变更列...阅读全文
etcd 进行通信，所有尝试访问或更改 Kubernetes 系统状态的请求都会通过 kube-apiserver 进行，kubectl 也不例外。kubectl 使用生成器（generators）来构造 HTTP 请求。生成器是一个用来处理序列化的抽象概念。 通过 kubectl run 不仅可以运行 deployment，还可以通过指定参数 --generator 来部署其他多种资源类型。如果没有指定 --generator 参数的值，kubectl 将会自动判断资源的类型。 例如，带有参数 --restart-policy=Always 的资源将被部署为 Deployment，而带有参数 --restart-policy=Never 的资源将被部署为 Pod。同时 kubectl 也会检查是...阅读全文
昨天，Apache Kafka 3.0 版本正式发布，这是一个涉及多方面的大版本。在这个版本中，Apache Kafka 3.0 引入了各种新功能、突破性的 API 更改以及对 KRaft 的改进：Apache Kafka 的内置共识机制将取代 Apache ZooKeeper™。虽然 KRaft 尚未被推荐用于生产（已知差距列表），但我们对 KRaft 元数据和 API 进行了许多改进。Exactly-once 和分区重新分配支持值得强调，我们鼓励开发者查看 KRaft 的新功能并在开发环境中试用它。并且，从 Apache Kafka 3.0 开始，生产者默认启用最强的交付保证 ( acks=all, enable.idempotence=true)，这意味着用户现在默认获得排序和持久性...阅读全文
RTE_GRAPH_BURST_SIZE 大小（node->size）的 object 队列，它定义了该 node 中可以容纳和处理的报文数量。如果一个 node 试图将报文排队到下一个 node，但下一个 node 已经有报文在排队并且已满（例如在 l3fwd 中，用户可以有多个接收队列/ node 排队到同一个下一个 node pkt_cls），node 的 object 队列大小将会被动态的加倍。这意味着 node 具有批处理的优势，因为它可以累积报文。 注意：当前 API 不支持 node 的 object 队列大小在增大后再缩小 Objs 的传递 — 'home run'/normal enqueue 报文转换有两种类型，一种是正常的 enqueue，另一种是优化情况，“home run”。 Normal...阅读全文
/data/iot_cloud/_series/07/0005 62.732 778.06 ... #省略 ... /data/influxdb/data/iot_cloud/_series/01/0002 16.352 7014.15 /data/influxdb/data/iot_cloud/_series/00/0002 16.36 7030.51可以看出程序运行时，会加载iot_cloud库文件:tsm数据文件(主要为当前shard的文件，共约18G)series文件(所有series文件，共约7G)加载的内存大小与SHR内存基本吻合。基于当前的分片策略retention policy周期为7天，每天一分片，所以可以从分片角度减少shard占用的内存。笔者尝试调整分片策略:#当前...阅读全文
导语 | kafka3.0的版本已经试推行去zk的kafka架构了，如果去掉了zk，那么在kafka新的版本当中使用什么技术来代替了zk的位置呢，接下来我们一起来一探究竟，了解kafka的内置共识机制和raft算法。一、Kafka简介Kafka是一款开源的消息引擎系统。一个典型的Kafka体系架构包括若干Producer、若干Broker、若干Consumer，以及一个ZooKeeper集群，如上图所示。其中ZooKeeper是Kafka用来负责集群元数据的管理、控制器的选举等操作的。Producer将消息发送到Broker，Broker负责将收到的消息存储到磁盘中，而Consumer负责从Broker订阅并消费消息。（一）Kafka核心组件producer：消息生产者，就是向broker...阅读全文
大指令数为 100 万。与此同时，针对性能担忧，eBPF 探针控制在大约在 1%左右。其高性能主要体现在内核中处理数据，减少数据在内核态和用户态之间的拷贝。简单说就是数据在内核里算好了再给用户进程，比如一个 Gauge 值，以往的做法是将原始数据拷贝到用户进程再计算。2、可编程的执行引擎天然适合可观测性可观测性工程通过帮助用户更好的理解系统内部状态来消除知识盲区和及时消除系统性风险。eBPF 在可观测性方面有何威力呢？以应用异常为例，当发现应用有异常后，解决问题过程中发现缺少应用层面可观测性，这时候通过埋点、测试、上线补充了应用可观测性，具体的问题得到了解决，但往往治标不治本，下一次别的地方有问题，又需要走同样的流程，另外多语言、多协议让埋点的成本更高。更好的做法是用无侵入方式去解决，以避免...阅读全文
时候，我们往往不能预想到最终结果全貌。不论怎样，我们就把 CLONE_NEWNS添加到clone_flags变量中，结果就是， int clone_flags = CLONE_NEWNS | SIGCHLD;，再来编译mount.c并运行同样的命令。 > cp skeleton.c mount.c > gcc -o mount mount.c > ./mount mount 这次没有任何变化，为何？因为运行在新的mount namespace中的进程，在底层系统下仍然拥有一个/proc视图。结果就是新的进程继承了底层挂载点的视图。我们有一些方法来阻止出现这样的结果，比如说，使用 pivot_root，将在后续的博客中详细介绍。 然而，有一种方法，我们可以尝试在新的mount...阅读全文
with Docker中尝试新特性 在论坛或者在Slack的Docker社区频道中提问 参加6月28日的 CE 17.06在线聚会 原文链接：ANNOUNCING DOCKER 17.06 COMMUNITY EDITION (CE)（翻译：钟最龙） 指标 日志驱动插件 Service日志 Service中节点本地的网络支持 配置对象 证书轮换的优化 Swarm Mode事件 专用的数据路线 GUI中新增了重置Docker数据而不需要丢失所有的设置 为主机添加一个实验性的DNS 用来认证注册表访问的登录证书 目录...阅读全文
为一个1955年出生的老派人物，是如何与布林和佩奇两个70后走到一起的呢？其实从他在普林斯顿大学和加州大学伯克利分校完成学士到博士的学习后，曾经在贝尔实验室、Sun 等大型公司工作过，而他待过的小公司更是数不胜数，甚至在加入谷歌之前的一个季度，施密特掌管的 Novell 公司亏了足足1.42亿美元，似乎他不怎么像一位能让谷歌起飞的人。 但是在施密特从 Novell 公司离职之后，投资者依然向佩奇和布林推荐了他，并且在面试之后，两位创始人立马敲定了新任 CEO 的人选，并且这 CEO 一当就是十年。这背后的原因没人知道，但是据猜测，施密特多次成功和一次失败的经验打动了对方，而这些经验也确实成为了谷歌崛起的关键点。 在1983年加入 Sun 之后，施密特以一己之力将 Java 打造成了最普及的编...阅读全文
建议。 实现：根据来自社区的反馈意见，提案开始实现。 针对所实现的提案的反馈：在开发周期中，Go 开发团队和社区试用新功能并且收集进一步的反馈意见。 启动决策：在三个月的开发周期结束时，根据在发布周期中收集的经验和反馈意见，Go 开发团队会考虑变更的预期收益或产生的额外成本，从而最终决定是否发布每个变更。一旦发布，这些被发布的提案就成为语言和库的一部分。未被发布的提案可能会重新起草，但也有可能会被永久拒绝。 可以看到，通过两轮的反馈过程，可对提案进行有效的筛选，从而防止“功能蔓延(feature creep)”，有助于保持 Go 语言的简洁。 提案选择标准 一项提案至少要满足以下这些条件： 解决大部分使用者觉得重要的问题 不会对其他使用者造成太大的影响 提供一个清晰且易于理解的解决方案 条件...阅读全文
布与 WasmEdge 合作支持 WebAssembly。本文将解释什么是 WebAssembly（Wasm），为什么它与 Docker 生态相关，并提供一些实践示例供大家尝试。 我们假设你已经熟悉 Docker 工具。 我们将使用我们在 PHP 的 WebAssembly 端口上做的工作来演示如何构建 PHP 解释器，将其打包为 OCI 镜像的一部分，并使用 Docker 运行它。请注意，本文专注动手经验，而不是讨论技术细节。WebAssembly 是什么？为什么选它？本节是对 WebAssembly 的基本介绍。 已经熟悉 Wasm 的小伙伴，可以快速重温一下，明天的文章将介绍更多实践。什么是 WebAssembly?WebAssembly 是一种定义二进制指令格式的开放标准，它支持从不...阅读全文
提问者为Linuxstory.org的华华，回答者即为清风博主老师。之前常逛Linux社区的同学，对这个ID应该很熟悉。 A.您与Linux的那些事 1.清风老师能简单的介绍下您自己吗？ 答：中学地理老师，Linux爱好者，Gentoo用户，70后 来张几年前上课摆拍的工作照吧 2.您是因为什么喜欢上折腾Linux的呢？遇到最大的困难是什么呢？ 答：说来话长。初识Linux是在参加工作近10年之后，之前都没听说过Linux。真正知道Linux，是因为自学了点asp，后来在搜索如何搭建更好的网站环境时，才知道了还有这么一个神奇的系统。2008年，有了笔记本电脑后，才尝试安装，发现这个系统太适合拿来折腾了！从入门级的Ubuntu到Gentoo，桌面环境从gnome2、unity、gnome3...阅读全文
、API 应用相同的上下文中运行程序或脚本。可以上传并运行可执行文件，例如 cmd、bat、exe、psl 等等。WebJobs 提供 SDK 用于简化针对 Web 作业可以执行的常见任务，例如图像处理、队列处理、RSS 聚合、文件维护，以及发送电子邮件等等。 Serverless 架构原则 按需使用计算服务执行代码 Serverless 架构是 SOA 概念的自然延伸。在 Serverless 架构中，所有自定义代码作为孤立的、独立的、细粒度的函数来编写和执行，这些函数在 AWS Lambda 之类的无状态计算服务中运行。开发人员可以编写函数，执行常见的任务。在比较复杂的情况下，开发人员可以构建更复杂的管道，编排多个函数调用。 编写单一用途的无状态函数单单负责处理某一项任务的函数很容易测试，并稳...阅读全文
给了你更多的控制，但这种便利是有成本的。 像 Studio 3T 这样的工具使构建准确的 MongoDB 聚合查询变得更容易。它的聚合编辑器特性使你可以一次对一个阶段应用管道操作符，你可以在每个阶段验证输入和输出，更便于调试。 使用快速写 永远不要把 MongoDB 设为低稳定性的高速写。看上去，“file-and-forget”模式使得写入速度变快了，因为命令在实际写入任何东西前就返回了。如果系统在数据写入磁盘之前崩溃了，就会丢失，存在出现不一致状态的风险。所幸，64 位的 MongoDB 启用了“日志（Journaling）”。 MMAPv1 和 WiredTiger 存储引擎都使用日志预防上述情况，不过，在日志关闭的情况下，WiredTiger 也可以在还原过程中恢复到最后一致的 检查...阅读全文
服务化项目服务不可用几十分钟，造成订单数减少几十万笔，损失百万资金。 原因分析 当时是没有定位到具体的原因的，但是下面的原因也是一部分可能引起宕机的情况。 某服务化项目的业务增速非常快，在高峰期，数据库QPS突破35000，系统处于高负荷状态。 在高峰期如果同时执行几个全表扫描的SQL，会造成数据库压力急剧上升，应用超时增多，前端应用超时，用户重试，流量飙升，形成了雪崩效应。 主要原因在与一些老项目的SQL查询性能较差，并且使用的主库，对数据库影响较大。数据库QPS太高，但是缓存方案因为人手原因一直没有落地，慢SQL的问题处理优先级应该提升。 改进方案 针对每个应用建一个数据库账号，严格按照规范使用 缓存优化方案即时落地，慢SQL问题优先处理，集中处理目前已经发现的慢SQL（查询时间超过1S...阅读全文
Chiplet可以应用，以及Chiplet产品的性价比何时能最先验证。"戴伟民说到。正因如此，即便是有了UCIe这一标准，大家也容易停留在观望阶段，都在等待第一个吃螃蟹的人出现。"芯原正在与有意向使用Chiplet的企业积极沟通，并尝试探索向潜在客户'众筹'Chiplet的方案，有望尽快打破僵局。"戴伟民补充道。续命摩尔定律，万能胶芯片不万能抛开工艺难题，芯片万能胶普及的关键在于，能否延续摩尔定律给芯片公司们更大价值。从产业链角度，一方面，Chiplet作为半导体产业的技术趋势，需要各家芯片公司都在自己的位置上做最擅长的工作，通过分工协作减少Chiplet芯片与市场需求匹配的时间和周期，因此芯片公司之间的连接会更加紧密，另一方面，芯片万能胶似乎正在改写芯片公司或芯片产品的评价体系或维度。"一直以来，最先...阅读全文
available (because the // surrounding function has not yet been extended to accept a Context // parameter). Background和TODO只是用于不同场景下： Background通常被用于主函数、初始化以及测试中，作为一个顶层的context，也就是说一般我们创建的context都是基于Background；而TODO是在不确定使用什么context的时候才会使用。下面将介绍两种不同功能的基础context类型：valueCtx和cancelCtx。valueCtxvalueCtx结构体type valueCtx struct { Context key, val interface...阅读全文
确保它在每一点都得到执行。这听起来像是常识。但与技术中的许多新想法一样，理解零信任的最佳方法是了解它的反应。零信任摒弃了边界安全的观点。在边界安全模型中，在敏感组件周围实施“装甲”。例如，数据中心周围可能有一个防火墙，其任务是阻止问题流量和参与者进入。这种模型，有时被称为城堡策略，具有直观的意义：城堡的墙壁是为了将坏人拒之门外。如果你在城堡里，那么根据定义，你就是一个好人。零信任模型表明，边界安全已经不足。根据零信任原则，即使在安全边界内，仍必须将用户、系统和网络流量视为不受信任。国防部的参考架构很好地总结了这一点：“在安全边界之外或之内运行的任何参与者、系统、网络或服务都是不可信的。相反，我们必须验证任何试图建立访问权限的事物。从边界验证一次到对每个用户、设备、应用程序和交易的持续验证，这...阅读全文
索运行Nginx的端口。 Kubernetes将自动分配一个大于30000的随机端口，同时确保该端口尚未受到其他服务的约束。 要测试一切是否正常，请通过本地计算机上的浏览器访问http:// worker_1_ip : nginx_port或http://worker_2_ip : nginx_port 。 您将看到Nginx熟悉的欢迎页面。 如果要删除Nginx应用程序，请先从主节点删除nginx服务： kubectl delete service nginx 运行以下命令以确保已删除该服务： kubectl get services 您将看到以下输出： OutputNAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE kubernetes...阅读全文
对 Docker 的使用大部分都比较熟悉，但是说到 docker 的实现原理很多人还是一知半解。我把在团队内部做的一次 Docker 核心原理分享总结到文章里，以供参考。 Docker 的优势 Build once, Run anywhere 上面这句话很精辟的总结了 docker 的优点。我从下面几点具体描述 docker 带给开发者的能力 应用标准化 无论什么语言开发的应用，我们都能用 dockerfile 和构建脚本方便的进行应用构建打包，代码库 + 构建 + registry 统一了 CI/CD 流程，也提升了效率。 环境一致 由于应用和依赖全部构建成镜像，做到了一次构建多次交付，无论是开发，测试还是上线环境都是一致的。大大提高了开发效率 应用隔离 由于通过 docker 部署的应...阅读全文
。 Debian的投票方式几乎是独一无二的。Debian 开发者不是简单地提供一个选项列表，而是自己创造所有这些选项，通常会有大量的选项，而且经常会引入许多相关讨论。 这个方案的初衷是希望能创造出尽可能反映整个 project 意愿的结果，因此Debian 的投票方案允许一张选票中包含许多差异不大的选项。 但是，这也是一个再拖沓不过的方案。比如，在2019 年关于一场 systemd 辩论中，当时采用的是一般决议流程。投票一直没能开始，当时的 DPL Sam Hartman 就要求尽快对决议进行投票。 这让一些参与者感到很不满意。有人试图拒绝这个提前投票，但没有成功，于是对七个选项的投票就正常完成了。一些开发者认为这个过程又一次被滥用了，也对整个项目造成了损害。 “这种面临决定时的怯步，是不健康的...阅读全文
-through-cloudflare-gateway 经测试，Cloudflare Spectrum 也可以配置 IPv6 的源站地址，然后 ssh 连接是 IPv4，同样可以中转。 最后如图，点击 “Create” 保存。 图片下方的 +++ — 是网卡配置文件(/etc/network/interfaces)的 diff。 重启来使更改生效。 重启后，可以正常通过 IPv4 的地址来 ssh，不过 curl ip.sb 返回的是 IPv6 的地址。 硬盘在开始创建 VM 前，还需要配置一下存储。 服务器硬盘配置 SSD: /dev/sda 240G HDD: /dev/sdb 3T 默认安装出来是，VM 需要的系统镜像文件存放目录 /var/lib/vz 在 SSD 里面，这样有点浪费，因为镜像不是...阅读全文
this message!