一个根据make的Map-Reduce解决构架和一个轻巧的分布式存储。小编迄今依然仍在应用GXP开展日常的管理方法和规模性数据处理方法实际操作这些，有感兴趣的大家能够到GXP首页查询：qnu/gxp。 SaltStackSaltStackautomationforCloudOps,ITOps&DevOpsatscale SaltStack也是根据Python的一种系统软件布署管理系统软件。和Ansible相近，SaltStack也是根据ssh和服务项目上的SaltStack过程(minions)通讯并根据YAML叙述环境变量。可是有别于Ansible，SaltStack选用的是主从关系式的多级别系统架构，因而必须在服务端事先安裝一个SaltStackminion软件包。 系统架构图自动...阅读全文
Debian 提供的免费的长期支持（LTS）版本将所有 Debian 稳定版本的生命周期延长到至少 5 年。除此以外，还有商业的扩展 LTS 计划，该计划将对有限的软件包的支持延长到了 5 年以上。云映像官方云映像可用于所有的主流云端平台。我们还提供了工具和配置，因此您可以构建自己的自定义云映像。您还可以在桌面或容器里的虚拟机中使用 Debian。转自：https://www.debian.org/intro/why_debian.zh-cn.html...阅读全文
个轻巧的分布式存储。小编迄今依然仍在应用GXP开展日常的管理方法和规模性数据处理方法实际操作这些，有感兴趣的大家能够到GXP首页查询：qnu/gxp。 SaltStackSaltStackautomationforCloudOps,ITOps&DevOpsatscale SaltStack也是根据Python的一种系统软件布署管理系统软件。和Ansible相近，SaltStack也是根据ssh和服务项目上的SaltStack过程(minions)通讯并根据YAML叙述环境变量。可是有别于Ansible，SaltStack选用的是主从关系式的多级别系统架构，因而必须在服务端事先安裝一个SaltStackminion软件包。 系统架构图自动生成可视化工具...阅读全文
互联网工程指导委员会(IETF)释出了传输层安全性协议的最新版本 TLS 1.3。TLS 被广泛用于创建安全连接，TLS 1.3 是基于 TLS 1.2，主要区别是移除了较少使用的弱加密算法，移除 MD5 和 SHA-224 哈希支持，请求数字签名，集成 HKDF，移除许多不安全或过时特性的支持，不再支持静态 RSA 密钥交换，握手将默认使用前向安全 Diffie-Hellman，客户端只需要一次往返就能与服务器建立安全和验证的连接，等等。Firefox 和 Chrome 都已经支持 TLS 1.3 的草拟版本。 TLS 1.3是一种新的加密协议，它既能提高各地互联网用户的访问速度，又能增强安全性。我们把使互联网实现安全通信的基础性技术称为传输层安全协议（TLS）。TLS是安全套接层协议...阅读全文
玲珑，面面俱到 作为一个开发者，你很可能希望为开源项目解决一个特定的痛点。或许你想要运行在一个目前还不支持的系统上，抑或你很希望改革社区目前使用的安全技术。想要引进新技术，特别是比较有争议的技术，最好的办法就是让人无法拒绝它。你需要透彻地了解底层代码，考虑每个极端情况。在不影响已实现功能的前提下增加新功能。不仅仅是完成就行，还要在特性的完善上下功夫。 糜不有初，鲜克有终 开源社区也有许多玩玩就算的人，但是承诺了就不要轻易失信。不要就因为提交被拒就离开社区。找出原因，修正错误，然后再试一试。当你开发时候，要和整个代码库保持一致，确保即使项目发生变化而你的补丁仍然可用。不要把你的代码留给别人修复，要自己修复。这样可以在社区形成良好的风气，每个人都自己改。 这些“潜规则”看上去很简单，但是还是有许...阅读全文
登录，进入后输入一下命令即可完成桌面环境的启动。 startx 这下就能看见桌面环境了，剩下的就不用多说了。 如果出现中文乱码，以root权限进入xfce终端或在命令行界面输入以下命令： dpkg-reconfigure locales 方向键上下选择，Page Up/Down可以翻页，空格键选中。 将开头为zh_CN的几个全部选中，按回车键保存，选择zh_CN.UTF-8为默认locale，等待完成后重新启动系统即可解决乱码问题。 最后，在你晚上睡觉前还有个事情，那就是执行下面的命令。 apt-get update apt-get upgrade 之后关闭显示器电源，让系统自动更新去吧，所谓的快速安装就是把安装过程中的系统更新放到了最后，仅此而已。 这种安装方法有个不足之处，就是每次启动后...阅读全文
。Blackbox Exporter 最重要的功能之一是测量 Endpoint 的可用性。 当然, Blackbox Exporter 探测 HTTPS 后就可以获取到证书的相关信息, 就是利用这种方式实现对 Kubernetes apiserver 证书过期时间的监控. 配置步骤 调整 Blackbox Exporter 的配置, 增加 insecure_tls_verify: true, 如下: 重启 blackbox exporter: kubectl rollout restart deploy ... 增加对 Kubernetes APIServer 内部端点https://kubernetes.default.svc.cluster.local/readyz的监控. 如果你没有使用...阅读全文
；几个对应工具(比如dnf和urpmi)有一两个选项是dpkg和apt-get所没有的。然而，它们仍是一大批用来查看和处理软件包的实用工具的核心。没有对应工具提供那么多的选项来解决安装冲突。这么多年后，dpkg和apt-get仍然独具一格。 6.风险的选择 Debian的三个主要软件库是Stable(稳定)、Testing(测试)和Unstable(不稳定)。这些名称体现了每一个软件库中的软件包在测试这条道路上走得有多远，让用户可以根据自己的情况来兼顾最新软件包和稳定性程度。 如果你主要关注的是稳定性，那可以坚持使用Stable。相比之下，如果你想要最新的软件，可以使用Unstable，不过面临这种风险：有更多的软件错误，不相兼容。Testing通常介于这两个极端之间。 当然了，风险程度是相对...阅读全文
/dev/kmsg 中读取内核产生的日志消息。 TTYPath= 指定 ForwardToConsole=yes 时所使用的控制台TTY， 默认值是 /dev/console LineMax= 在将日志流转化为日志记录时，每条日志记录最大允许的长度(字节)。 如果将单元的标准输出(STDOUT)/标准错误(STDERR)通过流套接字连接到日志中， 那么将会以换行符("\n", ASCII 10)与NUL字符("\0", ASCII 0)作为分割符， 把日志流切分成一条条独立的日志记录。 如果超过此处设置的长度之后仍然没有遇到分割符， 那么将会自动插入一个分割符，以强制将单行超长日志截断为多行。 此选项的值越大，每个日志流客户端日志守护进程占用的内存也越大(最大值等于此选项的值)。 另外，此选项的值...阅读全文
。比如它的线程优先级太低，而高优先级的线程不断抢占它所需的资源，导致低优先级资源无法工作。 3、活锁的情况是线程一种非常有趣的情况，在生活中我们可能会碰到这样的情况，那就是出门的时候可能会遇到有人要进门，你打算让他先进门，他又打算让你先出门，结果，两个人都互相退后了，然后你打算先出门时对方也向前一步，来来回回就一直卡在门口。当然，这种事情正常人很快就能解决，但如果是线程碰到就没那么幸运了。 如果两个线程占用着公共的资源，并且秉承着 “谦让” 的原则，主动把资源让给他人使用，你让我也让，这样就造成资源在两个线程间不断跳动但线程之间都拿不到资源的情况，这样的情况就是活锁了。 线程安全 线程安全指的是多线程的安全。如果一段程序可以保证被多线程访问后仍能保持正确性，那么程序就是线程安全的。一般来说，线...阅读全文
/kitex-benchmark。 扩展性：Kitex 设计上做了模块划分，提供了较多的扩展接口以及默认的扩展实现，使用者也可以根据需要自行定制扩展。Kitex 未耦合 Netpoll，开发者可选择其他网络库扩展使用。 消息协议：RPC 消息协议默认支持 Thrift、Kitex Protobuf、gRPC。Thrift 支持 Buffered 和 Framed 二进制协议；Kitex Protobuf 是 Kitex 自定义的 Protobuf 消息协议，协议格式类似 Thrift；gRPC 是对 gRPC 消息协议的支持，可以与 gRPC 互通。除此之外，使用者也可以扩展自己的消息协议。 传输协议：传输协议封装消息协议进行 RPC 互通，传输协议可以额外透传元信息，用于服务治理，Kitex 支持的...阅读全文
谈及linux内存，很多时候，我们会关注free，top等基础命令。当系统遇到异常情况时，内存问题的根因追溯，现场诊断时，缺乏深层次的debug能力。本篇幅不做深层讨论，能把当前系统的问题描述清楚，是每个SRE应该具备的最基础能力。free========2.1 free命令原理free是通过查看 /proc/meminfo 来获取内存的使用情况。但是 /proc/meminfo 这个文件又是怎么来的？我们先了解下 /proc 目录：/proc 是一个虚拟文件系统，该目录下的所有文件都是伪文件，该类文件只存在于内存中，并不占用空间——使用 du -sh 即可验证，该模具路下的磁盘占用都是0。/proc 下的所有文件都是内核调用proc_create() 接口来创建的虚拟条目。/proc 中...阅读全文
遵守的SEO规范，开发网站或修改网站时，即使不与SEO部门协同，也至少不能违反SEO规范，以防产生灾难性的后果。以前为客户写过一些技术部门SEO规范，现在简单整理更新一下，分享给大家，希望对其它公司也有帮助。 技术部门SEO规范 本SEO规范适用于公司所有新建网站及对现有网站的更新、改版。本SEO规范不是建议，是强制性规定。编程、前端、运维等技术相关部门务必遵守。 对本SEO规范中的内容有疑义时，请与SEO部门沟通，不可自行解释有疑义部分。 域名及服务器相关 只解析公司因业务需要决定开通的子域名。未开通子域名一律不解析。不要使用泛解析（以通配符*代替子域名）。不能有两个或两个以上域名显示同样网站内容（无论以哪种方式实现，如解析至相同根目录、上传同样文件和数据库）。用于测试的子域名使用...阅读全文
，例如 Pod Yaml 容器挂载配置跟 PodPreset 容器挂载配置为同一路径时，会报错提示冲突。 最后要提一下注意的问题： 目前 PodPreset 的预设功能这块还在演进中，不过已经能大大简化了相关的管理工作，将这些公用配置从开发者手中分离出来，变成系统管理配置。PodPreset 是 Namespace 级别的对象，其作用范围只能是同一个命名空间下容器。目前为 v1alpha1 版本，还不成熟，例如当我们对已创建的 PodPreset 执行非常少量的修改时，重新 apply 或者 replace 时，服务端并没有更新过来（亲测会有问题，只能删除重建），大家可以自己尝试下。 参考资料 PodPreset DocEnable PodPreset...阅读全文
文件大小限制。4. SamhainSamhain是具有中央管理功能的开源HIDS，可帮助您检查文件完整性，监视日志文件并检测隐藏的进程。这种多平台解决方案可在POSIX系统（Unix，Linux，Cygwin / Windows ）上运行。Samhain的安装非常简单，您只需要从官方网页下载tar.gz文件并将其安装在系统上即可。在此之前，您需要确保MySQL和Apache在您的服务器上运行。Samhain项目带有大量详细的文档。该HIDS还通过TCP / IP通信提供集中和加密的监视功能。它与其他先前讨论过的开源HIDS的不同之处在于其隐身功能- 使其免受入侵者的侵害- 这要归功于其开发人员编写的偏执代码。而Samhain 社区 很好，比其他HIDS难安装。Windows的客户端要求安装...阅读全文
否落入加州CCPA管辖。 2.3 小结 相比而言，GDPR的管辖较广泛，管辖逻辑复杂，只要与欧盟、欧盟居民、向欧盟输出产品服务或监控欧盟个人等因素相关，即大概率落入GDPR管辖范围。 相反，CCPA管辖逻辑简明，聚焦于管辖“以营利目的处理个人信息的企业”，为被管辖实体设置了“年收入金额门槛”和“消费者、家庭和设备数量门槛”，注重对于风险影响程度和范围较大的实体进行管辖，执法的针对性就更强。 3. 数据跨境传输管控：GDPR环环相扣严格限制，CCPA无明确规定 3.1 GDPR对跨境传输的授权与限制——五道“关口” GDPR对数据跨境传输到欧盟境外的情况规定了较为严格的条件。从立法价值取向上，通过以下“五步走”的方式[11]，GDPR就为数据流出欧洲经济区（EEA）设置了层层关口，且GDPR给...阅读全文
？ $ docker exec -ti 9d8e97e307d7 sh / # 成功了！现在可以 attach 到正在运行的容器中了。看起来很有希望，但还有一个问题。 Alpine 基础镜像是基于 muslc 的 —— C 语言的一个替代标准库，而大多数 Linux 发行版如 Ubuntu、Debian 和 CentOS 都是基于 glibc 的。这两个库应该实现相同的内核接口。但它们的目的是不一样的： glibc 更常见，速度也更快； muslc 使用较少的空间，并侧重于安全性。 在编译应用程序时，大部分都是针对特定的 libc 进行编译的。如果你要将它们与另一个 libc 一起使用，则必须重新编译它们。 换句话说，基于 Alpine 基础镜像构建容器可能会导致非预期的行为，因为标准 C 库是不一样的。你可...阅读全文
前不久组内又有一次我比较期待的分享：“Linux 的虚拟内存”。是某天晚上加班时，我们讨论虚拟内存的概念时，leader 发现几位同事对虚拟内存认识不清后，特意给这位同学挑选的主题。 我之前了解一些操作系统的概念，主要是毕业后对自己大学四年的荒废比较懊恼，觉得自己有些对不起计算机专业出身，于是在工作之余抽出时间看了哈工大在网易云课堂的操作系统公开课，自己也读了一本讲操作系统比较浅的书 《Linux内核设计与实现》，而且去年自己用 C 写简单的服务器时，也追根究底了解了更多的系统底层知识。多亏了这些知识，让我对应用层的知识更有掌控感，也在上次排查问题时（从应用到内核查接口超时）助了我一臂之力。 前几天另一位同事来问另一个虚拟内存相关的问题，我才发现对于虚拟内存，我的理解还不够深刻，一些概念还...阅读全文
能角色的分工不均衡，再加上个人角色的过度自由，使得 Debian 章程变成了 Joey 口中的那份“有毒文件”。 我想敏捷哲学中的一些事情是对的：想办法减少因为改变而产生的成本，去赋能一些个体决策的权利、去行动，而不是在事前就害怕失败、畏首畏尾。近来，我越来越怀疑 Debian 现行的决策机制（特别是技术委员会）是否真的合适。 敲下这几句话的几年后，Russ Allbery 再次成为了 Debian 技术委员会的成员。这次，他没有坐以待毙，而是提出了一份根本性的改革草案。详情请戳：《Debian 向左：或将迎来根本性改革》...阅读全文
，kubelet通过给容器打不同的label来识别之。CRI是一个统一的容器操作gRPC接口，kubelet对容器的操作，都要通过CRI请求来完成，而Docker，Rkt等容器项目则负责实现各自的CRI实现，Docker的实现即为dockershim，dockershim负责将收到的CRI请求提取出来，翻译成Docker API发给Docker Daemon。 relist通过CRI请求更新到Pod中Sandbox容器和非Sandbox容器最新状态，然后将状态信息写入kubelet的缓存podCache中，如果有容器状态发生变化，则通过pleg channel通知到syncLoop循环。对于单个pod，podCache分配了两个数组，分别用于保存Sandbox容器和非Sandbox容器的最新状态...阅读全文
岗回了成都，成都是个远离核心的待发展的技术部，当时人就 20，30 号人吧。 回去后，由于原来是在杭州负责核心 A1 系统，大家都还挺羡慕，都还挺给面子的。所以，变得越来越自信。 当你自信后，同样你会越来越勇敢，越来越开放。当时，也看了些敏捷的书，虽然从来没有完整的看完一本敏捷的书，现在我对敏捷也是半懂不懂，依然很讨厌职业的咨询师，喊喊口号，比如 TDD，说实话，我就很难看到 TDD 的模式，在如此复杂的业务系统成功过。 当时对于敏捷最深刻的一点就是：反馈环。怎么去利用反馈坏不断是提升自己，自己缩短反馈坏，让自己成长的更快。 回成都后，我变得更为开放，这种开放，让我收获更多，在交流，不断的学**中，成长更快。从一个基本是完成任务型的技术人员，渐渐去思考更全局，更开放性的内容。 成都远离核心...阅读全文
婆/女朋友的电脑！！！ 7.您对自己的孩子在开源或者计算机领域有什么期许？或者他有没有因为你对Linux的热爱影响他去关注、喜欢Linux？ 答：对于孩子来说，顺其自然吧，不会刻意去引导他。 8.作为一名老师更是一名家长，您觉得“Linux要从孩子抓起”有必要吗，特别是在中国? 答：这些年喊的口号不少了，有用么？现在的教育制度问题，作为教育工作者更加无奈，其他教育方面的问题更多，计算机教育、Linux教育。。。不乐观！ 9.您觉得中国有必要在教育行业推广Linux吗? 答：答案是肯定的，只是限于体制、师资、观念等方面原因，很有可能沦为形象工程或某些人赢利的工具而已。但，该做的还要去做，不去做，永远不会有改观。 10.小编知道您有一个自己的网站（http://phpcj.org/），上面更新的...阅读全文
Stable和Update。然而，用户需要把注意力主要放在三大类软件库上。 Debian系统具有的优点之一是，你可以在下面这两个极端之间作一选择：极其稳定，但缺点是版本较老；或者非常先进，但缺点是软件不大稳定，技术出现的重大变化可能让不知情用户的系统崩溃。这里的选择取决于你是升级核心组件(比如Linux内核)，还是升级灾难发生时不影响其他东西的自带代码库的独立式实用工具。 恰恰相反，Ubuntu的程序包来自Debian测试版或不稳定版。Ubuntu的软件库按照其他标准来加以组织，而不是由测试状态来加以组织。Main含有Canonical支持的软件，以及Ubuntu社区支持的Universe软件。Restricted含有专有驱动程序，其中Multiverse存放有版权或其他法律限制的软件。 另一个主要的...阅读全文
DPDK 全称为 Data Plane Development Kit ，是近年来在高速网络通信行业中炙手可热的一种网络报文处理加速框架。DPDK 从十年前诞生直至发展到今天已经可以支持业界主流的高端网卡以及各类加速硬件设备，同时也支持主流的各个CPU 体系结构（可以运行于 X86, Arm, Power 等平台）。同时也可以运行于 Linux/FreeBsd/Windows 等主流操作系统之上。DPDK因为其优异的性能指标被广泛的应用于网关/负载均衡/SDN/虚拟交换的各个场景。 本文主要介绍 DPDK 中的 libgraph 设计思想以及实现，libgraph 的设计思想源自于开源项目 Vector Packet Processor(VPP)。VPP 中的向量包处理优化方案是...阅读全文
将develop中的代码合并到maser，保证master稳定 5.打标签（tag） 通常，发布一个版本时，会在版本库中打一个标签（tag），这样，就唯一确定了打标签时刻的版本。将来无论什么时候，取某个标签的版本，就是把那个打标签的时刻的历史版本取出来。所以，标签也是版本库的一个快照 git tag v1.0.0 //创建轻量标签v1.0.0 git tag -a v1.0.0 -m ’my version 1.0.0‘ //创建附注标签 git tag //列出标签 git push --tags //推到远端 git tag -d 1.0.0 //删除本地tag 注意：tag 相当于是一个快照，是不能更改它的代码的，如果要在 tag 代码的基础上做修改，你需要一个分支： git...阅读全文
。 $ perf record -F 99 -p `pgrep -n node` -g -- sleep 30 详细的操作可以看这篇文章。 七、浏览器的火焰图 Chrome 浏览器可以生成页面脚本的火焰图，用来进行 CPU 分析。 打开开发者工具，切换到 Performance 面板。然后，点击"录制"按钮，开始记录数据。这时，可以在页面进行各种操作，然后停止"录制"。 这时，开发者工具会显示一个时间轴。它的下方就是火焰图。 浏览器的火焰图与标准火焰图有两点差异：它是倒置的（即调用栈最顶端的函数在最下方）；x 轴是时间轴，而不是抽样次数。 八、Async-profiler介绍 Async-profiler是一个对系统性能影响很少的Java采样分析器，它的实现是基于HotSpot特有的API，通过这些特有的...阅读全文
.tcp_congestion_control=bbr" >> /etc/sysctl.conf 应用更改1sysctl -p 验证是否开启1lsmod | grep bbr 返回信息如下，表示已经开启1tcp_bbr 20480 15 安装一些常用工具(可选)1apt install -y htop speedtest-cli vim 安装 Proxmox VE参考官方 wiki：https://pve.proxmox.com/wiki/Install_Proxmox_VE_on_Debian_Stretch 直接从 【 Install Proxmox VE Install 】 这部分开始 复制以下到终端执行12345echo "deb http://download.proxmox.com/debian/pve stretch...阅读全文
讶于发生在自己身上的意外之喜，仅仅因为我十年前曾帮助过一位企业创始人。 建立人际网络的另一个途径是拥有好的名声，不亏待每一个一起共事的人。要大方慷慨地与他人分享资源，这会给你带来10倍、100倍的回报。此外，要知人善用，让每个人都能充分施展自己的才华（这是我从管理学中学到的最重要的一课，虽然我对管理学的研究还并不多）。我们既要尽力挖掘他人的潜力但是又不能逼得太紧，这容易让人感到精疲力尽。 每个人都有各自擅长的领域。因此，我们要多看看自己的优点，不要总盯着缺点，要用优点来定义自身。面对缺点，我们要承认它，想办法弥补它，不要让缺点成为我们前进路上的阻碍。我常能在一些创业者口中听到这样的说法“我不能做A，因为我不擅长B”，这种思维方式让我十分吃惊，这反映出他们缺乏创造力。弥补弱点的最佳方式是聘请互...阅读全文
