DevOps 越来越流行，2019 年这八大趋势值得关注
息，帮助执行琐碎的任务，从而让 IT 人员能够完成更有针对性的工作。它们可以学习模式、预测问题并提出解决方案。如果 DevOps 的目标是统一开发和运营，AI 和 ML 可以消除过去二者之间的一些“对抗”状态。 本文转自微信公众号：高效开发运维...阅读全文
InfraPub 为您找到相关结果 424 个
Docker 快速入门之 Dockerfile
["executable", "param1", "param2"] 样例： ENTRYPOINT ["top","-b"] CMD ["-c"] 上面的 -c 参数可以在启动时覆盖 docker run -it --rm --name test top -H。 如果要覆盖 ENTRYPOINT 指令则用 --entrypoint 参数启动容器。 3.10 VOLUME VOLUME 指令用于为容器创建一个挂载点，这个挂载点可以用来挂载 本地文件/文件夹 也可以用来挂载 数据卷。其中若在启动一个新容器时没有指定挂载目录，则会自动创建一个数据卷，当容器被销毁时，数据卷如果没有被其它容器引用则会被删除。语法： VOLUME ["/data1","/data2"] 3.11 USER USER 指令用于设置执行 RUN...阅读全文
深入学习golang — channel
Channel 1. 概述 “网络，并发”是Go语言的两大feature。Go语言号称“互联网的C语言”，与使用传统的C语言相比，写一个Server所使用的代码更少，也更简单。写一个Server除了网络，另外就是并发，相对python等其它语言，Go对并发支持使得它有更好的性能。 Goroutine和channel是Go在“并发”方面两个核心feature。 Channel是goroutine之间进行通信的一种方式，它与Unix中的管道类似。 Channel声明： ChannelType = ( "chan" | "chan" "<-" | "<-" "chan" ) ElementType . 例如： var ch chan int var ch1 chan<- int //ch1只能写...阅读全文
三个技巧 大幅减少 Docker 镜像体积
:1dd78a123212328bd… 123MB 文件大小是否已发生改变？ $ docker images | grep node- node-multi-stage 331b81a245b1 678MB node-vanilla 075d229d3f48 679MB 最后一个镜像（node-multi-stage）更小一些。你已经将镜像的体积减小了，即使它已经是一个很小的应用程序。但整个镜像仍然很大！有什么办法可以让它变得更小吗？ 2. 用 distroless 去除容器中所有不必要的东西 这个镜像包含了 Node.js 以及 yarn、npm、bash 和其他的二进制文件。因为它也是基于 Ubuntu 的，所以你等于拥有了一个完整的操作系统，其中包括所有的小型二进制文件和实用程序。 但在运行容器时是不需要这些东西的，你...阅读全文
如何读懂火焰图？+ 实例讲解程序性能优化 - xuxh120
627891 > 627891.svg -d N 分析持续时间（以秒为单位）。如果未提供启动，恢复，停止或状态选项，则探查器将运行指定的时间段，然后自动停止。 -i N 设置分析间隔(以纳秒或者毫秒等作为单位),默认分析间隔为10ms。 -o 转储文件的格式。 等待15s，就会产生结果，生成 627891.svg 文件。vim 627891.svg 并删除第一行，然后下载到本地并使用浏览器打开。 结果如下图，此图俗称火焰图，主要看每个方法的横轴长度，占用横坐标越长的操作，其占用的 cpu 即最长，很直观的。 9.2 性能黑点分析 我们首先发现下图红框内的代码存在严重的性能问题。在append的过程中，获取线程 stack 的过程耗时比较大。从火焰图中分析，耗时占据了接近50%的是，一个logger操作...阅读全文
从 Debian 安装 Proxmox VE，并配置网络和双硬盘
/customer# vgs VG #PV #LV #SN Attr VSize VFree hdd 1 9 0 wz--n- 2.73t 31.84g s163941-vg 1 2 0 wz--n- 223.33g 0 运行 lvs 和 vgs 发现之前的 VM 硬盘 还在，fdisk 格式化一下 看来 nocix 后台的 wipe hard disk 没起作用 1fdisk /dev/sdb m 可以查看帮助菜单 输入 p 回车，d 回车，w 回车 命令说明：p 打印分区d 删除分区w 写入更改 过程如下：123456789101112131415161718192021222324252627Command (m for help): pDisk /dev/sdb: 2.7 TiB...阅读全文
HAProxy用法详解 最详细中文文档
并不太适用于较短会话的应用层协议，如HTTP；此算法是动态的， 可以在运行时调整其权重； 3.14 source：将请求的源地址进行hash运算，并由后端服务器的权重总数相除后派发至某匹配的服务器；这可以使得同一个客户端IP的请求始终被派发至某特定的服务器；不过，当服务器权重总数发生变化时，如某服务器宕机或添加了新的服务器，许多客户端的请求可能会被派发至与此前请求不同的服务器；常用于负载均衡无cookie功能的基于TCP的协议；其默认为静态，不过也可以使用hash-type修改此特性； 1，对原地址hash，第一次调度时使用WLC source：IP层，位于同一个NAT服务器背后的多个请求都会定向至同一个upstream server，不利于负载均衡，一般只有不支持使用cookie插入又需要...阅读全文
OpenAI掌门人Sam Altman：AI的下一个发展阶段_OneFlow
不够了解自己，不清楚什么类型的技能最难、最需要调动大脑，或者错误估计了控制身体的难度。 Reid Hoffman：除了AI的应用潜力之外，目前大家对AI的讨论有没有轻率的一面，比如将AI用于核聚变研究？ Sam Altman：通常而言，如果某个行业获得非常广泛的社会关注，所有人都在谈论它，这可能不是什么好事，可惜这恰恰是AI行业目前的情况，我不希望这是AI行业“垮掉”的前兆。 业内有人正在研究利用强化学习模型控制核聚变反应，但据我们所知，AI模型在这里发挥的作用还非常有限。 我们现在进入了“AI+”时代，相信AI在未来可以实现很多东西，会成为最大的新一代技术平台。但就目前而言，我们倾向于往更有确定性的方向发展，比如，业内研究出了缩放定律（Scaling Law，该定律揭示AI模型性能与模型参...阅读全文
成为Debian社区维护人需要做好的准备
荐后，会有一位专门的负责人来对他进行考核，这个人就是他的 AM。 10. WNPP: Work-Needing and Prospective Packages 的缩写，指需要有人接手或帮助的软件包。这个概念不是模糊的，而是有明确的定义的。 11. MIA: Missing In Action 的缩写，指某位 Maintainer 长时间不参与维护自己的软件包，同时别人也没能成功地与之取得联系。这样的 Maintainer 被称为 Zombie Maintainer 。如果他是 DD，那么他的 Debian 项目帐号会被锁定，一年内无回应则会删除。 12. Debian Project: Debian 项目是构建自由的通用操作系统（The Universal Operating System...阅读全文
如何在 Debian 下配置邮件服务器
tcp 0 0 0 0.0.0.0:110 0.0.0.0:* LISTEN tcp 0 0 0 0.0.0.0:143 0.0.0.0:* LISTEN tcp 0 0 0 0.0.0.0:993 0.0.0.0:* LISTEN tcp 0 0 0 0.0.0.0:995 0.0.0.0:* LISTEN 使用邮件用户代理（MUA）连接邮件服务器 邮件服务器现在可以使用了。可以在台式机、笔记本电脑、平板电脑或手机上用你最喜爱的电子邮件客户端软件配置邮件账户。以下是与Mozilla Thunderbird配置参数的截图。 故障排除 日志文件/var/log/mail.log是你最好的朋友。任何的问题都可以在这里找到线索。 确保防火墙正确配置。 确保DNS服务器配置了适当的条目。 综上所述，本教...阅读全文
Golang 中的 channel 通道详解
，接收操作则是从队列的头部删除元素。如果内部缓存队列是满的，那么发送操作将阻塞直到因另一个goroutine执行接收操作而释放了新的队列空间。相反，如果channel是空的，接收操作将阻塞直到有另一个goroutine执行发送操作而向队列插入元素。...阅读全文
聊聊很重要的内核技术eBPF
Viljoen在其中介绍了Netronome SmartNIC上每个FPC每秒达到300万个数据包，每个SmartNIC有72到120个FPC，可能最大支持eBPF吞吐量4.3 Tbps！（理论上） eBPF 触发了新一代网络、安全性、应用程序配置/跟踪和性能故障排除等领域的工具开发，这些工具不再依赖现有的内核功能，而是在不影响执行效率或安全性的情况下主动重新编程运行时行为。 那我们看看有哪些基于 eBPF 的工程，这些工程或许你已经知道，或是已经经常使用。 基于eBPF的项目 1：bcc BCC是用于创建基于eBPF的高效内核跟踪和操作程序的工具包，其中包括一些有用的命令行工具和示例。 BCC简化了用C进行内核检测的eBPF程序的编写，包括LLVM的包装器以及Python和Lua的前端。它还提供了用于...阅读全文
Jono Bacon: GPL 没落了吗？
系、构建联盟，找到并解决行业问题。 在这个峰会上，有一个分组研究，在其中，与会者被分成小组，被要求给一个真实存在的核心的开源技术推荐一个开源协议。每个小组都给出了回应。不到十分之一的小组推荐了宽容许可证，没有人推荐 GPL 许可证。 我看到了开源行业对于 Apache 协议以及 MIT 协议的逐步认可，但是他们却对花时间理解、接受和熟悉 GPL 这件事高高挂起。 在这几年里，这种趋势仍在蔓延。除了 Black Duck 的调查之外， 2015 年 GitHub 上的开源协议调查 也显示 MIT 是人们的首选。我还能看到，在我工作的 XPRIZE （我们为我们的 Global Learning XPRIZE 选择了开源协议），在我作为社区领导顾问的工作方面，我也能感觉到那种倾向，因为越来越多的...阅读全文
理解 Linux 的虚拟内存
都是你的，随便用，管够。可事实上呢，操作系统只是给它们画了个大饼，这些内存说是都给了 P1 和 P2，实际上只给了它们一个序号而已。只有当 P1 和 P2 真正开始使用这些内存时，系统才开始使用辗转挪移，拼凑出各个块给进程用，P2 以为自己在用 A 内存，实际上已经被系统悄悄重定向到真正的 B 去了，甚至，当 P1 和 P2 共用了 C 内存，他们也不知道。 操作系统的这种欺骗进程的手段，就是虚拟内存。对 P1 和 P2 等进程来说，它们都以为自己占用了整个内存，而自己使用的物理内存的哪段地址，它们并不知道也无需关心。 分页和页表 虚拟内存是操作系统里的概念，对操作系统来说，虚拟内存就是一张张的对照表，P1 获取 A 内存里的数据时应该去物理内存的 A 地址找，而找 B 内存里的数据应该去物...阅读全文
域名与商标： 如何防止域名被仲裁
”、“梅花”等。从这一点上看，域名的独有性，似乎更好一些。 从商业的角度来看，域名因其独特性，可以把它当作一个企业的网上商标。不过，可以肯定地说，域名与商标没有绝对的联系。 在这个眼球经济时代，作为企业，最理想的状态，当然是希望它的实物商标与网上商标保持高度一致的，以使大众无论从哪个途径，都能将目光聚焦在它的身上，为此，企业们也付出了巨大的努力，比如商标之争比较有名的当属“加多宝”和“王老吉”，域名方面，作为米农，所听到见到的域名仲裁案例也不在少数。 由于域名和商标分属不同领域的不同系统，再加上时间差的原因，一般企业想要达到理想状态，是有难度的。比如说，自已注册的商标，其对应的域名不一定是未注册状态，这个时候，域名权与商标权，甚至商号权、网站名称权等就形成了冲突。除了收购外，另外一个途径就是仲裁...阅读全文
Debian 9 使用kubeadm创建 k8s 集群（上）
文件。 使用组设置服务器清单后，我们继续安装操作系统级依赖关系并创建配置设置。 第2步 - 在所有远程服务器上创建非root用户 在本节中，您将在所有服务器上创建一个具有sudo权限的非root用户，以便您可以作为非特权用户手动SSH连接到这些用户。 例如，如果您希望使用top/htop等命令查看系统信息，查看正在运行的容器列表或更改root拥有的配置文件，这将非常有用。 这些操作通常在维护群集期间执行，并且使用非root用户执行此类任务可以最大程度地降低修改或删除重要文件或无意中执行其他危险操作的风险。 在工作区中创建名为~/kube-cluster/initial.yml的文件： nano ~/kube-cluster/initial.yml 接下来，将以下播放添加到该文件以创建在所有服...阅读全文
Debian 向左：或将迎来根本性改革 - OSCHINA
聚会时的感受，他表示这次聚会讨论的主题和几年前基本一样，这使得他开始反思自己是否仍适合留在 Debian 继续参与维护。 除此之外，Stapelberg 还在博客中抱怨了 Debian 糟糕的开发流程，认为 Debian 整个开发评估流程都非常迟钝，比如：补丁的评估没有截止日期，有时候他会收到通知说几年前递交的补丁现在合并了。 事不过三，这些开发者的离开足以警醒 Debian 内部。 02 改变 2021年9月28日，Debian 技术委员会（Technical Committee）资深成员 Russ Allbery 站了出来： 我认为（社区的）章程建立在了一个错误的基础之上，它太过于追求“控制想法”（minds of the governed），而章程应该关注的是“流程性细节...阅读全文
粘合万种芯片的“万能胶” 是摩尔定律的续命丹吗？ - 硬件
需要细小的引线和线宽，复杂度高，良率受制程影响大，成本也会很高。"刘宏钧说到。以英特尔的EMIB为例，从英特尔所发布的公开论文中可以发现，EMIB在工艺实现上面临不少难题，需要进行材料和工艺的开发，其硅桥的设计工作需要由懂材料、懂封装、懂制程和懂信号完整性的资深工程师们来共同实现。另外，晶圆制造材料、设备都需要进行改进，其时间和成本是除苹果、英特尔等头部芯片公司之外无法承受的。不仅如此，即便是有了UCIe这芯片万能胶，"Chiplet在哪里"的问题也难以解决。"UCIe之后，Chiplet面临的是Chiplet供应商和应用商谁先迈出第一步的问题。这也是一个'鸡与蛋'的问题。Chiplet供应商较为关心的是Chiplet一次性工程费用（NRE）该由谁来承担，而应用商则担心是否有足够丰富的...阅读全文
influxdb内存消耗分析及性能优化【探索篇】
-duration = "80h" #并行压缩处理器 max-concurrent-compactions = 8 #压缩每秒落盘数据量 compact-throughput = "16m" #压缩每秒最大落盘数据量 compact-throughput-burst = "16m" #wal日志超过128m时会被压缩为索引文件，并删除 max-index-log-file-size = "128m" [monitor] #关闭监控 store-enabled = false(3) 程序启动numactl --interleave=all env GODEBUG=madvdontneed=1 /usr/bin/influxd -config /usr/bin/influxdb.conf由于笔者水平有限，上述如...阅读全文
一位五年工作经验架构师的感悟
了一个小时。但是我的水平有限，结果可想而知。我肯定也知道没过，然后我就请教面试官，需要提升的地方，学**哪方面的内容。 于是我去学习，一个月过去了。 第二次面试，也是阿里 B2B 的岗位，我不知道那个时候有没有招聘的公海，按照我的理解是没有的，然后我肯定不会有这么多次机会。这次的面试和上次很像，只不过内容换成了多线程并发相关的知识。我又不知道，面试官还是很容忍我，最后没通过，我同样为了需要什么提高。 于是我去学习，一个月又过去了。 第三次面试，是淘宝，应该是广告部门。这次面试，我觉得除了不知道的内容，其他的内容都还回答的蛮正确的。但是面试官，拿着面试题就和我聊了，然后讲到一个数据库方面的知识时（内连接，外连接），我说不知道。面试官说：这么基础的问题你都不会，这是不能容忍的，其实当时很伤心。有...阅读全文
在 Kubernetes 上扩展 TensorFlow 模型
CRD。这里是一个分布式训练作业的[基本例子](https://github.com/kubeflow/tf-operator/blob/master/examples/v1/mnist_with_summaries/tf_job_mnist.yaml)，它依赖于两个 worker，在没有 Chief 和 Parameter Server 的情况下进行训练。这种方法适用于实现 TensorFlow 同步训练策略，如 MirroredStrategy。 你看，除了标准的 Kubernetes 资源和服务（例如卷、容器、重启策略）之外，规范还包括一个 **tfReplicaSpecs**，其中你定义了一个 worker。在容器化的 TensorFlow 代码中，将 worker 副本计数设置为 2...阅读全文
Sam Altman的成功学｜OneFlow
越长。一般来说人们身上背负的责任越少，就越容易施展身手。 8 大胆一点 在我看来，与轻松创业相比，人们多半会选择更具挑战性的事业。因为后者往往更激动人心，能带来更大的成就感和满足感。 如果你在某个重大问题上取得了进展，就会有源源不断的人前来帮忙。志当存高远，不要害怕去做你真正想做的事情。 如果别人都在创办meme公司，而唯独你想创办一家基因编辑公司，那就去做吧，不要犹豫。 追随你的好奇心。那些让你感到兴奋的事情，通常也适用于别人。 9 足够坚定 很多人都不知道，只要你足够坚持，世界就会以你的意志为转移。但大多数人甚至都不会去尝试，只单纯认为世界有其自身的运作规律。 人的潜力是巨大的，只要敢想就能做成很多事。但大多数人都会怀疑自我、过早放弃，同时又不够努力，种种原因导致大多数人无法充分发挥自身...阅读全文
Apollo 配置中心简单介绍
本章将介绍如何在Apollo配置中心中删除已经发布的项目。 专栏目录： 携程 Apollo 配置中心 | 学习笔记 序章 欢迎关注个人公众号： Coder编程 欢迎关注个人网站：https://coder-programming.cn/ 一、前言 之前一直学习SpringCloud, 对于配置中心，一直也是采用的Spring Cloud Config,但是用久了，发现很多地方满足不了要求，同时也感觉很low(个人看法勿喷)。在学习Spring cloud config 的时候也有听到过携程的apollo，但一直没时间去弄。直到昨天看了一张图，如下：使我下定决心去看看携程的apollo配置中心。 这张图也算是综合对比了spring cloud config,netflix archaius...阅读全文
得物云原生全链路追踪Trace2.0-采集篇 - OSCHINA
的监控： RPC 调用排障，调用方除了拥有下游接口信息，也可溯源自身触发该调用的接口。 接口高耗时分析，根据指标，可还原出单位时间窗口的耗时分解图快速查看耗时组件。 3.2 关于选型的疑问 你可能会问，链路监控领域在业内有现成的 APM 产品，比如 Zipkin, Pinpoint, SkyWalking 等，为什么当时会选择 OpenTracing + Prometheus 自行埋点？主要有两大因素： 第一，在当时，CAT 无法满足全链路监控和一些定制化的报表分析，而得物交易链路五彩石项目交付也趋于尾声，贸然去集成外部一款庞大的 APM 产品在没有充分的验证下，会给服务带来稳定性风险，在极其有限的时间周期内不是个理智的选择。 第二，监控组件是随着统一的基础框架来发布，同时，由另一团队牵头开...阅读全文
最新评论
