LXC 3.0.0 发布 Linux 容器工具
nsenter 是一个可以在指定进程的命令空间下，运行程序的命令，它位于 util-linux 包中。 nsenter 用途 nsenter 的一个典型用途是进入容器的网络名字空间，进行网络相关的排障... 12月15日 171 评论...阅读全文
InfraPub 为您找到相关结果 728 个
2017年DevOps的5大发展预测
在即将过去的一年中，DevOps经历了大规模容器化，许多公司投入了容器化的怀抱。这并不意味着DevOps相关工具已经成熟，但是这些工具为安全改进、容器化和工具集中化奠定了基础。以下是2017年DevOps的5大发展预测。 工具整合 根据Quali公司CTO Joan Wrabetz的说法，DevOps相关工具市场整合的时机已经成熟，这主要归功于消费者需求和公司数量的大规模增长。她提到：“为了简化流程，消费者只会选择其中的几个优秀软件，并且围绕着这些工具，将它们整合到自身的流程当中去。这将会导致越来越多的工具直接提供横跨整个持续交付周期端到端功能。” 另外，由于DevOps公司数量的增长，2017年将会迎来小公司的收购潮。“我们已经看见亚马逊对Chef进行了投资。另外，一些DepOps公司已...阅读全文
Facebook 是如何进行大规模代码部署的
Facebook 的首位发布工程师，目前是 Facebook 发布工程的工程总监。 Facebook 的发布周期是“ quasi-continuous ” （准连续）——这只是一种委婉的说法，表明并非每次提交都会部署到生产环境，实际上它采用的是对几十到几百个提交进行批处理，每隔几个小时就进行推送。这种分层发布的方式使任何变更的回滚很容易。 这个新系统从 2016 年 4 月开始，经过一年的时间慢慢地完善。早先的模式是从主干分支的提交中选择特定的变更放到发布分支上。发布分支每天将这些变更推送到生产环境。这种“ cherry-picking ”的特点是，每天选择变更的数量为 500 ~ 1000。剩下的变更就推入到每周发布分支中。随着时间的推移，提交的数量和参与其中的工程师都有所增加，发布工程师的手工劳动变得...阅读全文
三星谈论下一代DRAM解决方案：GDDR7、DDR5、LPDDR5X和V-NAND
LPDDR5X DRAM和36Gbps GDDR7 DRAM，它们将为数据中心、HPC、移动、游戏和汽车市场领域带来新的功能。除了传统的DRAM之外，三星还强调了定制的DRAM解决方案的重要性，如HBM-PIM、AXDIMM和CXL，它们可以推动系统级创新，更好地处理全球数据的爆炸性增长。2030年达到1000多个V-NAND层自十年前成立以来，三星的V-NAND技术已经发展了八代，带来了10倍的层数和15倍的比特增长。三星最新的512Gb第八代V-NAND的比特密度提高了42%，达到了迄今为止512Gb三层单元（TLC）存储器产品中的行业最高比特密度。世界上最高容量的1Tb TLC V-NAND将在今年年底前提供给客户。该公司还指出，其第九代V-NAND正在开发中，并计划于2024年进行大规模生产。到...阅读全文
深入学习golang — channel
Serve(queue chan *Request) { for req := range queue { sem <- 1 go func(r *Request) { process(r) <-sem }(req) } } 至少，这样的代码不会让一个go的初学者不会迷糊，另外，从变量的作用域角度，也更符合常理一些。 在实际的C/C++编程中，我们倾向于工作线程在一开始就创建好，而且线程的数量也是固定的。在go中，我们也可以这样做： func handle(queue chan *Request) { for r := range queue { process(r) } } func Serve(clientRequests chan *Request, quit chan bool...阅读全文
Python 2.7.18 发布，Python 2正式结束
CPython 社区的奉献精神。 梳理一下 Python 2 的发布历程： 2000 年 10 月 16 日，Python 2.0 发布2001 年 4 月 17 日，Python 2.1 发布2001 年 12 月 21 日，Python 2.2 发布2003 年 7 月 29 日，Python 2.3 发布2004 年 11 月 30 日，Python 2.4 发布2006 年 9 月 19 日，Python 2.5 发布2008 年 10 月 1 日，Python 2.6 发布2010 年 7 月 3 日，Python 2.7 发布2020 年 1 月 1 日，Python 2.7 停止维护2020 年 4 月 20 日，Python 2 最后一个版本 2.7.18 发布 今后 Python 2...阅读全文
Kafka 3.3 使用 KRaft 共识协议替代 ZooKeeper
引入的新的仲裁控制器确保元数据在整个仲裁中可以被准确复制。活动控制器将元数据存储在事件源日志主题中，仲裁中的其他控制器对活动控制器创建的事件做出响应。事件日志定期进行快照，确保日志不会无限增长。与基于 ZooKeeper 的控制器不同，如果出现了问题，仲裁控制器不需要从 ZooKeeper 加载状态，因为集群的内部状态已经分布在元数据主题中。这大大减少了不可用时间窗口，缩短了系统最坏情况恢复时间。下图显示了使用新的仲裁控制器比使用 ZooKeeper 更快地关闭具有 200 万个分区的 Kafka 集群。新的 KRaft 共识算法和仲裁控制器使得 Kafka 集群可以扩展到数百万个分区，不仅提升了稳定性，让 Kafka 变得更容易监控、管理和支持，而且让整个系统可以有一个单一的安全模型，使...阅读全文
Debian GNU/Linux 诞生 27 周年
Software Guidelines)，它用于指示哪些软件是可以被使用的。项目章程和行为准则充当了重要的补充，章程(Constitution)规定了项目结构，行为准则(Code of Conduct)为项目内的互动奠定了基调。 在这个特别的时刻，我们应该感谢 Debian 项目及其背后的所有人。如果你是 Linux 和开源的粉丝，今天也应该花一点时间来感谢 Debian，即便你不使用这款操作系统 —— 或基于它的发行版，因为 Debian 无疑对 Linux 和开源做出了积极的贡献。Debian 对 GNU 和 UNIX 精神的坚持，也获得开源社区、自由软件和开源软件信奉者的支持。...阅读全文
Django 采用新的项目治理模式
创建一个新角色“Merger”，他可以 commit，但只能合并来自其他人的 pr。合并不能决定主动将内容添加到 Django，也没有任何特殊的决策特权。 此外还会创建“Releaser”角色，他可以访问 Django 的发行版本并执行相关的机制，例如在关键文件中增加版本号。 另一方面，在有需要的情况下，技术委员会将保留为最终决策机构，并且还将负责就 Django 未来技术方向的想法和建议进行调查，并确定发布时间表。 但是，技术委员会的成员资格将不再仅限于 committer，技术委员会也不再由 committer 选举产生。凡是向 Django 技术贡献过的人都有资格竞选技术委员会委员，并由 Django 软件基金会的个人成员评选。选举的潜在候选人从此前的大约 50 位（committer...阅读全文
Debian下编译安装Golang
我的Debian是用来工作的，因此用的是稳定源。稳定源的优点是，软件经过充分的测试，处于稳定版本。这种状态对于绝大多数软件，都是最合适的。 但是，对于一些需要最新版本的软件来说，稳定源太过于滞后。 官网不仅连接不稳定，二进制发布包也不够全。 目前（2016），Debian的稳定源只能安装go1.3版本。如果需要最新的版本，只能自行从源码编译安装。 卸载旧版本 sudo apt-get remove golang sudo apt-get autoremove 源码下载 git clone https://github.com/golang/go.git 如果没有Git，必须自行解决；如果没有gcc，也需要自行安装。 此外，golang/go这个库实在太大，近200MB。完整从GitHub上...阅读全文
Scrapy 架构及数据流图简介
)。 其提供了一个简便的机制，通过插入自定义代码来扩展Scrapy功能。 数据流(Data flow) Scrapy中的数据流由执行引擎控制，其过程如下: 引擎打开一个网站(open a domain)，找到处理该网站的Spider并向该spider请求第一个要爬取的URL(s)。 引擎从Spider中获取到第一个要爬取的URL并在调度器(Scheduler)以Request调度。 引擎向调度器请求下一个要爬取的URL。 调度器返回下一个要爬取的URL给引擎，引擎将URL通过下载中间件(请求(request)方向)转发给下载器(Downloader)。 一旦页面下载完毕，下载器生成一个该页面的Response，并将其通过下载中间件(返回(response)方向)发送给引擎。 引擎从下载器中接收到...阅读全文
Hadoop 核心 - HDFS 分布式文件系统详解
据信息。 3. HDFS的特性 首先，它是一个文件系统，用于存储文件，通过统一的命名空间目录树来定位文件； 其次，它是分布式的，由很多服务器联合起来实现其功能，集群中的服务器有各自的角色。 1. master/slave 架构（主从架构） HDFS 采用 master/slave 架构。一般一个 HDFS 集群是有一个 Namenode 和一定数目的 Datanode 组成。Namenode 是 HDFS 集群主节点，Datanode 是 HDFS 集群从节点，两种角色各司其职，共同协调完成分布式的文件存储服务。 2. 分块存储 HDFS 中的文件在物理上是分块存储（block）的，块的大小可以通过配置参数来规定，默认大小在 hadoop2.x 版本中是 128M。 3. 名字空间...阅读全文
如何为 k8s 节点增加污点，或者移除污点？
设置taint ``` kubectl taint node [node] key=value[effect] 其中[effect] 可取值: [ NoSchedule | PreferNoSchedule | NoExecute ] NoSchedule: 一定不能被调度 PreferNoSchedule: 尽量不要调度 NoExecute: 不仅不会调度, 还会驱逐Node上已有的Pod ``` 示例: ``` kubectl taint node node1 key1=value1:NoSchedule kubectl taint node node1 key1=value1:NoExecute...阅读全文
Systemd 及 Service 文件含义解析
Systemd 是 Linux下的一款系统和服务管理器，兼容 SysV 和 LSB 的启动脚本。Systemd 的特性有：支持并行化任务；同时采用socket式 与 D-Bus 总线式激活服务；按需启动守护进程（daemon）；利用 Linux 的 cgroups 监视进程；支持快照和系统恢复；维护挂载点和自动挂载点；各服务间基于依赖关系进行精密控制。 其中的监视和控制功能的主要命令就是systemctl。 Systemd 有很多不同类型的使用单元，主要包括：系统服务（.service）、挂载点（.mount）、sockets（.sockets）、系统设备（.device）、交换分区（.swap）、文件路径（.path）、启动目标（.target）。一般我们常用的是其中的系统服务。 对于系...阅读全文
OpenAI掌门人Sam Altman：AI的下一个发展阶段_OneFlow
来源｜Greylock OneFlow社区编译 翻译｜胡燕君、贾川 预告了一整年的GPT-4迟迟没来，人们猜想OpenAI是不是要跳票了，更何况他们之前的得意之作DALL-E也被开源Stable Diffusion打了个措手不及，再不来点深水炸弹业界地位危矣。 不过，就在大家以为今年OpenAI将以沉寂收场时，聊天机器人模型ChatGPT横空出世，让人们看到了AI的更大创造力，聚光灯也再度打到了OpenAI的身上。 今年9月，LinkedIn联合创始人Reid Hoffman与OpenAI首席执行官Sam Altman进行了一场对话，而肩负着宏伟使命且极富远见的Altman就曾预言：AI即将迎来下一个发展阶段。如今，大型语言模型越来越先进，也出现了可以实现文本-图像相互转换的多模态模型，一...阅读全文
谷歌是如何培养经理人的
Google Partners Podcast主持人Alex Langshur主持了一个播客节目，主题是关于谷歌HR如何寻找和培养优秀经理人。嘉宾是来自谷歌人力发展部门的Sarah Calderon，她在节目中介绍了谷歌是如何选择、培训和培养他们的经理人的。 Langshur引用了他的前上司的话，“一个优秀的经理人让一份艰难的工作变得具有挑战性和价值…而一个糟糕的经理人在一个好的岗位上表现平平，把一份艰难的工作搞得支离破碎”，以此强调选择正确经理人是多么重要。在访谈过程中，Sarah介绍了拥有7万名员工和数千名经理人的谷歌公司是如何选择、管理和培养经理人的。 Sarah概括了谷歌在培养经理人方面的五个要点： 表现优秀的员工不一定就是好的经理人，管理岗位所需要的技能是不一样的。只是在某个领域...阅读全文
Spinnaker 介绍 – Netflix 的持续交付平台
Spinnaker 是 Netflix 在2015年开源的一款持续交付平台，它继承了 Netflix 上一代集群和部署管理工具 Asgard：Web-based Cloud Management and Deployment的优点，同时根据公司业务以及技术的的发展抛弃了一些过时的设计：提高了持续交付系统的可复用性，提供了稳定可靠的API，提供了对基础设施和程序全局性的视图，配置、管理、运维都更简单，而且还完全兼容 Asgard，总之对于 Netflix 来说 Spinnaker 是更牛逼的持续交付平台。 在深入了解 Spinnaker 之前，先扯一扯 Netflix 的技术文化：这是一家全面拥抱云的公司，据报道数据中心完全部署在 AWS 上，是 AWS 的超级大客户。在上云后他们发现故障仍...阅读全文
HTTP状态码详解
意代码被执行[1]。没有此类漏洞的服务器，应当返回414状态码。 415 对于当前请求的方法和所请求的资源，请求中提交的实体并不是服务器中所支持的格式，因此请求被拒绝。 416 如果请求中包含了 Range 请求头，并且 Range 中指定的任何数据范围都与当前资源的可用范围不重合，同时请求中又没有定义 If-Range 请求头，那么服务器就应当返回416状态码。 假如 Range 使用的是字节范围，那么这种情况就是指请求指定的所有数据范围的首字节位置都超过了当前资源的长度。服务器也应当在返回416状态码的同时，包含一个 Content-Range 实体头，用以指明当前资源的长度。这个响应也被禁止使用 multipart/byteranges 作为其 Content-Type。 417 在请...阅读全文
理解 Linux 的虚拟内存
虚拟内存对进程的”欺骗”，每个进程都认为自己获取的内存是一块连续的地址。我们在编写应用程序时，就不用考虑大块地址的分配，总是认为系统有足够的大块内存即可。 安全：由于进程访问内存时，都要通过页表来寻址，操作系统在页表的各个项目上添加各种访问权限标识位，就可以实现内存的权限控制。 数据共享 通过虚拟内存更容易实现内存和数据的共享。 在进程加载系统库时，总是先分配一块内存，将磁盘中的库文件加载到这块内存中，在直接使用物理内存时，由于物理内存地址唯一，即使系统发现同一个库在系统内加载了两次，但每个进程指定的加载内存不一样，系统也无能为力。 而在使用虚拟内存时，系统只需要将进程的虚拟内存地址指向库文件所在的物理内存地址即可。如上文图中所示，进程 P1 和 P2 的 B 地址都指向了物理地址 C。 而...阅读全文
Ubuntu 17.04（Zesty Zapus）正式版发布
今天，2017 年 4 月 13 日，Canonical 官方发布了 Ubuntu 17.04（Zesty Zapus）的最终版。自从去年十月发布 Ubuntu 16.10（Yakkety Yak）起，它已经开发了将近 6 个月。 如果直到今天，你一直在你的电脑上使用 Ubuntu 16.10，那么是时候升级到 Ubuntu 17.04 了，它是一个强大的发行版，“内外兼修”。它由最新的稳定的 Linux 4.10 内核驱动，并使用最新的基于 X.org 服务器 1.19.3 和 Mesa 17.0.3 的图形 Stack 进行配备。 上面提到的三个新技术，是那些使用 AMD 的 Radeon 显卡来玩游戏的人们需要立刻升级到 Ubuntu 17.04（Zesty Zapus）的唯一原因...阅读全文
Debian 11冻结开始 Debian 12将减少对i386支持
唯一放弃的架构是基础 MIPS。 在 Debian 12 中将会提供更多 CPU 支持，但具体会在 Debian 11 正式发布之后做出决定。最近围绕着i386架构的支持状况以及如何处理前进的问题进行了讨论。发布团队认为，32位x86的支持会以某种形式继续下去，但目前还没有做出决定。 更多关于Debian发布团队目前状况的细节，请通过debian-devel-announce查看。...阅读全文
域名与商标： 如何防止域名被仲裁
被投诉人选择一人独任，则最终由一人独任审理，对另外一种情况我则没有查到具体的说法。 以上是我近期学习到的关于域名仲裁的相关内容，在这里分享给大家，由于个人理解的不同，描述不一定正常，在这里仅仅是作为一个介绍，欢迎朋友们一起讨论和指正。 关于域名与商标，虽然知识产权在社会中越来越被重视和保护，但还是希望各大公司、终端自身给予高度的重视，在这个互联网时代、眼球时代和信息爆炸时代，互联网经济必然会占到越来越大的比重，最终会与实体经济平起平座，各大依托于网络的公司能在短短几年内，超越苦心经营几十年的实体企业，这都是互联网经济的威力。而域名就是企业在网络上的虚似商标，是企业的网络脸面，一些大的公司无不在自身网站的域名上不惜成本，花空心思，说明一个契合自身特色的域名是多么的重要。 当然，在这里也奉劝各位...阅读全文
Debian GNU/Linux 9.3 Stretch 和8.10 Jessie正式发布
Debian项目今天宣布推出了Debian GNU/Linux 9.3 “Stretch”和Debian GNU/Linux 8.10 “Jessie”版本系列。 尽管Debian GNU/Linux 9.3是对操作系统最新稳定版本Stretch系列的第三次维护更新，Debian GNU/Linux 8.10代表了Jessie分支的第十个版本，两者都包含通过官方存储库发布的最新安全更新。 今天发布的消息称：“这一版本主要是对安全问题进行修复，并对严重问题进行了一些调整。安全建议已经单独发布。请注意，发行版并不构成Debian 9的新版本，只是更新了一些包含的软件包。” 新的ISO映像即将推出 Debian GNU/Linux 9.3 “Stretch”和Debian GNU/Linux...阅读全文
SK海力士宣布HBM2E内存：带宽最高460GB/s
SK海力士宣布，已经成功研发出新一代DRAM内存“HBM2E”，可视为HBM2的增强版，拥有业界最高的传输带宽，相比现在的HBM2提升了大约50％，同时容量也翻了一番。 SK海力士的HBM2E每个针脚传输速率为3.6Gbps，搭配1024-bit位宽的话可以提供超过460GB/s的超高带宽，无可比拟。 AMD Radeon VII显卡曾经率先实现1TB/s的显存带宽，但应用了4096-bit的位宽，如果换成HBM2E总带宽可以轻松超过1.8TB/s。 同时得益于TSV硅通孔技术，HBM2E内存可以最多垂直堆叠八颗16Gb芯片，单颗封装总容量因此可达16GB，是目前的两倍。 SK海力士表示，超高带宽的HBM2E可用于工业4.0、高端GPU显卡、超级计算机、机器学习、AI人工智能等各种尖端领域...阅读全文
如何更改 Linux 的 I/O 调度器
Linux 的 I/O 调度器是一个以块式 I/O 访问存储卷的进程，有时也叫磁盘调度器。Linux I/O 调度器的工作机制是控制块设备的请求队列：确定队列中哪些 I/O 的优先级更高以及何时下发 I/O 到块设备，以此来减少磁盘寻道时间，从而提高系统的吞吐量。 目前 Linux 上有如下几种 I/O 调度算法： noop - 通常用于内存存储的设备。 cfq - 完全公平调度器。进程平均使用IO带宽。 Deadline - 针对延迟的调度器，每一个 I/O，都有一个最晚执行时间。 Anticipatory - 启发式调度，类似 Deadline 算法，但是引入预测机制提高性能。 查看设备当前的 I/O 调度器： # cat /sys/block//queue/scheduler 假设磁...阅读全文
译：Kubernetes 最佳实践
览我之前翻译的Kubernetes 的自动伸缩你用对了吗？；HPA 除了可以基于 CPU 指标伸缩，还可以基于内存，或者自定义指标，可以浏览Kubernetes HPA 基于 Prometheus 自定义指标的可控弹性伸缩。使用资源请求和约束应设置资源请求和约束（可在容器中使用的最小和最大资源量）以避免容器在未分配所需资源的情况下启动，或集群用尽可用资源。在没有限制的情况下，Pod 可以使用比所需更多的资源，从而导致可用资源总量减少，这可能会导致集群上的其他应用程序出现问题。节点可能会崩溃，并且调度程序可能无法正确调度新的 pod。如果没有请求，无法为应用程序分配足够的资源，它可能会在尝试启动或执行异常时失败。资源请求和限制以毫核和兆字节为单位定义可用的 CPU 和内存。请注意，如果进程超出...阅读全文
GlusterFS 和 Ceph 比比看
GlusterFS 与 Ceph 哪个更快已经进行了几项测试，但迄今为止没有确切的结论。GlusterFS 存储算法更快，并且由于 GlusterFS 以砖组织存储的方式实现了更多的分层，这在某些场景下（特别是使用非优化 Ceph 的话）可能导致更快的速度。另一方面，Ceph 提供了足够的定制功能来使其与 GlusterFS 一样快——结果是两者的性能都不够令人信服一个比另一个更强。 然而，现实表明，Ceph 访问存储的不同方法使其成为更流行的技术。事实证明，更多的公司正在考虑 Ceph 技术而不是GlusterFS，而且 GlusterFS 仍然与 Red Hat 密切相关。例如，SUSE 还没有 GlusterFS 的商业实现，而 Ceph 已经被开源社区广泛采用，市场上有各种不同的产品。可以说...阅读全文
亚马逊12个月免费云服务
热线、在线聊天支持。作为全球云服务的龙头企业，亚马逊云计算拥有最广泛的全球云计算基础设施，全球节点丰富，为网站的快速稳定访问提供基础设施保障。配合亚马逊全球CDN节点，能满足不同国家独立站访问速度需求。1.什么是云服务器？云计算服务器(也称云服务器或云主机)是云计算服务系统中的主机产品，有效解决了传统物理主机中管理难度大、业务扩展性弱的缺陷。在实际应用中，云主机具有三个方面的灵活性:主机服务配置和业务规模可根据用户需求配置，可灵活调整。用户申请的主机服务可以快速供应和部署(实时在线开通)，实现集群内灵活可扩展的收费模式，用户无需支付押金，有多种支付模式供用户选择。2.云服务器适合什么样的用户？关注主机服务性价比的用户；需要快速实现分布式部署的用户；需要灵活扩展业务的用户；对系统高可用性和快速...阅读全文
Debian开发者商榷在会议上不允许进行问答环节
定完全禁止 Q&A 环节，以“让它成为对新演讲者更友好的第一个环境”。 这个想法在很大程度上被 Debian 开发者所拒绝，并且看起来不会有足够的动力应用于未来的 DebConf 大会上。虽然有一些开发者支持这个想法，包括一些演讲者 —— 其中英语不是他们的母语，因此希望不必处理问答，而其他人则建议这个政策也许可以由演讲者在每个演示文稿的基础上决定。 有关这想法的讨论，可点此查看(debconf-discuss)，Chris Lamb 在他的每月 Debian 项目负责人笔记中也提到了这件事。...阅读全文
Apollo 分布式配置中心详解
。 版本发布管理 所有的配置发布都有版本概念，从而可以方便地支持配置的回滚。 灰度发布 支持配置的灰度发布，比如点了发布后，只对部分应用实例生效，等观察一段时间没问题后再推给所有应用实例。 权限管理、发布审核、操作审计 应用和配置的管理都有完善的权限管理机制，对配置的管理还分为了编辑和发布两个环节，从而减少人为的错误。所有的操作都有审计日志，可以方便的追踪问题。 客户端配置信息监控 可以在界面上方便地看到配置在被哪些实例使用。 部署简单 配置中心作为基础服务，可用性要求非常高，这就要求 Apollo 对外部依赖尽可能地少，目前唯一的外部依赖是 MySQL，所以部署简单，只要安装好 Java 和 MySQL 就可以让 Apollo 跑起来。 Apollo 配置中心适用范围 既然 Apollo 定位...阅读全文
协议介绍之深入了解 gRPC
...) ... +---------------------------------------------------------------+ Length：也就是 Frame 的长度，默认最大长度是 16KB，如果要发送更大的 Frame，需要显式的设置 max frame size。 Type：Frame 的类型，譬如有 DATA，HEADERS，PRIORITY 等。 Flag 和 R：保留位，可以先不管。 Stream Identifier：标识所属的 stream，如果为 0，则表示这个 frame 属于整条连接。 Frame Payload：根据不同 Type 有不同的格式。 可以看到，Frame 的格式定义还是非常的简单，按照官方协议，可以非常方便的写一个出来。 Multiplexing HTTP/2 通过 stream 支持了连接的多路复用，提高了连接的利用率。Stream 有很多重要特性： 一条连接可以包含多个...阅读全文
Kafka 3.0新特性全面曝光，真香！
，非常的耗时且影响集群的可用性。元数据更新网络开销大整个元数据的更新操作也是以全量推的方式进行，网络的开销也会非常大。强耦合违背软件设计原则Zookeeper对于运维来说，维护Zookeeper也需要一定的开销，并且kafka强耦合与zk也并不好，还得时刻担心zk的宕机问题，违背软件设计的高内聚，低耦合的原则。网络分区复杂度高Zookeeper本身并不能兼顾到broker与broker之间通信的状态，这就会导致网络分区的复杂度成几何倍数增长。zk本身不适合做消息队列zookeeper不适合做消息队列，因为zookeeper有1M的消息大小限制 zookeeper的children太多会极大的影响性能znode太大也会影响性能 znode太大会导致重启zkserver耗时10-15分钟...阅读全文
开源简史基础：Linux基金会
Linux创始人Linus Torvalds和GKH（Greg Kroah-Hartman）等人拉赞助，让大神能够安心保证Linux的发展。几乎所有人都知道Linus Torvalds，但是GKH，即使你不知道他的名字，但是实际上在Linux相关的开发或运维的技术人员会发现他的身影无所不在。是的，GKH主要负责Linux的stable分支的维护，staging/USB driver core/debugfs/kref/kobject/sysfs kernel/TTY layer/linux-hotplug/Userspace I/O/udev等子系统或者项目中都可以看到他的存在。效力于Linux基金会之前，GKH主要在Novell 的 SUSE Labs工作，下图也是这位帅哥在2011年9月拍摄于纽...阅读全文
团队激励的八大方法，让你的团队成员更加高效地达成目标
感情，使团队内部形成一种和谐与欢乐的气氛。4、公平激励法一个人在产生公平感时，会心情舒畅，努力工作；而在产生不公平感时就会怨气冲天，大发牢骚，影响工作的积极性。公平激励法是强化工作积极性的重要手段，所以在团队管理中，对员工分配、晋级、奖励、使用等方面要力求做到公平、合理。5、竞赛激励法竞赛激励法就是指团队领导者通过经常性的检查评比和多种形式的竞赛活动，来激发下属的上进心和竞争意识，促使其努力使自己的工作走在他人前面的方法。6、褒奖激励法表扬和奖励是对良好思想和行为的一种积极肯定，它包括物质的，也包括精神的。表扬和奖励能够引起人们愉快的感受，这是因为渴望得到他人或社会的赞赏，是一种心理需要，已经成为人们的人格特征之一。7、榜样激励法榜样激励法就是指领导者通过树立生动、鲜明、具体、形象的学习榜样...阅读全文
故意泼脏水？AMD官方回应Zen安全漏洞
来自以色列的安全机构CTS-Labs突然曝出猛料，声称AMD Zen架构处理器存在四组12个高位安全漏洞，涉及Ryzen、EPYC全线产品。AMD第一时间对此发表了一份官方声明。 “我们刚刚收到一家名为CTS-Labs的公司的报告，声称我们的特定处理器产品可能存在安全漏洞。我们正在积极进行调查和分析。这家公司AMD从未听闻，而且不同寻常的是，这家安全机构直接将自己的发现公布给了媒体，却没有给AMD合理的时间调查和解决问题。安全是AMD的首要职责，我们持续努力确保我们客户的安全，应对新的安全威胁。如有后续进展我们会第一时间公告。” 可以看出，由于事发突然，特别是这些漏洞发现并没有按照行业惯例提前通知并给予90天的静默期，AMD被打了个措手不及，目前还无法完全证实这些漏洞的真伪。 即便是真的存...阅读全文
Postgres 10 开发者新特性
目前非常流行的RDBMS PostgresSQL已经在几周前发布了它的第10个版本。由于Postgres的可靠性、节约成本、成熟，当然还有它的开源，已经21岁的Postgres在开发者之中仍旧非常流行。 Postgres 10带来了一些新特性，其中一些特性另开发者感到十分兴奋。10Clouds在博客中详细介绍了其中的一些特性。通过消除主表（master table）中触发器（trigger）的需求，本地分区（native partitioning）现在变得更简单了。这意味着创建分区表将变得更简单，并且从开发者的角度来看，现在从分区数据表中进行查询和插入与在非分区的数据表进行这些操作是完全一致的。 多列统计（multicolumn statistics）是Postgres 10的另一项改进...阅读全文
CCPA vs. GDPR：欧美这两部个人数据保护法有什么差异？
据《欧盟一般个人数据保护条例》（GDPR）第4条第1款的规定，“个人数据”指与已经识别（identified）或可被识别（identifiable）的自然人（“数据主体”）相关的任何信息。 其中，“可被识别的自然人”，指通过姓名、识别号码、位置数据、在线身份识别码等标识符，或通过针对该自然人的身体、生理、遗传、心理、经济、文化或社会身份等特定相关的一个或多个要素，能够直接或间接地被识别出的个人[1]。 判断自然人是否可被识别，应考虑数据控制者或另外一人可能合理使用到的所有方式（all the means reasonably likely to be used）。判断何种方式为“可能合理使用到”，应考虑所有客观因素：例如当前现有的技术、技术的发展、识别所需的成本和时间等[2]。 由于实践中交...阅读全文
网易云音乐Linux版v1.1发布 支持 Debian Stretch
时隔近一年半的时间，网易云音乐 Linux 版本终于迎来了更新，本次更新除了迁移到QCEF框架，对GNOME、KDE桌面环境支持更好，支持最新 Debian 9、Ubuntu 17.10版本（仅64位），还优化和修复各个社区用户反馈的问题。 具体的细节优化如下： 迁移全新的QCEF框架； 使用了全新的播放器后端； 支持打开更多格式的本地文件； 优化播放时内存占用资源问题； 优化扫描本地音乐目录，支持读取下载任务的状态； 优化第三方字体的支持； 优化淡入淡出效果和在线播放； 优化更好的支持Wayland环境； 移除了沙盒机制； 修复部分本地音乐播放存在卡顿的问题； 修复Tooltip位置偏移的问题； 修复在Qt 5.9中界面乱码的问题； 修复GPU加速选项无效的问题； 修复无法捕获本地目录变...阅读全文
使用 nvme-cli 工具来了解你的 NVMe 驱动器
Management T2 Trans Count : 0 Thermal Management T1 Total Time : 0 Thermal Management T2 Total Time : 0这为你提供了硬盘的当前温度、到目前为止的使用时间、不安全的关机次数等等。格式化一个 NVMe 驱动器你可以用 nvme-cli 格式化一个 NVMe 驱动器，但要注意。这将删除驱动器上的所有数据！如果你的硬盘上有重要的数据，你必须在这样做之前将其备份，否则你将会丢失数据。子命令是 format：$ sudo nvme format /dev/nvme0nX（为了安全起见，我用 X 替换了驱动器的实际位置，以防止复制粘贴的错误。将 X 改为 1 或 nvme list 结果中列出的实际位置。）安全地擦除...阅读全文
176Gbps：新一代Wi-Fi
802.11ac是当今最流行的Wi-Fi无线标准，不过，为了提高速度、吞吐量、降低功耗，IEEE 802.11ax/ad/ay先后应运而生。其中802.11ax是对ac/n的自然演进，同样工作在2.4/5GHz频段上，而ad/ay则是作为辅助技术，由于工作频段极高，没有干扰，所以速率可以非常高。比如基于60GHz的802.11ad可以达到8Gbps的数据传输率，如今TP-Link Talon AD7200路由、戴尔E74450/7470笔记本、Windows 10创作者更新都将支持。 据悉，目前的最新进展是，第一个修订版802.11ay（verison 0.2）标准已经认证完毕，目标速率高达176Gbps，也就是22GB/s，理论上说蓝光电影可以1秒下完。不过，你的电脑硬盘肯定是跟不上，即...阅读全文
阔别多年 Slax 9.2.1 发布：基于 Debian “Stretch”
，Slax 9.2.1 的 64 位 live ISO 镜像只有 208MB。 Slax 是奉行最小主义的面向桌面的自启动运行光盘，它基于 Debian 的稳定分支。它引导用户至一份简洁的使用 Fluxbox 的窗口管理器，该桌面提供一小套应用程序，包括 Chromium 网页浏览器、文字编辑器、计算器。 在 9.x 版本之前，Slax 是基于 Slackware 的自启动运行光盘，其特色是 KDE 桌面及一大套面向日常使用的预装软件，以及帮助系统管理员进行修复的有用工具。 Slax Linux 下载地址：http://www.slax.org/en/...阅读全文
服务器文件上传下载利器 trzsz + iTerm2 配置指南
iTerm2 -> Secure Keyboard Entry。默认保存路径如果你想自动下载文件到指定目录，而不是每次都弹窗询问。例如，自动下载文件到 /Users/xxxxx/Downloads使用文本进度条，将 /usr/local/bin/trzsz-iterm2 -p text \1 改为：/usr/local/bin/trzsz-iterm2 -p text -d '/Users/xxxxx/Downloads' \1 使用 zenity 进度条，将 /usr/local/bin/trzsz-iterm2 \1 改为：/usr/local/bin/trzsz-iterm2 -p zenity -d '/Users/xxxxx/Downloads' \1 注意 /usr/local/bin...阅读全文
nginx 1.18.0 稳定版发布
nginx 1.18.0 已发布，这是继 1.16 系列之后的最新稳定版本。 1.18.0 加入了 1.17.x mainline 分支中的新功能和 bug 修复，包括 limit_req 和 limit_conn 中的 dry run 模式，limit_rate, limit_rate_after 和 grpc_pass 指令中对变量的支持，以及支持 auth_delay 指令等。 auth_delay 指令位于 ngx_http_core_module 模块中，用法如下： 语法：auth_delay time; 默认值：auth_delay 0s; 上下文：http, server, location 通过 401 响应状态码来延迟处理未经授权的请求，以防止因密码、子请求结果或 JWT...阅读全文
Golang 操作 Kafka 样例
务器都是一个代理(Broker). 消费者可以订阅一个或多个话题，并从Broker拉数据，从而消费这些已发布的消息。 5.Partition(分区)：Topic物理上的分组，一个topic可以分为多个partition，每个partition是一个有序的队列。partition中的每条消息都会被分配一个有序的id（offset） Message：消息，是通信的基本单位，每个producer可以向一个topic（主题）发布一些消息。 复制代码 1.1.5. 消息 消息由一个固定大小的报头和可变长度但不透明的字节阵列负载。报头包含格式版本和CRC32效验和以检测损坏或截断 1.1.6. 消息格式 1. 4 byte CRC32 of the message 2. 1 byte "magic...阅读全文
kubectl 创建 Pod 背后到底发生了什么？—探寻 Kubectl 创建 Pod 的原理
-apiserver 的角度来看，它已经验证了我们的身份并且赋予了相应的权限允许我们继续，但对于 Kubernetes 而言，其他组件对于应不应该允许发生的事情还是很有意见的。所以这个请求还需要通过 Admission Controller 所控制的一个 准入控制链 的层层考验，官方标准的 “关卡” 有近十个之多，而且还能自定义扩展！ 虽然授权的重点是回答用户是否有权限，但准入控制器会拦截请求以确保它符合集群的更广泛的期望和规则。它们是资源对象保存到 etcd 之前的最后一个堡垒，封装了一系列额外的检查以确保操作不会产生意外或负面结果。不同于授权和认证只关心请求的用户和操作，准入控制还处理请求的内容，并且仅对创建、更新、删除或连接（如代理）等有效，而对读操作无效。 Note 准入控制器的工作方式与授权者和验证...阅读全文
Linux Mint 19.1 “Tessa” 正式发布
Linux Mint 19.1 开发代号“Tessa”终于正式发布了 。新版本仍然基于 Ubuntu 18.04 LTS，并将支持到 2023 年。外观上最大的改进是加入了 Cinnamon 4.0 桌面版，并保留了切换到现代桌面布局或传统的选项。Linux Mint 19.1 的最终发布仅在发布测试版之后两周。 其他一些不错的功能包括可查看主线内核的支持状态，这可以让您知道是否应该使用当前内核或是否应该升级它。此外，新版本还有一个按钮允许您快速删除旧内核，以便您可以清除启动分区中不需要的部分。 Mint 19.1 released 正如您对任何新操作系统的期望一样，Mint 19.1 附带了一系列来自不同摄影师的全新壁纸，可让您精心设置。此外，如果你不喜欢 Mint 上的默认配色方案...阅读全文
Go 1.12 正式版发布，初步支持 TLS 1.3
在 trace 工具加入了 Mutator Utilization 图的支持，它可以方便发现 GC 性能受限的情况；不再支持 go tool vet；go tool tour 不再包含在主二进制发行版中，需要手动安装；Go 1.12 是最后一个支持 binary-only packages 的版本；……Runtime 方面，Go 1.12：提升了大量堆（Heap）活跃状态情况下的扫除（Sweeping）性能，这减少了垃圾回收之后的分配延迟，可以更好地将内存释放回操作系统；Runtime 的 timer 和 deadline 代码随着 CPU 数目的增加，会有更好的表现。这提升了网络连接最后期限（deadline）相关操作的性能；通过大型堆分配的相关修复，提升了内存配置文件的精确性；……平台相...阅读全文
AMD 7nm/12nm线程撕裂者CPU曝光：取代Intel？
Zen 3将覆盖四大平台，最高端的HEDT也就是ThreadRipper（线程撕裂者），AM4接口的CPU代号“Vermeer（弗美尔）”、APU代号“Renoir（雷诺阿）”。同时还有一个更入门、主打性价的移动APU平台，代号“Dali(达利)”，它是首次出现，依然采用了西方艺术家的命名。 定位方面，HEDT号称要夺回x86市场皇冠上的明珠，取得领导权。 不过，随后一张跟进的ThreadRipper路线图并没有确认2020年的Zen 3会延续这样的家族命名（接口依旧是TR4），仅仅覆盖到2019年。 其中2018年的TR升级为12nm工艺、主频和加速性能更好，2019年代号“Catle Peak”，号称会比Core i9还收市场欢迎（稳上4GHz+、堆32核？）。...阅读全文
Ubuntu Server自18.04 LTS开始不再提供32位镜像
2016年6月份Canonical公司在社区公布的草案，明确自Ubuntu 16.10开始逐步放弃32位支持，并在Ubuntu 18.10中彻底移除对32位架构的支持。今年9月，团队宣布自Ubuntu 17.10开始桌面版本不再提供32位安装镜像；今天工程师Josh Powers再次宣布Ubuntu Server版本将从18.04 LTS不再提供32位（i386）每日ISO镜像。 继Ubuntu桌面版本之后，Ubuntu 服务器版本也将从18.04 LTS（Bionic Beaver）开始不再提供32位版本镜像。 Josh Powers在邮件列表中写道：“在Ubuntu-Server邮件列表中公布之后如果没有人提出异议或者问题，那么自18.04开始将移除Ubuntu Server i386...阅读全文
Python3: 二分法查找的两种实现方法
二分法查找是一种基础的、简单而高效的算法，又称为折半查找。顾名思义，就是将待查表一分为二，从而减少了查找次数，提高了效率。但缺点就是待查表必须为顺序表，并且待查表在查找时不宜做增删操作。 其最优时间复杂度为O(1)，最坏时间复杂度为O(logn)。代码样例： ``` # coding:utf-8 方法一：递归法 def binarySearch_01(listx, item): """Be of recursion""" length = len(listx) if length > 0: #定义中间值下标： split = length // 2 if listx[split] == item...阅读全文
最新评论
