如何显示长时间运行命令的预期完成时间？
当一个命令长时间运行时，如何预估命令的完成时间？ 借助 pv 命令，可以展示进度条，以及预估命令的完成时间。 参考 mysql 的备份过程： mysqldump --login-path=mypath testdb testtable | pv --progress --size 200m -t -e -r -a > db-backup.sql ...阅读全文
InfraPub 为您找到相关结果 251 个
在TKE上使用Kubecost进行成本管理
## 概述 Kubernetes 作为 IaaS 和 PaaS 的中间层，当前对于资源的计费依托于 IaaS 层的资源计费。一个 Kubernetes 的集群，按照其购买的节点实例 CVM 计费。而用户则使用的是 Pod，在实际场景中，通常需要面临这些问题，一个 Pod 如何承担成本、如何评估集群的成本、如何进行成本预测和优化建议。针对上述问题，我们推荐用户使用 Kubecost 进行解决。 Kubecost 是一款成本分析工具，可以为集群成本提供洞察、分析、推荐和建议。作为您优化集群成本的财务分析师，Kubecost 可以为您提供全面的成本分析报告。本文将介绍 Kubecost 使用场景、优化建议、详细的功能说明以及如何安装使用。 ## 使用场景 ### 评估每种资源消耗的成本 成本支出...阅读全文
谷歌多项服务大规模宕机：涵盖YouTube、Gmail等
本周日，谷歌在全球范围内遭遇了大规模中断，包括Gmail、YouTube和Google Drive在内基于谷歌云架构服务的诸多谷歌服务均受到影响。本次宕机北京时间6月3日凌晨2点58分开始，用户访问谷歌服务出现各种错误提醒，并且用户无法访问电子邮件、上传YouTube视频等。 根据谷歌官方状态页面显示，包括Gmail, Calendar, Drive, Docs, Sheets, Slides, Hangouts, Meet, Chat和Voice在内的谷歌服务均无法使用。那些依赖于谷歌云架构的第三方服务同时也受到影响，目前谷歌官方并没有完全恢复的预估时间，也没有公布关于本次宕机事件的根本原因。 苹果的iCloud服务也受到轻微影响，苹果报告称有不到1%的用户出现了响应时间低于正常值的情况...阅读全文
Go 语言的大版本更新：Go 2.0 安排上了
废话不多说，先来看看 Go 2.0 有哪些值得关注的内容： 最大程度保持对 1.x 的兼容，以避免分裂 Go 语言生态系统 采用增量升级的方式，而非单独发布重大更新版本 实施新的提案评估流程，以评估尚未解决且被标记为提案的 issue 将会在 Go 1.13 版本中选择 Go 2 部分的提案 背景 早在2017年的 GopherCon 大会上，Russ Cox（Go 核心开发团队的技术 leader）就已经正式开始思考 Go 的下一个大版本（相关文章）。当时官方非正式地将它称为 Go 2，但我们知道，所谓的 Go 2.0 并非一个单独的重大更新版本，而是通过“增量更新(incremental)”的方式以逐渐抵达 "Go 2.0"。所以本文对这个未来版本的称号 —— 也暂且用 Go 2 来描...阅读全文
UNTANGLE NG FIREWALL 13.0.0，基于 DEBIAN 的网关系统
可以创建策略和规则来管理行为。类似于警报规则，触发器规则评估所有事件，并且可以根据所应用的规则配置对实体进行标记或不标记。 一旦配置了标签和触发器，他们就可以主动管理主机，设备和用户，而无需网络管理员的干预。 更多信息可以在公司的发布公告和更新日志中找到。 下载地址 (MD5)： untangle_1300_x64.iso (550MB, pkglist). 在线 Demo 站点： http://demo.untangle.com/admin/index.do...阅读全文
Memcache UDP反射放大攻击技术分析
本篇技术blog，由360信息安全部0kee Team、360网络安全研究院、360-CERT共同发布。Memcache UDP 反射放大攻击（以下简称 Memcache DRDoS）在最近的一周里吸引了安全社区的较多注意。以下介绍我们对该类型攻击观察到的情况。 在PoC 2017 会议上的原始报告 Memcache DRDoS，由360信息安全部0kee Team在2017-06 附近首先发现，并于 2017-11 在 PoC 2017 会议上做了公开报告。会议报告在 这里，其中详细介绍了攻击的原理和潜在危害。 在这份文档中，作者指出这种攻击的特点： memcache 放大倍数超高，至少可以超过50k； memcache 服务器（案例中的反射点）数量较多，2017-11时估算全球约有...阅读全文
Debian 社区陷入尴尬 或群龙无首
也预想了这种情况，在没有项目负责人的情况下，技术委员会主席和项目秘书有权做出各种决定，前提是他们能够达成一致。信中对这种情况表示乐观：“由于 Debian 开发人员向来以‘非争论群体’著称，所以达成一致应该不成问题。”但很明显这种不确定因素过高的方案不是一个良策。 联系一下此前 Debian 包维护者 Michael 对社区的不满，他认为 Debian 整个开发评估流程都非常迟缓，比如补丁的评估没有截止日期，有时候他会收到通知说几年前递交的补丁现在合并了；赋予维护者的个人自由度太高，一些维护者可以出于个人喜好拒绝合作等，这些都对 Debian 的发展产生不好的影响。 就像 Michael，许多人都认为社区内部给予开发者的自由度过高，并且带来不好的影响。按照前边对于 Debian 领导人实权的...阅读全文
慕尼黑放弃Linux 2020年或将全面迁入Windows
门的必备软件都必须在 Windows 上运行，估计 800 个程序中就有一半不支持 Linux。虽然过去 15 年一直在努力独立于微软，还花费大量金额寻求解决方案，但还是以失败告终。 2020 年全面迁移投票将于 11 月 23 号举行，参与了委员会投票的人都会再次参加，估计投票结果与委员会投票结果一致。【编译自：The Register】...阅读全文
常见开发/测试/生产环境的缩写 DEV、SIT、UAT、PET、SIM、PRD
常用开发环境、生产环境简写的含义及用途 DEV、SIT、UAT、PET、SIM、STG、PRD 缩写介绍 按开发、测试、上线的时间线排序： - DEV Development 研发环境 - SIT System Integrate Test 系统集成测试环境（内测） - UAT User Acceptance Test 用户验收测试环境 - PET Performance Evaluation Test 性能评估测试环境（压测） - STG Staging 更接近生产的功能验收、测试环境 - SIM Simulation 高仿真环境 - PRD Production 正式/生产环境...阅读全文
Debian目前面临的问题：钱足够但很缺人！
眉之急。 当前很多人承担了过多的责任。 最大的问题在于参与者，而非具体的过程。Carter 认为项目本身非常具有挑战。“问题永无止境，潜藏于项目的方方面面。计算机科学领域的任何问题，都同样存在于我们的工作中”。这将吸引那些勇于面对挑战的志愿开发人员参与其中，“Debian 是一个值得投入毕生精力关注的项目”。 “在不增加现有开发人员工作强度前提下，我估算达成我们期望项目目标所需增加的志愿开发人员规模，大约是目前人员规模的三倍。当前的项目人员承担了过多的责任，因为大家感觉到每个人都是不可替代的。” 一种考虑是增加人员的多样性。Carter 本人来自南非，更倾向于增加非洲籍和女性代码开发人员。他还提议增加小规模会议、用户组活动等本地 Debian 活动，进而“降低进入项目的门槛”。 Carter...阅读全文
Debian 包维护者不满 Debian 开发流程 宣布退出
机系统。 但与此同时，Stapelberg 也逐渐发现并认识到了 Debian 在许多方面的不足，他发现 Debian 整个开发评估流程都非常迟钝。举例来说，补丁的评估没有截止日期，有时候他会收到通知说几年前递交的补丁现在合并了。Debian 的一些维护者出于个人喜好拒绝合作，维护者给予的个人自由度太高对 Debian 构成了严重影响。Debian bug 跟踪器 debbugs 源自 1994 年，只有 Debian 和 GNU 项目使用。 Stapelberg 抱怨了 Debian 糟糕的开发流程，对此感到十分不满，还表示对 Debian 开发流程的沮丧程度最终超过了其忍受的阈值。为此，他撰写了这篇文章，并希望自己的文章能激励 Debian 做出改变，继而改进开发者参与维护的体验。...阅读全文
Intel 第 11 代核显型号曝光：13个版本 最多64单元
耗的 Lakefield，以及新近发现的低功耗 Elkhart Lake。 Intel 新驱动中就赫然列出了 Ice Lake(ICL)、Lakefield(LKF) 所搭载的第 11 代核显的型号乃至是执行单元核心规格，分别有 9 个和 4 个不同版本，总计达到了 13 个，不止型号而且规格都有点凌乱。 先来看 Ice Lake 家族的，最顶级核显型号是 Iris Plus 950，64 个完整单元 ，应该会用于高端 i9、i7 序列；接下来是 Irus Plus 940，64 单元和 48 单元两种版本 ，估计前者频率会降低一些；Iris Plus 930 更乱了，分为 64 单元、32 单元两种版本 ，不知道是出于什么安排。 UHD 920、UHD 910 自然都是主流型号，都是 32...阅读全文
Linux kernel 5.6 正式版发布
Linus Torvalds 在内核邮件列表上宣布释出 Linux 5.6。Torvalds 称，他没有看到内核开发受到新冠疫情影响的迹象，大部分人可能早就习惯了在家远程工作。 他估计 Linux 5.7 的发布不太会有变动，但有人错过合并窗口还是可能的，毕竟合并窗口没有你或你周围的人的健康更重要。 Linux 5.6 的特性包括： Arm EOPD 支持，时间命名空间，BPF 调度器和批映射操作，openat2() 系统调用，WireGuard VPN 实现，流队列 PIE 包调度器，2038 年问题接近解决，pidfd_getfd()系统调用，ZoneFS 文件系统，BPF TCP 拥堵控制算法实现，移除 /dev/random blocking pool 等等。 具体可阅读...阅读全文
Linux下多线程程序为什么消耗大量虚拟内存
最近游戏已上线运营，进行服务器内存优化，发现一个非常奇妙的问题，我们的认证服务器（AuthServer）负责跟第三方渠道SDK打交道（登陆和充值），由于采用了curl阻塞的方式，所以这里开了128个线程，奇怪的是每次刚启动的时候占用的虚拟内存在2.3G，然后每次处理消息就增加64M，增加到4.4G就不再增加了，由于我们采用预分配的方式，在线程内部根本没有大块分内存，那么这些内存到底是从哪来的呢？让人百思不得其解。 探索 一开始首先排除掉内存泄露，不可能每次都泄露64M内存这么巧合，为了证明我的观点，首先，我使用了valgrind。 valgrind --leak-check=full --track-fds=yes --log-file=./AuthServer.vlog & 然后启动测试...阅读全文
互联网协议正在发生变化
。 现在，核心互联网协议的重要改变已经开始了。虽然它们意图与互联网大部分兼容（因为，如果不兼容的话，它们不会被采纳），但是它们可能会破坏那些在协议中没有规定的地方，或者根本就假设那些地方不存在变化。 为什么我们需要去改变互联网 有大量的因素推动这些变化。 首先，核心互联网协议的局限性越来越明显，尤其是考虑到性能的时候。由于在应用和传输协议方面的结构性问题，网络没有得到高效使用，导致终端用户认为性能不能满足要求（特别是，网络延迟）。 这就意味着人们有强烈的动机来演进或者替换这些协议，因为有 大量的经验表明，即便是很小的性能改善也会产生影响。 其次，演进互联网协议的能力 —— 无论在任何层面上 —— 会随着时间的推移变得更加困难，这主要是因为上面所讨论的对网络的非预期使用。例如，尝试去压缩响应的...阅读全文
广告合作
本站为了长期发展的需要，使用了部分展示类的广告，在尽量不影响读者阅读的位置展示。这部分广告虽然收益微薄，但提供了一个可以研究广告平台的小窗口，也是件有意思的事情。我们后续会根据运营情况，决定是否移除广告。 本站的广告收入会补贴维持站点运行所需要的服务器、域名、带宽、CDN等费用。同时我们也接受广告投放、内容合作等合作方式。广告形式包括网站展示类广告、微博推广和 QQ群推广等方式，广告内容的主体需与 Debian中国 站点一致，为IT相关的话题，以不引起读者反感为准。 开源项目及技术相关的公益性项目，可联系我们评估，通过后会得到 Debian中国 的免费广告投放支持。 您可以通过电子邮件 ads@debian.cn 、或者通过QQ与站点管理人员联系，或者直接通过这里联系我们。 ...阅读全文
Kotlin 一统天下？Kotlin/Native 支持 iOS 和 Web 开发
。 关于 Kotlin/Native 说了这么多，Kotlin/Native 到底是什么？Kotlin/Native 能将 Kotlin 编译成机器码，目前还处于技术预览版阶段，离商用估计还需要至少一年的时间。 Kotlin/Native 不是 Jni 的概念，它不仅仅是要与底层代码比如 C、C++ 交互，而且还要绕过 JVM 直接编译成机器码供系统运行。这说明了什么？Kotlin 准备扔掉 Java 这根拐杖了。 第一次看到 Native 这个名字或许会很自然地想到 Jni，Kotlin 跑在 JVM 上面，使用 Jni 与底层代码交互。不过详细深入研究后可以发现，Kotlin 开发团队的野心不可小觑，Java 诞生这么多年，也没有涉足过编译成除 Java 虚拟机字节码以外的字节码的事情...阅读全文
GitLab的Python依赖扫描Docker镜像将换用Debian
GitLab 12.9 将弃用用于 Python 依赖扫描的 Alpine Linux 镜像，改用 Debian 作为基础镜像。 GitLab 官方表示，在评估了改变基础镜像 Alpine 以更好地支持 Python 的 issue ＃13694 之后，决定切换到 Debian，这样可以使扫描工具支持更多的 Python 项目。 具体来说，从今年 3 月 22 日发布的 GitLab 12.9 开始，开发者将不再可获得用于 Python 依赖扫描的基于 Alpine 的镜像，届时即使运行的是旧版本，也会受到影响。 由于弃用 Alpine，如果使用 Alpine 特定的命令，如 apk add xyz，则可能需要在以下情况进行修改： 在扫描之前（仅当禁用 docker-in-docker 时...阅读全文
开源简史基础：Linux基金会
用也可以由Linux基金会提供。 Linux基金会项目 以前被称为“合作项目”的Linux基金会项目是独立资助的项目，很多大名鼎鼎的项目都是Linux基金会的项目，比如为了促进容器化发展而创建的OCI（Open Container Initiative）和CNCF（Cloud Native Computing Foundation）等。全世界超过500家的公司以及数以千计的软件开发人员投入其中，这就是开源世界的力量，截止到2015年，Linux基金会项目的源码总行数为115,013,302行，项目估值高达50亿美元，而在2017年9月，这一估值上升至156亿美元。 当然除了这些，Linux基金会还可以进行培训以及认证等多种活动，从而更好地推进了Linux的开源事业的发展。 参考文章...阅读全文
开源社区纠纷不断：20 年的 Debian 开发者被排挤出项目
将逐渐减少参与 Debian 的维护和相关活动，并解释这样做的原因。Stapelberg 表示他在 Debian 上投入了十年以上的时间，但在此过程中，Stapelberg 也逐渐发现并认识到了 Debian 在许多方面的不足。他发现 Debian 整个开发评估流程都非常迟钝。举例来说，补丁的评估没有截至日期，有时候他会收到通知说几年前递交的补丁现在合并了。而且 Debian 的一些维护者出于个人喜好拒绝合作，维护者给予的个人自由度太高对 Debian 构成了严重影响。Debian bug 跟踪器 debbugs 源自 1994 年，只有 Debian 和 GNU 项目使用。Stapelberg 抱怨了 Debian 糟糕的开发流程，对此感到十分不满，为此，他撰写了长文，并希望自己的文章能激...阅读全文
bmon：一个强大的网络带宽监视和调试工具
bmon 是类 Unix 系统中一个基于文本，简单但非常强大的 网络监视和调试工具，它能抓取网络相关统计信息并把它们以用户友好的格式展现出来。它是一个可靠高效的带宽监视和网速估测工具。 它能使用各种输入模块读取输入，并以各种输出模式显示输出，包括交互式文本用户界面和用于脚本编写的可编程文本输出。 在 Linux 上安装 bmon 带宽监视工具 几乎所有 Linux 发行版的默认仓库中都有 bmon 软件包，可以从默认包管理器中轻松安装，但可用的版本可能比较旧。 $ sudo yum install bmon [On RHEL/CentOS/Fedora] $ sudo dnf install bmon [On Fedora 22+] $ sudo apt-get install bmon...阅读全文
下一代时间同步服务 Chrony 详解
定期轮询，因此具备间歇性网络连接的系统仍然可以快速同步时钟。 安装 Chrony 从 Centos 7.x 开始的最小发行版中都已经预装并开启了 Chrony。如果你的系统上没有安装 Chrony，你也可以使用下面的命令轻松安装它。 $ apt -y install chrony # [On Debian/Ubuntu] $ yum -y install chrony # [On CentOS/RHEL] 安装完成后，你可以使用以下命令来检查 chronyd 的状态。 $ systemctl status chronyd # [On SystemD] $ /etc/init.d/chronyd status # [On Init] 如果要在开机引导时自动启用 Chrony 的守护程序，你可以...阅读全文
7大维度看国外企业为啥选择gRPC打造高性能微服务
。 仪表板的发布在进行中，工程团队将Bugsnag的后端功能分解成称之为管道（pipeline）的微服务体系。将管道扩展到支持发布，意味着增加新的服务，并修改现有服务，也可预见到许多新的服务器和客户端的交互。为了处理上述架构的变化，需要采用一致性的方式来设计，实施和集成企业的服务。Bugsnag是一家多语言的公司，服务是用Java，Ruby，Go和Node.js等多语言编写，因此企业需要一种与平台无关的方法。 本文将介绍为什么我们最终选择了gRPC作为Pipeline的默认通信框架。 达到REST API设计的极限 现有系统传统上使用具有JSON有效载荷的REST API进行同步通信。这种选择是基于占压倒性比例的成熟度、熟悉度和工具的可用性做出的，但是随着跨洲际工程团队的增长，企业需要设计一致的...阅读全文
大起底：揭开亚马逊云计算丰厚利润的秘密 - 电子商务
马逊收取的外迁费可能是带宽成本的80倍之多。普林斯表示，亚马逊网络带宽和数据迁移的利润空间超过其他所有的亚马逊产品，他认为数据外迁服务的毛利率高达99%。不过苏里的评估比较低，他表示，亚马逊数据外迁服务毛利率如果超过80%，他不会感到吃惊。云计算市场如今，亚马逊云计算的长期大客户不仅仅购买EC2和S3来构建业务，他们还通过AWS的市场平台来购买第三方公司的软件，这对亚马逊也有利。五月份，瑞银分析师预测，亚马逊对第三方软件交易收取的佣金比例（或陈列费）大约为5%。而在七月份，微软也将市场平台的佣金比例从20%下调为3%。相比之下，移动软件商店收取的佣金要高得多。Google的Play应用商店佣金比例高达三成，外媒八月份引述法庭文件报道称，Google应用商店在2019年的运营利润率高达62...阅读全文
Linux Mint 20 与 Debian 版本 LMDE 4 新特性
％（正常模式）或 200％（HiDPI 模式），并且对所有显示器而言都是相同的。未来每个屏幕的缩放比将有所不同，用户可以将其设置为 100％ 到 200％ 之间的值。 绽放比模式可以解决不少显示问题，比如因为 HiDPI 带来的清晰度问题和多显示器支持等。通过能够分别为每个显示器设置缩放比例，希望获得更高的像素密度，并允许 HiDPI 和非 HiDPI 显示器之间更好地兼容。 目前正在 Alpha 测试 Cinnamon 的这种比例缩放，并评估其在各种 GPU 上的兼容性以及优缺点。 关于 Linux Mint 20 与 LMDE 4 的更多信息，查看 https://blog.linuxmint.com/?p=3858...阅读全文
Raspberry Pi 4 发布 8G 内存版本
万台，对主板进行了几次较小的修订，而在软件方面，也带来了不少改进，包括减少设备的空闲和负载功耗、通过了 OpenGL ES 3.1 认证、支持 Vulkan 驱动等。此次 8GB 版本与 64 位的推出，估计又将带来一个销售热潮。...阅读全文
Go 语言发布 2.x 计划，或将不完全向后兼容
论 Go 2 了。 开发团队表示，Go 语言如今的目标与 2007 年相同，就是希望使程序员更有效地管理两种规模：生产规模和开发规模，其中又主要针对的是与许多其他服务器交互的并发系统，和许多工程师协调的大型代码库。Go 2 的目标就是解决 Go 1 在规模化方面做的还不好的地方。 据 Russ 估算，目前全球的 Go 开发者至少有 50 万，这意味着有数百万个 Go 源文件和至少十亿行 Go 代码。那些程序员和源代码代表了 Go 的成功，但同时也是对 Go 2 的主要约束。只有在回报非常巨大时，才能让开发者改变原有的旧习惯，学习新用法。Go 2 必须修正 Go 1 的问题，带动所有的 Go 开发者， 也就必须带上所有现有的 Go 源代码，不能让生态系统分裂。 如果把 Go 2 要增加的特性分...阅读全文
Vultr日本节点VPS主机使用小结
Vultr是一家性价比非常高的VPS提供商，多达15个数据库中心可以选择，并且全部使用SSD硬盘、KVM架构。网上有很多与DigitalOcean、Linode对比的文章，这篇文章主要是分享一下Vultr日本节点的使用感受。 之前看到很多文章对洛杉矶和日本节点进行了测试，不过最近从个人测试来看，电信到Vultr洛杉矶节点目前已经绕路一大圈，丢包也是惨不忍睹，估计是电信又在调整的原因，不知后期是否能恢复正常。 Vultr日本节点以前是限制200G流量，不过现在流量已经增加至400G/月，如果只是安心放网站是完全足够的，最便宜的配置只需要5$/月，1CPU、768MB内存、15GB存储、1000M共享带宽，性价比是非常不错的。 性价比虽不错,那对国内环境来说网络情况又如何，下面是不同运营商的...阅读全文
案例：Redis命令不当 引起数据库雪崩 造成数百万损失
） 升级数据库配置 迁移非核心业务到新的RDS实例中去 第二次宕机 由于上一次的宕机原因未找到，所以此次的宕机是可以预见的。 20180919，还是一样的”配方”，还是原来的”味道”。同一个RDS，CPU飙升至100%，接下来就是拒绝服务，宕机。当然，有了第一次的经验，直接主从切换，在几十秒左右就恢复了所有业务，但还是严重影响了公司的业务和形象 原因分析 恢复业务后，公司紧急召开了紧急事故研究会议，当然，我的级别是参与不了的。公司的高管，高层技术架构、DBA、各个项目的主负责人一起进行了会议。 在此次会议中，经过查看各个项目的日志，后台的监控数据，发现在那台RDS数据库CPU飙升时，有一台Redis数据库内存将近100%，然后急剧下降。联系第一次的宕机情况，也是类似的。 接下来就是联系服务器数据...阅读全文
巴克莱：仍预计美联储2月加息50个基点，3月加息25个基点
【巴克莱：仍预计美联储2月加息50个基点，3月加息25个基点】1月7日消息，巴克莱银行仍然预计美联储将在2月份的会议上加息50个基点，3月份加息25个基点。经济学家们认为，3月份较小幅度的加息将是对经济活动和劳动力市场放缓的越来越多证据以及通胀数据继续放缓的回应。这将使联邦基金目标区间在3月会议后达到5%-5.25%，与12月的经济预测报告中的点阵图中值相对应。然而，2月FOMC的决定仍取决于关键数据的发布，如下周公布的12月CPI。经济学家们称，展望3月份以后，他们预计FOMC将暂停加息行动，但不排除如果该委员会未能看到足够的经济放缓，会继续逐步加息的可能性。 日期： 2023-01-07 23:52...阅读全文
Let’s Encrypt已颁发10亿份证书 13名员工服务1.9亿网站
Let's Encrypt官方发布庆祝博文，宣布于2020年2月27日颁发了第10亿份证书。博文中回顾了从第1亿份证书到今天最新里程碑的过程，并反思了这些年互联网行业的发展。 在博文中首先指出的是，当前Web的加密程度要比以往高出很多。在2017年6月，全球使用HTTPS的网站只有58%，美国地区为64%。而今天全球有81%的网页加载使用HTTPS，美国地区更是高达91%。这是一个了不起的成就，这表明每个人都有更多的隐私和安全保护。 Let's Encrypt服务的企业规模也有所增加，在2017年6月该机构为4600万个网站提供服务，不过当时机构只有11名员工，年度预算为261万。而今天该机构为1.92亿个网站提供服务，拥有13名全职员工，年度预算约为335万美元。 这意味着只增加2名新员...阅读全文
谷歌公开了内部管理Infra层的两个工具的Paper
同点：不再关注于给生产环境推送单独的变更，而是关注于想要达到的状态。不再维护一步一步的工作流，而是让服务所有者使用配置来描述他们想要基础架构达到的样子：运行什么job，负载均衡器的搭建，数据库schema的位置等等。 基于这些信息，Prodspec和Annealing将这些配置转化成统一的结构，随后被执行。执行是安全并且持续性的：自动化系统重复地比较用户模型所表达的预期状态和生产环境的状态，并且在安全的时候自动触发reconciliation。服务所有者不再需要将配置变更手动推送到生产环境里。 因为我们从2015年左右就开始开发Prodspec和Annealing，基于intent的执行（intent-based actuation）这一简单明了的理念如今已经成了实际的标准。Google生产...阅读全文
聊聊很重要的内核技术eBPF
在2018年的 Linux Plumber 大会上，eBPF成了亮点，有24个议题提到了 eBPF，可以预计eBPF会成为一大技术热点。 eBPF(Extended Berkeley Packet Filter) 的核心是驻留在 kernel 的高效虚拟机。最初的目的是高效网络过滤框架，前身是 BPF。 Linux kernel 3.18版本开始包含了eBPF，相对于 BPF 做了一些重要改进，首先是效率，这要归功于 JIB 编译 eBPF 代码；其次是应用范围，从网络报文扩展到一般事件处理；最后不再使用socket，使用map进行高效的数据存储。 根据以上的改进，内核开发人员在不到两年半的事件，做出了包括网络监控、限速和系统监控。目前eBPF可以分解为三个过程： 以字节码的形式创建...阅读全文
EC2关机后 AWS还会计费吗
AWS 在 EC2 关机后，不会再对计算资源计费；其他资源 比如EBS、Elastic IP 这些还会产生费用。如果你使用了预留实例，还需要考虑预留实例对计费方式的影响，会按照预留实例的计费标准计费。 这种灵活的计费方式，是 AWS EC2 默认就支持的，相比之下，国内绝大多数云主机厂商是不支持的。在开机、关机时（即主机状态发送转变时），AWS 会收取最少一分钟的计费费用。 如果你关机过程用了20秒，AWS会按照一分钟来收费；如果你关机过程用时 1分30秒，则AWS会按照1分30秒收取费用。很良心吧，很灵活吧。 AWS的文档还是要多看的，计费方式和九年前的AWS变化很大。最新版的文档可以从这里下载： https://docs.aws.amazon.com/AWSEC2/latest...阅读全文
AWS省钱攻略：预留实例怎么玩
AWS的预留实例（Reserved Instance）是一种计费方式，并不是一种计算实例，简单讲是一个“包年包月”的优惠方式。购买RI后，可以获得30%以上，至最高 75% 的优惠。你可能会说：“这些我都知道，并且RI我已经在用了。” 你真的熟悉 RI 吗？ 我们知道预留实例（RI）分为两种: 标准RI与可转换RI（CRI），可转换RI的价格往往较高而不容易被接受，而我们又经常遇到需要调整RI，那么我们购买的标准RI能不能进行适当的转换呢？答案是没问题的，AWS为满足客户的需求，提供了很灵活性的设定。 今天主要介绍一下RI的三个灵活属性：大小灵活性匹配，合并拆分，可转换(CRI)，我们暂且这么称呼，三者适用于不同的场景，是互相补充的关系。 大小灵活性匹配 场景：区域范围RI 、相同实例类型...阅读全文
机械轴首选 iKBC c87 高性价比键盘
对经常码字的朋友来说， CHERRY 轴的入门键盘，定价在400以内的，ikbc、魔力鸭、酷冷、Cherry、高斯均可以考虑。如果考虑美观放在办公室用，那就非 高斯 和 iKBC 莫属了。 把高斯 GS87-D 与 iKBC c87 对比后，iKBC 显然性价比更高一筹。 京东的618大促，iKBC的优惠力度也足够大，279块可以拿到原价499块的办公室里可用的静音键盘（购买链接），价格已是历史低价中的低价。 IKBC 使用 PBT 键帽，内置CHERRY（樱桃）原厂MX轴，已有六种颜色的键盘轴可选。对于原厂轴机械键盘来说，非静音版近期259的价格，也是历史底价，很亲民，以iKBC的长久以来的口碑验证，是很值得入手的。 iKBC 还为那些不满足的玩家预留了足够的折腾空间，C104 配备了...阅读全文
IDC：亚马逊2018年IT支出超136亿美元全球居首 谷歌第二
知名市场研究公司IDC周四发布报告称，2018年，亚马逊公司在技术上的投入超过136亿美元，成为全球IT支出最高的公司。IDC追踪了4800家公司，他们在去年的总IT支出预计达到1.1万亿美元，前十大公司占据了总支出的7%。谷歌母公司Alphabet、沃尔玛公司分别排在第二、第三位，他们去年在软件、硬件、服务、电信设备以及员工上的支出分别接近120亿美元。 IDC客户洞察和分析研究经理大卫·拉特斯曼(David Lantsman)表示，亚马逊和谷歌向寻求降低自主IT预算的其他公司销售云服务、服务器和其他数据中心基础设施占据了他们的大部分支出。 2018年前十大IT支出公司 沃尔玛是前十大IT支出公司中的唯一一家零售商，去年的IT支出预计为117亿美元。沃尔玛执行副总裁兼首席技术官杰里米·金...阅读全文
prometheus通过node_exporter抓取的数据准确计算磁盘使用率
) 诡异的df算法 主要的原因就是每个分区有一个给管理员的预留空间，保证即使普通用户写满其空间，管理员还可以进行操作，普通用户的可使用空间是总空间减去预留空间，该文章并给出了具体的预留空间计算规则 reserved = fsu_blocksize * (fsu_bfree - fsu_bavail) 然后看了node_exporter的源码，核心的代码在github.com/prometheus/node_exporter/collector/filesystem_linux.go的101行 stats = append(stats, filesystemStats{ labels: labels, size: float64(buf.Blocks) * float64(buf.Bsize...阅读全文
微软开源MsQuic QUIC 协议的跨平台实现
： Windows 将在内核中附带 MsQuic，Windows HTTP/3 堆栈也是基于 MsQuic 构建的。Microsoft 365 正在使用 HTTP/3 测试 IIS 的预览版。.NET Core 已在 MsQuic 的基础上在 Kestrel 和 HttpClient 中构建了对 HTTP/3 的支持（在 .NET Core 5.0 预览版中可用）。Windows 中的 SMB 将 MsQuic 用法作为原型。 微软在博客文章中表示，“MsQuic 为许多重要的网络方案带来了性能和安全性的改进。”并称其在线服务从这些性能改进（例如减少尾部延迟和更快的连接设置）中受益最大，“我们的连接将能够无缝切换网络，因为它们可以承受 IP 地址/端口更改的影响。” MsQuic 仍在开发中，当前处于预览状...阅读全文
Tails 4.4 发布，能你隐身的发行版
Tails 4.4 稳定版已发布，更新内容包括升级应用程序和修复安全漏洞。此版本中修复了在 Tails 4.3 中发现的许多安全问题，例如影响 OS 组件，以及 Tor Browser 和 Mozilla Thunderbird 等预装应用程序的漏洞。 该版本已将内核升级至 Linux Kernel 5.4.19，改进对显卡、无线网卡等较新硬件的支持。另外还修复了一些 Realtek RTL8822BE 和 RTL8822CE 芯片组的 Wi-Fi 接口造成的问题，团队还表示如果从 Tails 4.1 起使用 WiFi 时出现问题，请告知他们问题是否已解决。 最后，Tails 4.5 计划于4月7日发布。 下载地址：tails-amd64-4.4.iso (1,098MB...阅读全文
PHP 7.4 有哪些新特性
PHP 7.4 的GA版今天正式发布了。PHP 7.4发布后，PHP 7.3或其它的PHP 7版本都可以升级到PHP 7.4版。 PHP 7.4 的主要特性包括以下几个， 短闭包函数(short closure)预加载提交性能属性类型限定Improved type variance(不会翻译)三元运算简写数组展开运算新增类的魔术方法：serialization数字分隔符运算优先顺序允许在__toString中抛出异常支持反射引用新增字节分割函数移除php短标签弃用左关联运算符不再向后兼容的变更 短闭包函数 短闭包函数可以减少冗余代码： array_map(function (User $user) { return $user->id; }, $users) array_map(fn...阅读全文
Kubernetes 1.7 版 6月底推出 有超过50项更新
按Kubernetes每季推出新版本的周期，暨今年3月底发布1.6版后，应该即将有一波大公布。果不其然，作为Kubernetes 1.7开发团队成员之一的Mirantis，在近日宣布，Kubernetes 1.7版会如期在6月底发布。 在1.6版中，Kubernetes不仅新增了角色权限控管，还将集群规模扩大至5,000个节点，但对Kubernetes社区而言，1.6版只不过是求稳定，并无太多新功能。Mirantis表示：1.7版本则是全力锁定推新功能，预计会有超过50个新功能，例如丛集联邦、安全性以及容器网络。 而根据Kubernetes现今对外的文件，还可发现许多有趣的新功能，像是支持容器基础组件Containerd、加强容器Runtime接口等。在容器储存功能方面，则预计开始支持本地...阅读全文
三大浏览器敦促网站管理员更换 SHA–1 认证
继去年宣布了SHA–1弃用计划之后，近期Google、Microsoft和Mozilla给出了从各自的旗舰浏览器产品中移除SHA-1认证支持的详细时间表。 Chrome 即将在2017年1月底发布到稳定通道的Chrome 56将不再信任任何来自公共认证机构的SHA-1认证，对现有的SHA-1认证会给出警告。但是对于那些在企业内部使用的私有PKI，Chrome将会继续提供SHA-1支持，因为这些PKI使用EnableSha1ForLocalAnchors策略，依赖底层的操作系统提供SHA-1支持。 Firefox Firefox将在Firefox 51中停止信任SHA-1签名认证。当前Firefox 51正处于开发版本阶段，计划于2017年1月发布。为评估移除SHA-1签名认证对真实使用情况...阅读全文
谷歌是如何培养经理人的
时，不应该告诉他们所有事情，先让他们实践一下，然后再慢慢增加内容。在一开始需要教会他们的事情：如何提供反馈以及如何成为一个好的导师；建立起学习和发展情商的文化氛围——了解自己和团队，要管理好别人首先要管好自己。 培训并不是培养经理人唯一的手段。他们可以从其他经理人那里学习。应该鼓励他们互相交流和学习。另外，收集反馈是一种有效的评估手段。 把对经理人的反馈告诉他们。Calderon说，谷歌每年都会向员工收集反馈，让他们填写有关上司表现的问卷调查。这些信息会被反馈给经理人，帮助他们评价自己，并从中得到成长。先明确优秀经理人的定义，然后再引导他们朝这个目标努力。谷歌关于优秀经理人的特点清单可以在这个指南中找到。 除了经理人应该具备的行为特征，Calderon还提到：经理人应该要融入团队，不要只做微...阅读全文
Open Source Initiative 批准四个新的开源许可证
作为"开放源码定义"的管理者，Open Source Initiative（OSI）20多年来一直将许可证指定为"Open Source"。这些许可证是开源软件生态系统的基础，确保每个人都能使用、改进和共享软件。当一个许可证被批准时，是因为 OSI 相信该许可证促进了合作和共享，使参与生态系统的每个人都受益。 在过去的 20 年里，世界已经发生了翻天覆地的变化，软件现在以新的方式甚至是难以想象的方式被使用。OSI 已经看到，以前被人们所熟悉的开源许可证并不总是能适合这些新的情况。因此，OSI 作为许可证管理员站了出来，为更广泛的用途提交了几个新的许可证。OSI 面临的挑战是评估这些新的许可证概念是否会继续推动共享和协作，是否值得被称为"开源"许可证。最终 OSI 批准了一些用于特殊领域的新...阅读全文
岗位需求： CTO
工作规范和工作流程，并跟踪开发过程实际合规性； 8. 指导. 审核项目总体技术方案，对各项目进行最后的质量评估； 9. 负责技术团队建设和管理，注重人才培养和营造创新的研发文化； 10. 完成各项技术工作相关数据统计分析报告，并据此对公司发展提出合理化建议。 ** 岗位要求：** 1. 本科及以上学历，计算机. 软件工程相关专业，互联网行业优先考虑； 2. 10年及以上技术研发. 软件开发相关行业工作经验，5年以上互联网行业技术研发团队管理经验， 精通基于Java. PHP等语言的开发，熟悉服务端软件架构设计与开发流程；有互联网CTO或技术总监工作经验，带过百人以上团队； 3. 熟悉互联网领域业务，深刻理解产业发展方向，具备敏锐准确的洞察力和缜密的逻...阅读全文
Google 关于 Go 2 的讨论
在本周召开的GopherCon 2017上，Google Go的技术负责人Russ Cox做了关于Go的未来的主旨演讲，请社区就该语言的下一个主要版本应该包含哪些内容提出建议。Google在十年前开始发展Go语言，在5年前提供了第一个稳定版本1.0。目前的稳定版本是1.8.3，Google正在向社区开放，听取下一个主要版本2.0应该包括哪些内容。 最近的一项研究评估，Go语言的开发者数量约为50万。如果就编程语言向所有这些开发人员询问他们想要什么，那么很可能得到一个很长的期望功能列表。但Google非常关心维护与现有Go代码库的兼容性，该代码库大致近似于1B LoC。虽然这表明该语言的成功，但是按照Cox的说法，它也是“Go 2的主要制约因素”。 Go 1承诺兼容性，让开发人员放心，只要...阅读全文
高性能日志采集工具 logpipe 简单介绍
日志文件增长，某些应用会在目标目录下产生多个日志文件甚至现在不能确定将来的日志文件名，架构上要支持多输入多输出流式日志采集传输，为了达成以上需求，我研究了所需技术，评估实现难度并不高，就自研了 logpipe。 logpipe 是一个分布式、高可用的用于采集、传输、对接落地的日志工具，采用了插件风格的框架结构设计，支持多输入多输出按需配置组件用于流式日志收集架构，无第三方依赖。 logpipe 的一种用法是能异步实时监控集群里的所有日志目录，一旦有文件新增或追加写，立即采集并传输到大存储上以相同日志文件名合并落地，或者写入 HDFS。异步意味着不影响应用输出日志的性能，实时意味着一有日志立即采集，很多日志采集工具如 flume-ng、logstash 介绍文档通篇不提采集方式是否实时还是周期...阅读全文
2017年的Linux内核防护依然脆弱
里建议所有的 GNU/Linux 用户请认真重新评估数据资产的重要性所对应的安全等级。" 转自Solidot.org...阅读全文
Debian Stretch 安装 Nodejs 最新版本
nodejs 你也可以直接下载官方预编译好的二级制文件来安装，注意更新 $PATH 变量。Node.js 的二进制文件打包脚本的官方地址在 GitHub 上。你也可以直接从官方网站上下载通用版的预编译文件，额外的工作是你需要自己解决 $PATH 等环境变量的设置问题。 检查确认 Nodejs 版本 通过执行命令 node -v ，我们可以看到当前Node.js是最新的v8.x版本。 提示：如果我们需要其他版本的Node.js，我们只需要将安装里面下载链接 setup_8.x 替换成其它即可，如setup_7.x...阅读全文
最新评论
