随着希捷、东芝先后推出16TB容量的HDD硬盘，现今的垂直磁道PMR机械硬盘不论容量还是技术水平应该是到头了，西数计划今年出样18TB及20TB的硬盘，会用上MAMR全新技术。 访问购买页面： 西部数据自营旗舰店 机械硬盘要想再提高容量，现在的磁记录技术已经没多少潜力可挖了，新一代HDD硬盘技术会转向HAMR热磁辅助记录技术，不过西数认为HAMR使用激光辅助加热，技术复杂，成本高，可靠性也低，所以他们更倾向于MAMR微波辅助磁记录技术。 根据西数所说，MAMR硬盘技术的成本和传统垂直记录类似，复杂性、可靠性也都更可控(99.99％的MAMR磁头写入寿命HAMR磁头高出几个数量级)，生态方面也不需要更换新的主机管理损耗均衡。 西数最新表态今年底会推出两款MAMR技术的容量，一款是18TB容量...阅读全文
可能遇到故障。考虑到 BackBlaze 的数据可以一直追溯到 2013 年，近日公布的这份硬盘可靠性报告，也让事情变得更加有趣。2021 年 1 季度，各个机械硬盘厂商的年化故障率表单。从 2013 年 4 月 ~ 2021 年 4 月 1 日，BackBlaze 发现 SSD 的踪迹 AFR 仅为 0.65%、而 HDD 的 AFR 却高达 6.04% 。显然，SSD 的高寿命，得益于 SSD 内部没有频繁移动的机械部件，因而对电气故障的容忍度也更高。更别提在 2012 年发生了工厂水灾之后，机械硬盘制造商还普遍缩短了 HDD 产品的保修期限。访问:京东商城...阅读全文
Ryzen嵌入式G系列芯片，代号River Hawk，Zen 2架构，最高4核8线程。 第三季度的产品最富竞争力，毕竟Zen 3架构将新鲜登场，首秀是代号Milan的第三代EPYC，最高64核128线程。8月份将是锐龙4000桌面处理器和锐龙APU产品，前者当然升级到Zen 3，代号Vermeer（维米尔），最高16核，延续AM4接口；后者则升级为Zen 2架构，采用Ryzen 4000G/GE的命名，Zen 2架构+Navi。 同年第四季度是线程撕裂者4000产品，最高64核128线程。这一路线图也呼应了本周一则消息，AMD最快10月份推出第三代线程撕裂者，最高48核？...阅读全文
经渐渐回归业务本身，让更多的开发者看到了一丝曙光。It's enough? 来看下Bilgin Ibryam在Multi-Runtime Microservices Architecture文章中提及的分布式应用的四大需求： 从上图可以看出，除了网络（Networking）外，生命周期（Lifecycle）、状态（State）、捆绑（Binding）也是分布式应用要解决的问题之一。网络问题可以借由Service Mesh 比如Istio予以解决。那其他三个该如何解决呢？又要应用自行开发集成吗？显然不符合应用回归业务本身的诉求。这时，Dapr登场了，Dapr提出的分布式应用运行时就是实现了以上四个需求并将其下沉作为分布式应用的运行环境。 简而言之：Dapr将分布式能力进行封装下沉作为运行时以简...阅读全文
Shuttleworth，请你不要让 Mir 死亡。（我理解在桌面端这可能是非常困难或许无法实现的，但是如果你未来想要进一步布局物联网，你就会发现它是非常实用的。） 随后 Shuttleworth 的回复并不令人感到愉快： Martin Kozub，我们拥有大量使用 Mir 作为合成器的物联网项目，因此代码将会接受更新。我也非常赞同，它是非常高效、简洁和强悍的图形合成引擎，聪明的人都非常的喜欢。 然而我由衷的讨厌 Mir 的存在，因为这是一款非常容易产生分歧的软件。就像是气候变化或者枪支管理一样，它会变成不合理的策略话题。无论你站在哪一方都释放出种族拥护的信号。在社区中部分软件的对立已经变成了非常严重的问题，有些人会选择站在对立面怀着抱怨和讨厌的态度，而另一些人则站在了同一阵营，甘愿投入时间和精力并不断让软件变得...阅读全文
引入的新的仲裁控制器确保元数据在整个仲裁中可以被准确复制。活动控制器将元数据存储在事件源日志主题中，仲裁中的其他控制器对活动控制器创建的事件做出响应。事件日志定期进行快照，确保日志不会无限增长。与基于 ZooKeeper 的控制器不同，如果出现了问题，仲裁控制器不需要从 ZooKeeper 加载状态，因为集群的内部状态已经分布在元数据主题中。这大大减少了不可用时间窗口，缩短了系统最坏情况恢复时间。下图显示了使用新的仲裁控制器比使用 ZooKeeper 更快地关闭具有 200 万个分区的 Kafka 集群。新的 KRaft 共识算法和仲裁控制器使得 Kafka 集群可以扩展到数百万个分区，不仅提升了稳定性，让 Kafka 变得更容易监控、管理和支持，而且让整个系统可以有一个单一的安全模型，使...阅读全文
Linux Kernel 5.11 为期两周的窗口合并期即将于今天结束。Linux 5.11 合并了很多新特性和令人激动的改进，正式版将会在明年 2 月和大家见面。Linux 5.11 作为非 LTS 长期支持版本，是 2021 年首个主要的稳定内核版本。 Linux Kernel 5.11 新版本的工作量比较繁重，主要涉及了大量英特尔和 AMD 的更改，改进 Syscall User Dispatch 以便于让 Wine 运行更新的 Windows 游戏，持续 IO_uring 改进，优化 Btrfs 文件系统，并会整合联想贡献的 ThinkPad 掌托传感器检测等。 在英特尔方面，经过多年的努力 Linux 5.11 中将合并 SGX Enclaves，英特尔的图形驱动也支持整数缩放支...阅读全文
SciPy 是一个开源的 Python 算法库和数学工具包。SciPy 包含的模块有最优化、线性代数、积分、插值、特殊函数、快速傅里叶变换、信号处理和图像处理、常微分方程求解和其他科学与工程中常用的计算。 10月25日，SciPy 团队成员 Ralf Gommers 在 Python 官方邮件组发文宣布 SciPy 1.0 终于发布了。 Ralf 称，很高兴宣布 SciPy 1.0 的发布，自从 0.1 版面世 16 年后，1.0 版姗姗来迟。这是一次漫长而富有成效的旅程，期待在未来有更多令人激动的特性。 为什么现在才发布 1.0 版呢？ Ralf 认为版本号应当体现出项目的成熟程度，SciPy 是一个成熟且稳定的库，已经在生产环境长期大量使用很久了。从这个角度来说，1.0 版来晚了。 最...阅读全文
接收我的交易通知。】 然后点击 【提交】，等待审批即可。部分是在线秒批（应该是机审），个别需要等待一段时间。11 到这一步就注册好了。然后设置账户，包括登录名和密码之类的。接着，创建登录账户。记牢。以后登录就靠这个。12 启用数字安全令牌，点击启用。这一步是开启短信验证码功能。13 设置完成，会显示你的两个账户。分别是美元账户和新币账户。点击开始即可进入账户。14 账户充值OCBC对于我们大陆来说属于离岸账户，是个境外银行。所以我们入金的时候需要从国内银行跨境汇款过去。 一般流程是，购汇然后再跨境汇款（转账）。这个过程资料要认真填写。下面是给这个账户汇款可能用到的信息：收款行所在地选新加坡，收款行地址：63 Chulia Strel #10-00, OCBC Centre East...阅读全文
什么是装饰器？ 装饰器（Decorator）相对简单，咱们先介绍它：“装饰器的功能是将被装饰的函数当作参数传递给与装饰器对应的函数（名称相同的函数），并返回包装后的被装饰的函数”，听起来有点绕，没关系，直接看示意图,其中 a 为与装饰器 @a 对应的函数， b 为装饰器修饰的函数，装饰器@a的作用是： 简而言之：@a 就是将 b 传递给 a()，并返回新的 b = a(b) 栗子： 上面使用@dobi来表示装饰器，其等同于：qinfeng = dobi(qinfeng)因此装饰器本质上就是个语法糖，其作用为简化代码，以提高代码可读性，运行上段代码的结果为： 解析过程是这样子的： 1.python 解释器发现@dobi，就去调用与其对应的函数（ dobi 函数） 2.dobi 函数调用前要指...阅读全文
。诸如 KFServing 这样的工具可以让你根据需要定制扩展逻辑，包括 RPS 和请求并行目标。 你也可以使用 Kubernetes-native 工具，比如 HPA，根据用户定义的指标对模型进行扩展。你可以研究一下其他很棒的服务工具，比如 Seldon Core 和 BentoML。它们都支持自动扩展，并为自动化服务模型版本、金丝雀发布、更新和生命周期管理提供了许多有用的功能。 #### 作者介绍： Kirill Goltsman，技术博客写手、研究员，专攻研究人工智能 / 机器学习及容器化技术。在过去的几年里，他领导了专注于数据分析、Kubernetes 以及游戏和安全领域的人工智能的初创公司的内容创作策略。在他的技术写作中，Kirill 利用了他的编程语言（Javascript...阅读全文
"。 异常中最关键的信息是“ Too many open flies”，这是一种常见的 Linux 系统错误，通常意味着文件描述符不足，它一般发生在创建线程、创建 Socket、打开文件这些场景下 。 在 Linux系统的默认设置下，这个文件描述符的个数不是很多 ，通过 ulimit -n 命令可以查看：一般默认是1024，可以将该值增大，比如：ulimit -n 65535 2.1.8 消息传递保障 at most once(消费者最多收到一次消息，0–1次)：acks = 0 可以实现。 at least once(消费者至少收到一次消息，1–多次)：ack = all 可以实现。 exactly once(消费者刚好收到一次消息)：at least once 加上消费者幂等性可以实现，还可以...阅读全文
-config.php 包含了数据库访问凭据和其他一些对入侵系统有助的有用信息。大多数人都将其保留在主要的 WordPress 文件夹中，但可以将其移动到上层的文件夹。大多数情况下，该文件夹位于 Web 服务器根目录之外，而且无法通过 HTTP 请求进行访问。 或者，也可以通过配置 Web 服务器（如 Apache .htaccess 文件）来保护它： order allow,deny deny from all 6. 尽可能授予用户最低权限角色 用户是任何系统最弱的一点 — 特别是当他们可以选择使用自己的弱口令并将其传给任何问他们索要的人时。WordPress 提供了 一系列的角色和功能 。大多数情况下，用户应该是： 编辑： 可以发布和管理自己和其他人的帖子的人 作者： 可以发布和管理自己的帖子的人 贡献者...阅读全文
谷歌开源了一套代码评审（Code Review）规范，它是谷歌一套通用的工程实战指南，几乎涵盖了所有编程语言与各种类型的项目，这个规范代表了谷歌长期发展以来最佳实战经验的集合，谷歌表示希望开源项目或其他组织能够从这套规范中受益。 代码评审，也称代码复查，如果一个团队正在使用任务分支工作流，那么在所有代码编写完成并通过自动化测试之后，在代码合并之前，就会启动代码评审。通常的目的是查找系统缺陷，保证软件总体质量和提高开发者自身水平，代码评审的所有工具和过程都是为了这个目的而构建的。代码评审对于敏捷团队来说的作用如下： 代码评审共享知识通过代码评审可以更好的进行工作评估代码评审能让你享受休假通过代码评审指导新工程师 既然代码评审要进行众多的检查，那么找一个优秀的评审者就非常重要了。一般对于变更列...阅读全文
Network Proxy 在 1.16 版本中进入 AlphaCloud Controller Manager Migration 增强继续淘汰 extensions/v1beta1、apps/v1beta1 和 apps/v1beta2 API，这些扩展会在 1.16 版本中被弃用 已知的问题： etcd 和 KMS plugin 的健康检查没有在新的 livez 的 和 readyz 端点中公开。这将在 v1.16.1 中得到修正。 运行iptables 1.8.0 或更新版本的系统应以兼容模式启动它。请注意，这将影响所有版本的 Kubernetes，而不仅仅是 v1.16.0。 升级前须知： 集群生命周期 amd64 的容器镜像 tar 文件现在将包含 RepoTags...阅读全文
2.7 版本与低版本互操作性的问题上，我们增加了一些兼容性代码，典型如服务治理规则、Package 重命名、注册 URL 简化等。 Package 重命名 com.alibaba.dubbo -> org.apache.dubbo 注册 URL 简化服务治理规则配置 更新说明出处 下载地址： Source code(zip)Source code(tar.gz) 新增功能 Bug修复及优化 升级与兼容性 目录...阅读全文
Kubernetes 集群（Identity Provider，标识提供者）与外部系统（relying parties， 依赖方）所分发的服务账号令牌。CRIContainerLogRotation 进入稳定版本，kubelet 将会自动为 containerd 等 CRI 容器运行时轮换日志。结构化日志（Structured Logging）进入 Beta，很多组件的日志都改成以 JSON 格式记录，这样第三方日志处理系统就可以方便地从日志中解析出日志所对应的资源对象和资源属性。EfficientWatchResumption 进入 Beta，kube-apiserver 重启后 watch 缓存将更高效的恢复，更好的支持大规模集群。CSIServiceAccountToken 进入 Beta，使得 CSI...阅读全文
应用相结合，但也有人认为微软是在以怀柔政策弱化开源社区并将借此引导Linux走向毁灭。 4. 慕尼黑市计划放弃Linux 2004年，德国慕尼黑市开始大规模利用LiMux这款定制化Linux发行版取代Windows，同时利用OpenOffice.org及后来的LibreOffice替换微软Office。然而令人惊讶的是，尽管该市曾于2013年宣布Linux与开源技术转移已经取得成功，但慕尼黑如今正试图重新回归微软怀抱。不过值得庆幸的是，LiMux未来将与Windows并存且继续得到更新。 5. 俄罗斯大力推广 Linux 与慕尼黑市相反，俄罗斯正积极拥抱Linux与开源项目。俄罗斯议会国家杜马起草了一份法案，要求在政府采购活动中优先考虑开源软件。这一决定在很大程度上是为了提升安全水平。俄罗斯...阅读全文
生的变化以及转向 Kubernetes 的趋势。 安全性将成焦点——DevSecOps CI/CD 管道让通过快速变更来满足客户的日常需求成为可能。CI/CD 管道也可以进行自动化，而安全性现在已经成为了一个设计约束。从一开始就要考虑安全性，将安全性构建到软件中，而不是作为插件，因为安全性不再是附加功能。 最近，我们看到了 DevSecOps 的上升趋势，DevSecOps 是指先在应用程序开发生命周期中注入安全性，从而减少漏洞，并让安全性更接近 IT 和业务目标。这个模型假设每个人都需要对安全性负责，因此减少了职责归咎方面的噪音和困境。 DevOps 和 DevSecOps 之间的区别 AI 和 ML 将促进 DevOps 增长 AI 和 ML 非常适用于 DevOps。它们可以处理大量信...阅读全文
，Kotlin 才这么年轻，不得不说十分具有革命性。 所以如果有人再问你什么是 Kotlin，你应该回答，Kotlin 是一门很厉害的静态语言（而不是之前常说的 Kotlin 是一门运行在 JVM 之上的静态语言）。反正你能想到的，Kotlin 的开发团队都想干。 时钟拨回到五个月前，2017 年 5 月 17 日 Google I/O 大会第一天，谷歌宣布 Kotlin 成为 Android 开发的官方支持语言。有了 JetBrains 和 Google 的背书，自此，对于“Kotlin 即将取代 Java ”的声音从未停止过。上个月，我们也曾发表过一篇题为“Kotlin 将超越 Java 成为 Android 开发的第一语言？”的资讯，文中提到，Realm 公司调查报告给出的预测表示，“到 2018...阅读全文
大指令数为 100 万。与此同时，针对性能担忧，eBPF 探针控制在大约在 1%左右。其高性能主要体现在内核中处理数据，减少数据在内核态和用户态之间的拷贝。简单说就是数据在内核里算好了再给用户进程，比如一个 Gauge 值，以往的做法是将原始数据拷贝到用户进程再计算。2、可编程的执行引擎天然适合可观测性可观测性工程通过帮助用户更好的理解系统内部状态来消除知识盲区和及时消除系统性风险。eBPF 在可观测性方面有何威力呢？以应用异常为例，当发现应用有异常后，解决问题过程中发现缺少应用层面可观测性，这时候通过埋点、测试、上线补充了应用可观测性，具体的问题得到了解决，但往往治标不治本，下一次别的地方有问题，又需要走同样的流程，另外多语言、多协议让埋点的成本更高。更好的做法是用无侵入方式去解决，以避免...阅读全文
，每一个节点上创建一个 Pod 已经有了一个更新特性，在1.7中添加了更加机智的回滚和历史回溯能力。 一个新的 StorageOS 卷插件能从本地的和连接的节点存储中提供高可用的、集群范围的持久性卷。 可扩展性： 运行时的 API 聚合是这次发布中最强大的特性，可以让高级用户向集群中添加预先构建的、第三方的或者用户自制的具有Kubernetes风格的API。 容器运行时接口（CRI）通过新的从运行时获取容器指标的 RPC 调用得到增强。CRI 的验证测试已经发布，和containerd 1.0的整合处于 alpha 状态，现在支持基本的 Pod 生命周期和镜像管理。可以阅读我们之前深入介绍 CRI 的文章。 其他特性： 引入了对于外部的准入控制器的支持，现在处于 alpha 状态，提供了两种选...阅读全文
： 2700X 8核心16线程，2600 6核心12线程，非常适合多线程应用，不过也限制了频率提升。 主频： 2700X最低2.2GHz、基准3.7GHz、最高4.2GHz，相比1700X提升了10％左右。2600最低1.55GHz、基准3.4GHz、最高3.98GHz。 热设计功耗： 2700X 105W增加了10W，对散热器要求会更高一些。2600 65W保持不变。 一级缓存： 2700X 256KB一级数据缓存、512KB一级指令缓存保持不变，后者仍然比Intel多一倍。2600分别为192KB、384KB。 二级缓存： 2700X 4MB、2600 3MB，也保持不变，但改进了延迟。 三级缓存： 16MB不变，但依然改进了延迟，也比Intel大得多。 以上是部分测试成绩（完整版请参考这里），对比...阅读全文
很多人在装机过程发现，在某电商平台输入处理器信息后，会出现盒装版和标明散片装两种商品，二者在售价上也天差地别，因为担心假货，很多人愿意花费更多的售价购买正品盒装版，今天为大家讲解一下盒装版处理器和散片之间的区别。 CPU有叫做中央处理器，是一块超大规模的集成电路，它的主要功能是解释计算机指令以及处理计算机软件中的数据。通常包括运算器、高速缓冲存储器以及实现他们之间联系的数据、控制、状态的总线。目前市面上主流CPU生产商包括Intel和AMD，其中散片主要集中在Intel生产的处理器当中，ADM生产的市面上几乎没有散片包装。 CPU散片一般而言即只有一块CPU包装，没有任何正规包装盒，与正规CPU最大区别在没有CPU原装散热器，无法享受官方正品带来的任何售后以及三包服务。通常CPU散片主要是...阅读全文
如果一切顺利，Linux 5.11 稳定版将在今日正式发布。除非 Linus Torvalds 再三考虑，否则可能会推出第八周的候选版本，从而将正式版本推迟一周。但无论如何，Linux 5.11 都即将正式面世，并且有非常多令人激动的功能。 下面是即将推出的 Linux 5.11 版本中找到的 11 项值得关注的变化。 - 英特尔 IS 图形支持这是一种最受像素类游戏欢迎的技术，英特尔 Windows 上的驱动程序已经支持了一段时间，但现在 Linux 驱动程序也终于能够启用这个功能。 - 英特尔异步页面翻转支持是另一种开放源代码的图形性能优化技术。 - 对即将推出的 AMD Green Sardine 和 Van Gogh APU 带来支持。还支持 Dimgrey Cavefish，这是...阅读全文
你想明白了该做什么，就不要犹豫，快速行动起来去完成优先事项。毕竟成功人士就没有执行力弱的。 7 努力工作 通过运用自己的聪明才智或者勤奋努力，一个人可以达成工作领域里百分之九十的成就，能做到这一点已经很不错了。但是要想尽量做到完美，达成百分之九十九的成就，那就必须要兼顾聪明与勤奋，因为这一阶段你的竞争者往往是两者兼备的人。 有付出才有收获，付出越多收获也就越大。努力工作可能会造成工作与生活失衡，我完全可以理解有的人选择去更好地平衡工作与生活，在工作中不那么拼命。但是拼命工作确实有很多好处，在多数情况下，努力工作会产生叠加效应，越是成功的人就越能成功。 这通常很有趣。生活中最大的乐趣之一就是找到你的目标，并且有所建树，然后你会发现你在这件事上的影响力比你自己本身更重要。一位YC创始人表示：他在...阅读全文
要做了哪些定制，有什么特色呢？ 叶理灯：如果说定制 K8S 的话，其实是违背了 K8S 的初衷。我们并没有定制 K8S，我们是基于公有云给用户提供了原生的 K8S 产品。在公有云上提供原生的 K8S，其实要做很多的工作，例如与公有云的计算、网络和存储的整合，给用户提供一个开箱即用的原生K8S集群等等。 我为什么说不应该定制呢？因为大家知道 PaaS 发展到今天，一直存在的一个问题就是供应商绑定的问题。而 K8S 之所以那么有生命力，之所以迅速流行，是因为它提供了一个开源的标准，让用户使用 K8S PaaS 平台，可以避免厂商绑定。也就是说你的服务在某个服务商的 K8S 上运行，可以无缝的迁移到另外一个服务商。 作为云厂商其实最重要的工作是，基于我们自身云平台的体系，提供原生的 K8S 给用户...阅读全文
更早之前，AMD在其EYPC系列CPU中，也用到了"黏合"这一步骤，让芯片设计成本减少一半。自家芯片的“黏合”似乎已经不成问题，那么能否从全球市场上挑选出性能最优的芯片黏合在一起，创造出更强大的芯片？几周前，能够实现芯片互连的"万能胶"出现了，英特尔、AMD、台积电等芯片公司联合成立小芯片互连产业联盟，定制UCIe 1.0（Universal Chiplet Interconnect Express）标准。如果将同一家芯片公司的互连方式（例如英伟达的NVlink）视为只能黏合一种材质且功能单一的胶水，那么UCIe标准的提出则意味着能够实现各种芯片互连的芯片万能胶的雏形初现。芯片万能胶，是否已经有足够的能力替代不断微缩的晶体管，成为摩尔定律的"续命丹"？“胶水”芯片时代的真起点"胶水"芯片发...阅读全文
在被回收前的最小存留时间，默认为 2m0s；kubelet 中容器回收过程如下: pod 中的容器退出时间超过--minimum-container-ttl-duration后会被标记为可回收，一个 pod 中最多可以保留--maximum-dead-containers-per-container个已经停止的容器，一个 node 上最多可以保留--maximum-dead-containers个已停止的容器。在回收容器时，kubelet 会按照容器的退出时间排序，最先回收退出时间最久的容器。需要注意的是，kubelet 在回收时会将 pod 中的 container 与 sandboxes 分别进行回收，且在回收容器后会将其对应的 log dir 也进行回收；kubelet 中镜像回收过程...阅读全文
，因为一个CPU一次只能执行一条指令，这种情况就是并发，系统看似能处理多任务是因为不停的切换任务，但因为时间非常短，所以在我们的感官来说就是同时进行的。而计算机系统真实的并行是随着多核CPU的出现才有的。 临界区临界区表示公共资源或是共享数据，可以被多个线程使用。但是每次只能有一个线程使用它，一旦临界区的资源被占用，其他线程就必须等到资源释放后才能继续使用该资源。在Java程序开发中，对于这样的资源一般都需要做同步的操作，例如下面的这段代码，用的就是synchronized关键字来对临界区资源进行同步。 public class SyncTest implements Runnable { //临界区资源 public static SyncTest instance = new...阅读全文
—— 比如，对新的二进制版本进行为期一周的仔细部署可能需要慢慢更新intent。 Enforcement（执行） Enforer负责acutation的最后一公里。如图8所示，Enforcer跟踪intent，并且调用插件来更新生产环境的状态。Enforcer对intent没有控制：它唯一做的决策是现在能否推送特定的asset还是需要推迟。 图8：Enforcer及其插件 所有和基础架构的交互都是通过插件完成的，因为Enforcer不会直接接触或者查看生产系统。这让任意用户都可以添加更多的集成点，这是很有用的，因为服务通常都有一些特殊需求，比如自定义配置或者API。插件方案也有助于部署：不用滚动升级一个单体应用二进制，而是升级很多个小的二进制文件，每个都有自己的生命周期。 当enforcer调用某...阅读全文
README Naster 使用方法 在global中添加cache on, 然后在backend或listen中添加 cache filter 和 cache rule Naster 指令 cache syntax: cache on|off [data-size size] default: none context: global 控制是否开启缓存。 可以设置data-size来控制缓存数据的内存使用量。可以使用m, M, g 和 G. 默认是 1MB，同时也是最小使用量。只有 http 内容计算在内，并不包括使用缓存带来的内存开销。 filter cache syntax: filter cache [on|off] default: on context: backend, listen 定...阅读全文
我合作的或者是我了解的众多 dev 组织似乎不用 QA 也做得挺好。 同样的状况很快也会发生在运维人员身上。我之前在 Workiva 的基础设施和可靠性小组里工作时，我们将运行和基础建设工程团队并入一个单独的团队，该团队是由网站可靠工程师组成的，负责构建和维护基础设施服务，配置管理，日志管理，集合管理，监控等。 我非常支持通过愿景实现对团队的领导。发展愿景令人信服，可以使团队之间达成共识，减少功能孤岛和组织孤岛的影响，并能够从内部激励员工。它能使团队高度一致又能松散耦合，能够更好地做出决定。我对运维未来作为组织能力的想法本质上是将合成工程看作是合理结论。跟 QA 一样，运维能力也应该被嵌入发展团队中。事实是，没有运维技能，你不可能在现代组织中成为一名合格的软件工程师。现如今的运维团队，应该重...阅读全文
们招聘从事上游内核开发的人才。开发者想要从事革命性的新技术的研发工作，他们想做上游内核的开发工作、参加相关的技术会议、成为上游技术社区的一员。我们也希望能够为上游内核的开发贡献力量，并把这些成果应用到Facebook中去。这样我们能比较容易找到并聘用上游内核的开发者，同时也是我们降低工作负载的最佳途径。 Linux.com：在服务器领域，我常听系统管理员说“一旦安装好并运行起来，就不要再碰它了”，这与我们在现代IT基础设施中看到的刚好相反——现代IT基础设施的宝典是为了安全要变动的更快。 Chris Mason：我认为，Facebook横向扩展的能力使我们进行测试变得更为容易。这并不是说测试工作本身变得容易了，而是我们把测试单元部署在大量机器上的过程变得更容易了。我们有能力把测试工作放在一个...阅读全文
资源，从而获取虚拟货币的一种程序，需要较高的硬件配置及用电量。 而单凭一个矿工的力量是挖不到比特币的。于是“安某”便想到可以利用自己的职务之便利用百度的服务器来开启自己的发家致富之路，只是他可能没想到的是事情会败露的这么快。 那么，他具体是怎么做的呢？ 首先，他用自己的工作账户上传了一个压缩文件 miner.tar.gz ，其中包含一个名为 java_4u3 的脚本， 而这个脚本可以自动执行解压缩、创建目录、删除目录、自动连接代理进行网络交换，达到控制服务器的目的。 然后，编译了一个挖矿程序，并将上述程序部署非法控制了百度的 155 台服务器上，利用公司为其配备的苹果电脑上的 iterm 软件控制所有服务器的中控机，通过中控机上传挖矿脚本，并通过 iterm 软件发出批量下载指令，让 200...阅读全文
gRPC服务。 nginx是使用http服务器监听gRPC的请求。示例如下： http { server { listen 80 http2; access_log logs/access.log main; location / { # The 'grpc://' prefix is optional; unencrypted gRPC is the default grpc_pass grpc://localhost:50051; } } } 指令grpc_pass用来指定代理的gRPC服务器地址，前缀协议有两种： grpc://：与gRPC服务器端交互是以明文的方式 grpcs://：与gRPC服务器端交互式以TLS加密方式 gRPC服务器地址的前缀“grpc://”是可以忽略，默认就是明文...阅读全文
Profiling 行为的生命周期，而 Profiling 行为一定程度上会影响性能，于是我们对官方 Pyroscope 的生命周期做了扩展，实现“停止”行为的同时，采用时间轮算法来检测特定操作的耗时，当达到期望的阈值将触发开启 profiling, 待操作结束或超过最大阈值则停止。 关于性能诊断相关的运用，请期待后续诊断专题。 五、 0xff 结语 纵观得物在应用监控采集领域的三大里程碑迭代，第一阶段的 CAT 则是 0~1 的过程，它提供了应用服务对自身观测的途径，让业务方第一次真实地了解了服务运行状况，而第二阶段开始，随着业务发展的飞速提升，业务方对监控系统的要求就不仅只是从无到有了，而是要精细，准确。 因此，快速迭代的背景下，功能与架构演进层面的矛盾，加上外部云原生大背景下可观测领域的发展因素，促使...阅读全文
开源社区是个独特的存在。它虽然结构松散但却又切实有效，为社会提供便利好用的产品却不以利益为目的，将志趣相同的人们聚集在一起但又完整地保存了每一个个体的独特性...... 这些开源社区就像是一场场风格迥异的社会实验。 其中，Debian 社区是一个典型代表。作为 Linux 最早的发行版本之一，诞生于1993年的 Debian 可以算是开源社区中的“活化石”。这也令 Debian 在机制、行事和文化等方面都体现出了一定的“古典”特质。 最近，Debian 社区正在酝酿一件大事 —— 改革自己的决策机制。一直以来，Debian 的决策机制都饱受诟病，不少优秀的开发者因此离开，这样的变革或许不可避免。 01 离开 “长久以来，Debian 都难以作出改变。” 2014年的时候，Joey Hess...阅读全文
的永久存储和查询能力。 Compactor则是对Bucket里的历史数据进行采样或者清理，有具体需求后再自行研究即可。 上述组件均是可选的，没有历史数据永存需求的可以直接忽略。 方案2：thanos receive + thanos querier thanos提供的另一种方案是计算与存储分离，利用thanos receive组件部署一个分布式存储集群，然后令prometheus通过remote write机制直接写入到thanos receive集群完成分布式存储，这样prometheus本身就无状态了。 再利用thanos querier反向代理到thanos receive集群，最终对外提供统一的promql查询入口，这个阶段就没有prometheus什么事了。 这套方案的工作原理如下...阅读全文
当上世纪九十年代互联网开始被广泛使用的时候，其大部分的通讯只使用几个协议：IPv4 协议路由这些数据包，TCP 协议转发这些包到连接上，SSL（及后来的 TLS）协议加密连接，DNS 协议命名那些所要连接的主机，而 HTTP 协议是最常用的应用程序协议。 多年以来，这些核心的互联网协议的变化几乎是微乎其微的；HTTP 增加了几个新的报文头和请求方式，TLS 缓慢地进行了一点小修改，TCP 调整了拥塞控制，而 DNS 引入了像 DNSSEC 这样的特性。这些协议看起来很长时间都一成不变（除了已经引起网络运营商们的大量关注的 IPv6）。 因此，希望了解（甚至有时控制）互联网的网络运营商、供应商和决策者对这些协议采用的做法是基于其原有工作方式 —— 无论是打算调试问题，提高服务质量，或施加政策...阅读全文
欧盟一般数据保护条例（GDPR）和加州消费者隐私法案（CCPA）是欧美两大经济体所出台的两部具有代表意义的个人数据保护方面的法规，代表欧美监管机关对于个人数据保护两种不同的管控取向。 本文选取了“个人数据或信息的类型与范围界定”、“法律的管辖范围”、“数据跨境传输管控”、“儿童数据的保护”、“数据主体的反对权和被遗忘权”等关键概念，对GDPR和CCPA的部分要点进行比较分析。 1. “个人数据”或“个人信息”的范围界定 1.1 GDPR对个人数据的定义——侧重用抽象概念定义，实践中存在很大解释空间 除了对少数“特殊种类个人数据”（如宗教信仰、种族、工会成员信息、健康状况等）进行了零星列举以外，《欧盟一般个人数据保护条例》（GDPR）主要用抽象概念对其所管辖的“个人数据”的范围进行界定。 根...阅读全文
运作开源项目很容易。所有你需要做的就是让你的源代码可用和开源，对吧?嗯，也许。其实，开源项目是否成功取决于你对项目成功的定义。且不论你是怎么定义的，创建开源项目需要大量的工作。如果你已经有了目标，那么你需要准备投资。虽然开源软件是免费的，但它的创作却不是免费的：你需要往项目中投入时间和精力等宝贵资源。 那么，你如何投资这些资源? 1、定义成功 在考虑运作开源项目之前，你需要明确定义成功的意义。这里有很多因素要考虑。只将代码放入可公开访问的存储库就可以了，还是说你想对你的项目做更多?合作与采用对你来说重要吗?你只是为了打造作为一名软件开发者的声誉吗?你对成功的定义是否包括长期的可行性?你想围绕这个项目发展一个社区吗?你关心商业采用吗?你对这些问题的回答可以帮助你确定接下来你需要采纳的建议有多...阅读全文
title 就很牛 B 的，人外有人，天外有天，做好自己。五年陈留给自己的话：不忘初心，方得始终，未来已来，星辰大海。路就在前方，继续前行。 每个人的成长之路也不一样，我来回想下自己的。 不为过去蹉跎，珍惜当下 很多在菜鸟的时候，肯定或多或少，有过对身边的牛人，报以羡慕的眼光。 当看着别人职位比你高， 当看着别人比你工资领的高， 当看到别人年纪轻轻，就已经是牛逼哄哄。 你会不会有羡慕嫉妒恨的想法： 要是我当年读书的时候，不打游戏，少吃点红瓶、蓝瓶，少放几个水元素，少放几个暴风之锤（寒冰王座）。那么我肯定可以学到更多。 要是我当年不睡懒觉，起早贪黑，去学**，那么我肯定是也会学到很多。 要是。。。 理由从来不嫌多，我自己肯定也有这些想法，平心而论，我现在也有这些想法。但是负能量不能盖过正能量。 不要为...阅读全文
本教程介绍如何在一个 U 盘上安装多个 Linux 发行版。这样，你可以在单个 U 盘上享受多个现场版live Linux 发行版了。 我喜欢通过 U 盘尝试不同的 Linux 发行版。它让我可以在真实的硬件上测试操作系统，而不是虚拟化的环境中。此外，我可以将 USB 插入任何系统(比如 Windows 系统)，做任何我想要的事情，以及享受相同的 Linux 体验。而且，如果我的系统出现问题，我可以使用 U 盘恢复! 创建单个可启动的现场版 Linux USB 很简单，你只需下载一个 ISO 文件并将其刻录到 U 盘。但是，如果你想尝试多个 Linux 发行版呢?你可以使用多个 U 盘，也可以覆盖同一个 U 盘以尝试其他 Linux 发行版。但这两种方法都不是很方便。 那么，有没有在单个...阅读全文
TensorFlow 官方博客宣布开源新的运行时 TFRT，该运行时提供了统一的、可扩展的基础结构层，并在各类硬件上均具有高性能。 TFRT 产品经理 Eric Johnson 表示，TFRT 将取代现有的 TensorFlow 运行时。原有的 TensorFlow 运行时最初是为图形执行和训练模型的工作负载而构建的。与之相比，新的运行时将急切的执行需求放在第一位，同时特别强调架构的可扩展性和模块化。 它能够很好地满足开发复杂模型时寻求更快迭代时间的开发者需求、在训练和服务生产模型时改进性能的需求，以及希望以模块化方式将边缘和数据中心设备集成到 TensorFlow 中的硬件制造商需求。 简单来讲，TFRT 可以减少开发、验证和部署企业级模型所需的时间。 TFRT 利用了 eager 和图...阅读全文
OpenStack 基金会发布了一个新的容器项目，叫作 Kata 容器 ，以英特尔的 Clear 容器和 Hyper 的 runV 项目为基础。Kata 容器兼容 Open Container Initiative（OCI）和 Kubernetes 的 Container Runtime Interface（CRI），旨在提供虚拟机和容器的双重优势。 该项目以英特尔的 Clear 容器 和 Hyper 的 runV 项目为基础。Clear 容器使用了英特尔的 VT 技术 来启动轻量级虚拟机，最开始用于解决内核安全问题。Clear 容器运行时在轻量级虚拟机上以自己的内核实例来启动容器，从而解决了共享内核的问题。Hyper 的 runV 是 OCI 运行时的一个实现，OCI 是一个用于定义容器...阅读全文
在引擎层面，API 层面和算子的执行层面上做到了真正的流与批用同一套机制运行。但是在任务具体的执行模式上会有 2 种不同的模式： 下图是不同的执行模式： 对于无限的数据流，统一采用了流的执行模式。流的执行模式指的是所有计算节点是通过 Pipeline 模式去连接的，Pipeline 是指上游和下游计算任务是同时运行的，随着上游不断产出数据，下游同时在不断消费数据。这种全 Pipeline 的执行方式可以： 通过 eventTime 表示数据是什么时候产生的； 通过 watermark 得知在哪个时间点，数据已经到达了； 通过 state 来维护计算中间状态； 通过 Checkpoint 做容错的处理。 这两种各有优劣，可以根据作业的具体场景来进行选择。 对于有限的数据集有 2 种执行模式，我...阅读全文
OpenJDK 14 已于近日 GA，其在性能方面是否有改进、以及有哪些改进引起了不少开发者的关注。本文将会介绍通过运行新的基准测试以考察从 OpenJDK 8 至 14 的所有主要发行版本，同时考察跨多个工作负载的 JVM 性能，以及 OpenJDK 14 与 JVM 先前版本相比性能如何。 此次测试通过在被测试的每个发行版上使用相同的 Java 字节码编译的 Java 程序来查看 JVM 的性能，并使用被测软件包的参考/上游编译版本。为了保证测试受干扰的因素将降至最低，每次都使用相同的选项，除了交换用于测试每个发行版的 OpenJDK x86_64 Linux 构建之外，没有进行任何其他更改。 通过使用 Phoronix 的测试套件，测试内容包含从 SPECjbb 到 Java 2D...阅读全文
目前非常流行的RDBMS PostgresSQL已经在几周前发布了它的第10个版本。由于Postgres的可靠性、节约成本、成熟，当然还有它的开源，已经21岁的Postgres在开发者之中仍旧非常流行。 Postgres 10带来了一些新特性，其中一些特性另开发者感到十分兴奋。10Clouds在博客中详细介绍了其中的一些特性。通过消除主表（master table）中触发器（trigger）的需求，本地分区（native partitioning）现在变得更简单了。这意味着创建分区表将变得更简单，并且从开发者的角度来看，现在从分区数据表中进行查询和插入与在非分区的数据表进行这些操作是完全一致的。 多列统计（multicolumn statistics）是Postgres 10的另一项改进...阅读全文
GitLab 11.10 已正式发布 ，更新亮点包括将管道功能（pipeline）集成到操作面板、将管道用于合并结果以及针对多行合并请求的建议。 轻松查看跨项目的管道健康状况 此版本通过强大的功能增强了 Operations Dashboard，该功能让用户能直接查看管道状态。 即使在查看单个项目的管道状态时，这也很方便，不过在使用 多项目管道 时尤其有用 —— 当拥有微服务架构并且需要运行管道来测试和部署位于多个不同项目仓库中的代码时，这种情况很常见。现在，我们可以方便看到操作面板上所有管道的运行状况 。 针对合并结果运行管道 现在可以在合并之前 针对合并结果运行管道 。这样可以快速捕获只有经常重新定位时才会出现的错误，从而更快地解决管道故障并更有效地使用 GitLab Runner...阅读全文
