：go:embed helloworld/*。 总的来讲，Go1.16 embed 特性很好的填补了 Go 语言在打包静态文件资源的一块原生空白领域。同时也说明了 Go 官方的确在不断地吸收社区的一些良好的想法和经验。 分享 Go 语言、微服务和奇怪的系统设计 ???? 长按关注煎鱼，在知识的海洋里遨游 学习资料分享，关注公众号回复指令： 回复【000】，下载 LeetCode 题解大全。回复【001】，下载 Go 进阶图书 Mastering Go。...阅读全文
，大多数公司都在开源他们的软件，还有一些公司则将Kubernetes这样的技术引入了竞争领域，它已经成为了许多开发人员工作流的基础。 最后，Warner比较关注的是目前对于网络中立性的讨论，下一个阶段的FFC投票会在12月4日进行。 2018年将决定网络中立性的未来，不论结果如何，我们都会受其影响。 查看英文原文：The Hottest Tech Trends in 2018 According to GitHub...阅读全文
的证书颁发机构带来巨大压力。 Hollebeek 称： 将证书寿命迅速缩短到一年，甚至更少，对于许多依赖数字证书保护系统的公司来说，这将带来巨大的成本。这些费用不会换来更加安全的改进，并且这项提案对从事非法活动或冒充合法公司的非法分子不会有任何影响。最主要的一点是，减少证书寿命的任何好处都是属于理论性的，在短期内要付诸实际的话，产生的风险和成本也将难以预测。 该提案于今年早些时候在谷歌员工 Ryan Sleevi 的一次会议上提出，目前仍处于草案阶段，还没有关于何时进行表决的消息。...阅读全文
。”Pigweed 项目团队希望名字有趣，又能反映项目本身的成长，就像快速生长的杂草 Pigweed 一样。 目前，Pigweed 已提供了不少模块，后续将会有更多模块被添加进来。需要注意的是，它仍处于早期开发阶段，目前不适合用于生产。...阅读全文
方法论，就是关于人们认识世界、改造世界方法的经验性的理论，它是一种以解决问题为目标的体系或系统，通常涉及对问题阶段、任务、工具、方法技巧的论述。方法论会对一系列具体的方法进行分析研究、总结并最终提出较为一般性的原则。 这里汇总介绍几种方法论。 吉德林法则 美国通用汽车公司管理顾问查尔斯·吉德林提出：把难题清清楚楚地写出来，便已经解决了一半。只有先认清问题，才能很好地解决问题。这种观点在管理学上被称为吉德林法则。 墨菲定律（Murphy's Law） 主要内容有四个方面：一、任何事都没有表面看起来那么简单；二、所有的事都会比你预计的时间长；三、会出错的事总会出错；四、如果你担心某种情况发生，那么它就更有可能发生。 彼德原理 每个人在层级组织里都会得到晋升，直到不能胜任为止。换句话说，一个人...阅读全文
在微软宣布以 75 亿美元的价格收购 GitHub 后，这个在全球拥有超过 2800 万开发者的代码托管平台即将在微软庞大的云计算框架下进行独立运作。 微软 CEO Satya Nadella，CFO Amy Hood ，GitHub 联合创始人兼现任 CEO Chris Wanstrath ，以及即将上任的 GitHub CEO（也是 Xamarin 创始人）Nat Friedman 昨天在短暂的媒体电话会议中分享了有关此次收购和微软对 GitHub 的后续规划的更多细节。 微软在扩展 GitHub 的覆盖面，以及将平台融入微软生态上有着宏伟的规划，但所有的计划会基于以下两点原则：GitHub 将保持自主性独立运营，GitHub 向所有开发者开放。 1、三大策略将 GitHub 融入微软...阅读全文
在许多互联网领域，尤其是Web PKI和SSL/TLS行业中，我们大多生活在过去的决定中。脆皮密码、差强人意的协议设计以及不怎么标准的软件始终牵绊着前进的步伐。往往一个新操作系统或库的问世都会迅速被大量使用，然后整个生态系统需要花上很多年的时间处理各种遗留的设计缺陷。 随着互联网规模和重要性的增长，我们试图做出更明智的决定，以避免或至少缩短这一周期。最近，两个操作系统进行了更新，反映了两种不同的保持生态健康的做法： Debian推动了其预发行版本的更改，将只支持TLS 1.2；而微软则开始在Windows Server 2008添加TLS 1.2支持。 这两个选择代表了相反的观点 - 一个展望未来，另一个回顾过去。 Debian发布了一个新版本的OpenSSL库，用于其不稳定的构建 - 一...阅读全文
减轻用户迁移到 K8S 的负担。 目前 UK8S 插件还属于正在整理开源的阶段，还没有正式的发布，但我们已经小范围的开放了代码，把我们的插件代码分发给到很多用户，但公开的开源，我们希望做的更加规范一点再进行，因为我们的插件还在不断的迭代中，有一天我们觉得达到一定程度的稳定了，我们就会进行公开开源。 记者：你认为未来 K8S 以及容器的技术方向上比较值得重点关注的技术点是什么？ 叶理灯：虚拟化容器。未来的方向我们相信是 Serverless，这个也是云计算应该做的，持续地为了用户提高效率和降低成本。刚才我也说了，现在用户使用 K8S 还是有资源管理的负担的，不是完全的面向应用来运维，所以需要解决这个问题，让计算节点对用户透明。用户通过 Docker 镜像和配置文件就可以把一个应用跑起来，而不用...阅读全文
在即将过去的一年中，DevOps经历了大规模容器化，许多公司投入了容器化的怀抱。这并不意味着DevOps相关工具已经成熟，但是这些工具为安全改进、容器化和工具集中化奠定了基础。以下是2017年DevOps的5大发展预测。 工具整合 根据Quali公司CTO Joan Wrabetz的说法，DevOps相关工具市场整合的时机已经成熟，这主要归功于消费者需求和公司数量的大规模增长。她提到：“为了简化流程，消费者只会选择其中的几个优秀软件，并且围绕着这些工具，将它们整合到自身的流程当中去。这将会导致越来越多的工具直接提供横跨整个持续交付周期端到端功能。” 另外，由于DevOps公司数量的增长，2017年将会迎来小公司的收购潮。“我们已经看见亚马逊对Chef进行了投资。另外，一些DepOps公司已...阅读全文
Kubernetes 1.7已经发布，该版本聚焦于安全、存储和扩展性等交付特性，其中包括Network Policy API、StatefulSets自动升级策略以及可扩展的API聚合层。Kubernetes的上一个发布版1.6版侧重于解决规模化和自动化上的问题，显然最新的1.7发布版力图为Kubernetes在企业组织中的进一步采用夯实基础。需注意的是，虽然1.7版的核心集群编排功能是以稳定版提供，但是其中给出的一些头条发布特性在文档中被标为Alpha版或Beta版。 新提供的安全特性包括：Network Policy API。该API当前已提升到稳定版，在实现为网络插件时，用户可以设置并强制使用规则，指定可相互通信的Pod（类似于在用的网络/云ACL）；节点授权器（Node...阅读全文
泛型又近了一步。 另外在本次新版本中，像是 template 支持跨行： {{"hello" | printf}} 又或是 Linux 的默认内存管理策略下又从 MADV_FREE 改回了 MADV_DONTNEED 策略，大家在新版本中不再需要设置： GODEBUG=madvdontneed=1 大家若有需求都可以进一步去了解，现在新版本的功能特性已经锁定，基本尘埃落定。 传送门：https://tip.golang.org/doc/go1.16。 分享 Go 语言、微服务和奇怪的系统设计 ???? 长按关注煎鱼，在知识的海洋里遨游 学习资料分享，关注公众号回复指令： 回复【000】，下载 LeetCode 题解大全。回复【001】，下载 Go 进阶图书 Mastering Go。...阅读全文
过多，以至于无法持续。 这个 CD 系统的关键组件是一种控制方法，即谁将接收变更，以及用于部署和测量的自动化工具。在第一步中，经过一系列自动化测试后，变更就从内部推送到 Facebook 员工。在这一阶段发现的任何回归，都会被认为这一进程受阻或者停止。下一步涉及到“ canary deployment ”（金丝雀部署），只推送至生产环境的 2% 。依靠连续的监测来检测问题。如果一切顺利，这些变更将 100% 部署到生产环境中。名为 Flytrap 的工具收集用户报告，并发送任何异常情况的告警。 Facebook 中的 Web 和移动产品遵循两条不同的路径，原生移动变更的部署频率低于 Web 。这两个都由名为 Gatekeeper 的系统控制。除此之外，Gatekeeper 还分离出了部署和发...阅读全文
做得很突出是不够的，不是每个人都适合做管理。要找到好的经理人，需要观察他们是如何与其他员工共事的，看看他们是否具备足够的灵活性并是否能够拥抱变化。要想知道一个人是否适合管理岗位，可以先分配一些小任务给他们，比如让他带实习生或者让他管理一个小项目。经过一段时间的观察后，看看他是否胜任。 培训经理人需要几个月的时间。Calderon建议这个时间不要太长，以免养成不好的习惯，只要等到他们开始理解管理者角色的时候就可以了。在谷歌，这个时间一般是三个月。Calderon说，不要在他们还没开始工作或刚开始工作时就培训他们，而是要让他们先工作几个月，让他们对工作有所了解，并经历一些挑战。到了培训阶段，不要只是纸上谈兵，而是真正赋予他们管理者的角色。 不要一开始就让他们承担太多的工作。一个新经理人刚开始工作...阅读全文
的媒介和支持。 此前，微软曾表示开源世界已对其显得尤为重要。因此即便该公司没有立即就此事给予回应，自由软件基金会还是相当积极地为该公司准备了这么做的台阶。 我们希望微软能够确切地展示出其营销时所述的对‘开源’软件的热爱。若真如此，我们愿为其提供切实的帮助，使之有机会向全世界展示这一点。 显然，自由软件基金会希望微软不只是出于营销的目的泛泛而谈，利用完开源社区的名声就转入漠然。 不过目前的情况是，尽管 Windows 7 的公众支持已经结束，但该公司仍在为付费企业提供扩展激素和支持。至于三年后会怎么样，让我们拭目以待。...阅读全文
因。也有其他人认为，systemd的日志记录并不是很好，二进制日志被很多人所诟病，虽然systemd提供了更快的索引，但二进制日志本身就有问题，而且systemd的日志损坏也不是第一次发生了。而且systemd真正令人反感的是设计不够灵活，对很多人而言，systemd阻止了他们的选择自由，考虑到kFreeBSD分支的软件源无法纳入systemd，为与其他分支保持一致，Debian的开发者尽力避免纳入systemd。但Lennart Poettering本人对此并不在意，并称“Debian GNU/kFreeBSD不过是玩具系统”。 systemd目前还处于中间发展阶段，那些想要超级安全或超级小或超快速系统的人都不适合使用。事实的真相是，systemd的很多反对者并不真正关心“底层”，只是抱怨...阅读全文
前两天我们才报导过 Debian 包维护者 Michael Stapelberg 因对 Debian 社区的现状不满而 宣布退出 Debian 的维护 ，该消息引发了人们对于 Debian 的担忧。11 日，邮件列表上一封标题为“Leaderless Debian”的公开信进一步加深了这种担忧。 Debian 社区目前正在进行领导人选举，3 月 3 日-10 日是候选人提名阶段，然而，截至公开信发出的 11 日，还没有一位符合资格的 Debian 开发者提交申请。 此前的 Debian 领导人 Chris Lamb 一直被寄予厚望，他已经连任了两年，但是今年他公开表示因为一些 Debian 相关的与私人的原因 不参与竞选 。 所以，现在出现了尴尬的情况：“提名期已经结束，竞选期已经开始，但...阅读全文
来源｜Greylock OneFlow社区编译 翻译｜胡燕君、贾川 预告了一整年的GPT-4迟迟没来，人们猜想OpenAI是不是要跳票了，更何况他们之前的得意之作DALL-E也被开源Stable Diffusion打了个措手不及，再不来点深水炸弹业界地位危矣。 不过，就在大家以为今年OpenAI将以沉寂收场时，聊天机器人模型ChatGPT横空出世，让人们看到了AI的更大创造力，聚光灯也再度打到了OpenAI的身上。 今年9月，LinkedIn联合创始人Reid Hoffman与OpenAI首席执行官Sam Altman进行了一场对话，而肩负着宏伟使命且极富远见的Altman就曾预言：AI即将迎来下一个发展阶段。如今，大型语言模型越来越先进，也出现了可以实现文本-图像相互转换的多模态模型，一...阅读全文
。总结报告的形成明确写报告需要的思维和目的后，我们如何形成报告呢？报告形成步骤如下。1.明确项目分析维度项目分析的维度不同，后期确定的指标也会不同。一般以项目总结的目的为基准方向，确定分析维度。分析维度可以从产品立项到发布每个阶段作为分析维度，也可以按照项目中的角色为维度进行分析。以输入法的项目总结为例，按照产品、开发、测试的测试角色为横向维度进行分析，然后纵向深入分析每个维度的数据。2.项目指标抽取我们在进行指标抽取时，会先根据项目分析维度形成一个指标集，如下图。指标的选取方式有两种：根据问题选取指标和固定通用指标。根据问题选指标是先收集项目中明确感知到的问题，对问题进行归类（归类分组思想），然后选取可以反映此问题的指标进行数据分析，一个问题可能对应多个指标。以输入法为例，当前版本出现...阅读全文
Kubernetes v1.21 下个月就要发布了（v1.21.0 将于 4 月 8 日发布），本文梳理该版本带来的新特性，以便你为下个月的升级做好准备。PodSecurityPolicy 弃用PodSecurityPolicy（PSP）是 Kubernetes 1.8 开始就支持的 Beta 特性，大量应用于容器的安全策略控制。但由于其 API 不够灵活、认证模型不够完善且配置更新繁琐等缺陷，PodSecurityPolicy 将在 v1.21 正式弃用[1]，并将在 v1.25 中从代码库中删除。已经使用 PodSecurityPolicy 的用户建议迁移到 Gatekeeper[2]。不可变 ConfigMap/Secret 进入稳定版当集群包含大量 ConfigMap 和...阅读全文
斯曾在2000年为 Linus Torvalds 提供一份工作，条件是他停止在 Linux 上的开发。Linus 拒绝了。 13、Linux 有多成功？它的长期竞争对手微软，在90年代初曾试图“熄灭”该项目，到现在却在利用 Linux 进行服务器业务，甚至在为内核开发做贡献！ 14、说到贡献，谷歌、英特尔、华为、三星、红帽、Canonical 和 Facebook 是近年来 Linux 内核开发的主要贡献者。 15、Linus 出生于芬兰，一个双语国家，并认为瑞典语是他的“母语”。他说，由于发音不同，他常常觉得用英语说话“不舒服”，但却更喜欢阅读英文书籍。 16、Linux 可能是现在最大的自由软件项目（参见第一条），不过在1991年首次发布时，它仅有约 10 万行代码。 17、在重新调整其...阅读全文
自 2 月 7 日开始，Java/JDK 12 就进入了 RC 阶段。按照发布周期，美国当地时间 3 月 19 日，也就是今天 Java 12 正式发布了！ △ JDK 12 GA 发布 Java 12 带来了一系列新特性： 189Shenandoah: A Low-Pause-Time Garbage Collector (Experimental) 低暂停时间的 GC230Microbenchmark Suite 微基准测试套件325Switch Expressions (Preview) Switch 表达式334JVM Constants API JVM 常量 API340One AArch64 Port, Not Two 只保留一个 AArch64 实现341Default...阅读全文
本文最初发布于 Better Programming 博客，经原作者授权由 InfoQ 中文站翻译并分享。 随着 DevOps 的出现频率越来越高，很多企业都在蠢蠢欲动，想要设计和开发 DevOps 平台。工欲善其事必先利其器，本文为大家总结了 DevOps 各个阶段可以选择的工具，也许 DevOps 平台的技术选型在这一篇文章中就可以完成。 DevOps 的目标是持续改进，因此技术选型也是分阶段的。 DevOps 技术类别 规划工具 在规划阶段最重要的是要制定共同的目标、保证透明度和赋权。目前业内比较常用的规划工具主要包括 GitLab、TaskTop、CollabNet VersionOne、Pivotal Tracker、Trello 和 Azure Boards。 GitLab...阅读全文
优势的角度来看，尽管AMD、英特尔已经证明了多芯片架构具有一定的经济性，但实际上，与微缩晶体管相比，芯片万能胶并不是在所有时候都能带来最大的成本优势。清华大学交叉院博士研究生冯寅潇和清华大学交叉院助理教授马恺声发表了一篇有关Chiplet成本计算的论文，通过建立Chiplet精算师的成本模型对多芯片集成系统的成本效益进行精准评估。结果发现，现阶段的Chiplets方案只有在800平方毫米的大芯片上才真正有收益，且工艺制程越先进，收益效果越明显。对于5nm芯片系统，当产量达到2千万时，多芯片架构才开始带来回报。戴伟民也表示，不是所有芯片都适合用chiplet的方式，不要为了拆分而拆分，不少情况下单颗集成的系统芯片（SoC), 如基于FD-SOI工艺集成射频无线连接功能的物联网系统芯片，更有价值...阅读全文
。 在 2019 年，将会发生从 CI 管道到 DevOps 装配线的转变。DevOps 装配线专注于自动化和连接多个团队执行的活动，例如开发人员的 CI，运维人员的基础架构配置和配置管理，测试人员的测试自动化，SecOps 的安全补丁，发布负责人的语义版本控制和部署到多种环境，等等。 下图展示了单个应用程序或服务的典型装配线： 自动化将成为主要焦点 关于 DevOps，我们谈论了很多自动化方面的内容。如果可能的话，零接触（zero-touch）自动化就是未来的发展方向。这并不是说你一定要自动化一切，只是说如果有必要，你就应该能够做到。了解 DevOps 周期的六个“C”，并确保在这些阶段之间应用自动化，这才是关键，这将是 2019 年的主要目标。 测试人员要学习编码 DevOps 对知道如何编...阅读全文
今天我们公布了Kubernetes 1.7，这一里程碑版本引入了更为强大的安全性、存储以及扩展性因素，旨在满足Kubernetes在广泛企业环境下所面临的实际需求。 这次发布的版本中安全方面的改进包括加密的Serect，Pod到Pod通讯的网络策略，限制kubelet访问的节点授权器（node authorizer），和客户端/服务端 TLS 证书轮换。 对于在Kubernetes上伸缩数据库的用户，这次版本有一个重要特性向StatefulSet添加了自动化的更新，并增强了对DaemonSet的更新。同时我们宣布对本地存储和用于更快速伸缩StatefulSet的加速模式（burst mode）的alpha支持。 同时，对于高级用户，这次版本中的API聚合允许用户提供的API服务器和...阅读全文
一个待处理事件的列表，使用非阻塞 I/O 方式调用“事件处理器”来处理该请求。其处理方式称为“多路 IO 复用方法”，常见的包括以下三种：select 模型、poll 模型、epoll 模型。 针对上面的技术我特意整理了一下，有很多技术不是靠几句话能讲清楚，所以干脆找朋友录制了一些视频，很多问题其实答案很简单，但是背后的思考和逻辑不简单，要做到知其然还要知其所以然。如果想学习Java工程化、高性能及分布式、深入浅出。微服务、Spring，MyBatis，Netty源码分析的朋友可以加我的Java进阶群：433540541，群里有阿里大牛直播讲解技术，以及Java大型互联网技术的视频免费分享给大家。 四. Nginx 设计架构 Nginx 服务器使用 master/worker 多进程模式。多...阅读全文
、紫光展锐等公司也加入了RISC-V联盟，其中华米科技今年9月份还宣布了基于RISC-V指令集的首款智能穿戴芯片黄山1号。 不过RISC-V前景虽好，但是现在还在起步阶段，包括RISC-V基金会本身的运作也需要向Linux基金会这样的成熟社区学习，所以这次合作对RISC-V阵营意义重大，Linux软件生态在RISC-V处理器的开发、优化、支持等方面都会推动RISC-V建立更强大的生态系统。...阅读全文
访问：天猫6·18 “开门红”超级红包活动主会场 | 手机版京东6·18“京享红包”25日12点开始领取 最大面额高达18618元 （图 via Orozco 2018）据悉，工程团队中有三位核心成员，且他们对 QUIC 的承诺深信不疑。其中包括 IETF QUIC 工作组只需 Mark Nottingham，协议主要贡献者兼 quicly 创作者 Kazuho Oku，以及核心文档集编辑、杰出工程师 Jana Iyengar 。最新消息是，互联网工程任务组（IETF）已经发布了 RFC 9000，且得到了 RFC 9001 / 9002 / 8999 支持，意味着 QUIC 已从草稿阶段转向了 1.0 正式版。与此同时，基于 QUIC 的 HTTP/3 也有望紧随其后很快发表。对于...阅读全文
月）。 而在为期3个月的开发周期中（2019年2月至5月），被选择的提案将会被实现，每位使用者都可以体验新功能并进行反馈（评估流程的第4步）。最后，在短暂的冻结期后（2019年5月1日），Go 开发团队会最终决定是否永久保留新功能（并保证这些功能与 Go 1 兼容），或是放弃这些功能（评估流程的最后一步）。 Go 开发团队表示这是首次采用这一流程，因此在冻结阶段将会是反思这个流程，并在必要时进行调整的好机会。我们也不妨拭目以待吧！...阅读全文
/free/? sc_channel=seo&sc_campaign=acquisition_CN&sc_medium=backlink&sc_content=developer 一般我们在AWS上建立了一个集群服务器，则很有可能我们要对这种这一群集的全部服务器虚拟机统一的实际操作，例如安裝一个程序包，运行某一服务项目，布署某一文档这些。倘若大家假如仅有一台网络服务器，那全部流程非常简单，立即根据ssh登陆到网络服务器，并手动式实行一系列的指令就可以。但要是使用的另一半是成千上万的网站服务器的情况下，大家就必须一个能完成群集实际操作(collectiveoperation)的专用工具了。现阶段这种的专用工具许多，包含Ansible，Chef，Fabric，Puppet，Saltstack，文中...阅读全文
/? sc_channel=seo&sc_campaign=acquisition_CN&sc_medium=backlink&sc_content=developer 一般我们在AWS上建立了一个集群服务器，则很有可能我们要对这种这一群集的全部服务器虚拟机统一的实际操作，例如安裝一个程序包，运行某一服务项目，布署某一文档这些。倘若大家假如仅有一台网络服务器，那全部流程非常简单，立即根据ssh登陆到网络服务器，并手动式实行一系列的指令就可以。但要是使用的另一半是成千上万的网站服务器的情况下，大家就必须一个能完成群集实际操作(collectiveoperation)的专用工具了。现阶段这种的专用工具许多，包含Ansible，Chef，Fabric，Puppet，Saltstack，文中主要详细介绍Ansible和...阅读全文
我们正处于gRPC采用的开始阶段，期待社区提供更多的工具和技术。很高兴能够加入这个充满活力的社区，并对未来的项目有一些想法，我们希望看到这些项目是开放源代码或我们自己写的。 gRPC工具的当前状态 gRPC比较新，缺乏可用的开发工具，特别是与经验丰富的REST over HTTP / 1.1协议相比。搜索教程和示例时，这一点尤其明显，因为只有少数有用的信息。二进制格式也使消息不透明，需要努力解码。虽然有一些选择，例如JSON代码转换器可以帮助，但预计需要做一些基础工作，以便为gRPC提供顺畅的开发体验。 我们喜欢用Apiary 来记录外部API。使用服务协议缓冲区（protobuf）文件自动生成交互式文档的等价物，将是理想的有效的内部通信gRPCAPI。protobuf文件的静态分析在运行时...阅读全文
为客户提供SEO顾问服务的时候，经常遇到一些作为外部顾问不方便全程参与的情况。比如有的公司要新建网站，或者现有网站推到重来，问我能否从一开始就参与，提供SEO建议。 网站规划设计阶段就考虑SEO当然是好事，但作为一个远在异国的顾问，参与到这种需要大量深度讨论、沟通、协调的过程中，实在是不好操作，内部SEO人员更适合这种工作。 有的客户公司规模比较大，技术开发、内容、SEO等各部门是分开的，SEO部门的很多需求是要提交给技术、运营等部门实施的。反过来，其它部门的需求也由技术部门实施，但可就不一定经过SEO部门同意了。这个过程中就可能产生对SEO的不良影响。 也有的公司人员流动频繁，即使原先的开发人员都经过SEO培训，也还是会有完全不了解SEO的新人加入团队。 这些情况都需要有一个技术部门必须...阅读全文
的永久存储和查询能力。 Compactor则是对Bucket里的历史数据进行采样或者清理，有具体需求后再自行研究即可。 上述组件均是可选的，没有历史数据永存需求的可以直接忽略。 方案2：thanos receive + thanos querier thanos提供的另一种方案是计算与存储分离，利用thanos receive组件部署一个分布式存储集群，然后令prometheus通过remote write机制直接写入到thanos receive集群完成分布式存储，这样prometheus本身就无状态了。 再利用thanos querier反向代理到thanos receive集群，最终对外提供统一的promql查询入口，这个阶段就没有prometheus什么事了。 这套方案的工作原理如下...阅读全文
} /*** * go特有变量交换 */ func SwapGo(list []int, i, j int) { list[i],list[j]=list[j],list[i] } /*** * go变量高阶交换(不推荐，一般不好理解) */ func SwapGoAdvanced(list []int, i, j int) { list[i]=list[i]+list[j] list[j]=list[i]-list[j] list[i]=list[i]-list[j] } 运行排序方法 使用终端执行go get github.com/e9ab98e991ab/go-algorithm执行touch main.go执行vim main.go拷贝下方代码块代码到main.go文件中wq保存后直接执行go run...阅读全文
人物的上门，也让 Joey 觉得非常不可思议。 年轻时的 Joey Hess 穿着 Debian 文化衫 可惜的是，1997年12月，Bruce Perens 就从 Debian 当家的位置退了下来，与另一位声名显赫的人物 Eric Raymond 一起创立了 OSI （Open Source Initiative），成为了开源的开拓者。 当时，Debian 社区内有一些争议声音表示，Bruce Perens 是个独裁者，一手包揽了所有事情。因此，Bruce Perens 离开之后，Debian 开始制定 Debian 章程（Debian Constitution），来制约领导人的权利。 2014年，针对是否采用 systemd 这种 init 进程，Debian 内部开始一场持久且激烈的争...阅读全文
有更好的吞吐量，内置的分区，冗余及容错性，这让Kafka成为了一个很好的大规模消息处理应用的解决方案。消息系统 一般吞吐量相对较低，但是需要更小的端到端延时，并尝尝依赖于Kafka提供的强大的持久性保障。在这个领域，Kafka足以媲美传统消息系统，如ActiveMR或RabbitMQ 站点的用户活动追踪: 为了更好地理解用户行为，改善用户体验，将用户查看了哪个页面、点击了哪些内容等信息发送到每个数据中心的Kafka集群上，并通过Hadoop进行分析、生成日常报告。 流处理：保存收集流数据，以提供之后对接的Storm或其他流式计算框架进行处理。很多用户会将那些从原始topic来的数据进行 阶段性处理，汇总，扩充或者以其他的方式转换到新的topic下再继续后面的处理。例如一个文章推荐的处理流程...阅读全文
经过很长一段时间的开发，TiDB 终于发了 RC3。RC3 版本对于 TiKV 来说最重要的功能就是支持了 gRPC，也就意味着后面大家可以非常方便的使用自己喜欢的语言对接 TiKV 了。 gRPC 是基于 HTTP/2 协议的，要深刻理解 gRPC，理解下 HTTP/2 是必要的，这里先简单介绍一下 HTTP/2 相关的知识，然后在介绍下 gRPC 是如何基于 HTTP/2 构建的。 HTTP/1.x HTTP 协议可以算是现阶段 Web 上面最通用的协议了，在之前很长一段时间，很多应用都是基于 HTTP/1.x 协议，HTTP/1.x 协议是一个文本协议，可读性非常好，但其实并不高效，笔者主要碰到过几个问题： Parser 如果要解析一个完整的 HTTP 请求，首先我们需要能正确的读出...阅读全文
人人适用。 1 选择“复利增长” 复利具有神奇的魔力，现在处处都在强调复利，这其中的奥秘就是指数曲线，因为指数曲线是创造财富的关键。 一家中型企业的价值如果按照每年50%的速度增长，那么它的规模可以在短时间内极速扩张。世界上少有企业具有真正的网络效应和高度的可扩展性，但是随着技术进步，这种情况会逐渐改变，这值得我们不断为之努力。 对个体的人生道路来说，我们也应该走成一条指数曲线，也就是说，我们要遵循不断向右增长的人生轨迹。在进行职业规划时，要选择具有复合效应的职业，而大多数职业的发展轨迹都是一条线性直线。 在线性职业领域，工作二十年的效率并不会比工作两年的效率高，像这样的职业不利于个人发展，我们需要的是一份能保持不断学习的职业。随着职业发展我们需要产出越来越多的成果。达成这一目标的途径多种多...阅读全文
序。Ubuntu的标准安装程序被设计成主要为了要求尽量少的用户输入，以便确保安装简单、速度尽可能快。要是你遇到任何问题，可以试试专家模式安装程序，这是Debian安装程序稍稍改头换面的版本。 Debian安装程序显然有其他优先事项。比如说，其图形化版本是GUI，这有别于主要在工具包中的基于文本的安装程序：除了让害怕使用命令行的那些用户感到安心外，没有任何优势可言。 相比之下，Debian之前的声誉是，只要按照在线操作说明，此外每个阶段接受默认设置，通常就可以安装Debian。然而，如果你决定亲自选择，可以在安装过程的每一步选择每个设置，这大大增加了安装所需的时间。Debian安装程序并不是迎合没有经验的用户，而是兼顾所有不同水平的用户。它不是很漂亮，但是不用编译自己的程序包，所以你不可能找到...阅读全文
询时必须提供相同的值。在下面的例子中，这个headers是使用nginx反向代理设置的。架构图Cortex架构（源）Nginx/gateway–一个位于cortex前面的反向代理，将收到的所有请求转发给相应的服务。分发服务器Distributor–处理传入的指标，将其拆分为多个批次，然后将其传递给Ingesters。如果复制因子replication factor设置为> 1，则数据将发送到多个实例。接收器Ingester–此服务负责将数据写入已配置的存储后端。Ingester是半状态的，因为它们保留了最后12个小时的样本。这些样本将被批处理并压缩，然后再写入块存储。查询前端Query Frontend–一个可选组件，用于对查询请求进行排队，并在失败时重试它们。结果也被缓存以提高性能查询器...阅读全文
丝雀部署，然后是一段时间的延迟，然后增量到生产环境的其余部分，每个步骤之间还有一些进一步的延迟。 select步骤是通过名为Target Selection的无状态服务来实现的。这个服务提供了一个RPC方法： 输入是上线的asset列表和哪些asset已经更新的信息输出是还没有更新，但是已经准备更新的asset列表。这个列表通常是空的——比如，因为推出阶段中间配置了一些延迟。 Target Selection通过Prodspec配置，并且实现如下策略： 一次性推送所有东西以预先定义好的顺序，一次推送一个集群推送一个asset，随后所有其他asset 我们发现，即使在单次推出的时间范围内，也需要能够应对不断变化的环境。比如，如果推出持续两周并影响数百个asset，则在推出过程中可能会添加和删除...阅读全文
ML 等语言的 currying 自己动手实现语言特性 在基本学会了各种语言特性，能用它们来写代码之后，下一步的进阶就是去实现它们。只有实现了各种语言特性，你才能完全地拥有它们，成为它们的主人。否则你就只是它们的使用者，你会被语言的设计者牵着鼻子走。 有个大师说得好，完全理解一种语言最好的方法就是自己动手实现它，也就是自己写一个解释器来实现它的语义。但我觉得这句话应该稍微修改一下：完全理解一种“语言特性”最好的方法就是自己亲自实现它。 注意我在这里把“语言”改为了“语言特性”。你并不需要实现整个语言来达到这个目的，因为我们最终使用的是语言特性。只要你自己实现了一种语言特性，你就能理解这个特性在任何语言里的实现方式和用法。 举个例子，学习 SICP 的时候，大家都会亲自用 Scheme 实现一个...阅读全文
block_size * 3 大小 hdfs dfsadmin -setSpaceQuota 4k /user/root/dir # 限制空间大小4KB hdfs dfs -put /root/a.txt /user/root/dir 生成任意大小文件的命令: dd if=/dev/zero of=1.txt bs=1M count=2 #生成2M的文件 清除空间配额限制 hdfs dfsadmin -clrSpaceQuota /user/root/dir 5.2. HDFS 的安全模式 安全模式是hadoop的一种保护机制，用于保证集群中的数据块的安全性。当集群启动的时候，会首先进入安全模式。当系统处于安全模式时会检查数据块的完整性。 假设我们设置的副本数（即参数dfs.replication）是3，那么...阅读全文
出的部分解决方案至今仍在试水阶段，具体如下： （1）第一关，数据输入者所在国是否被列入“充分性认定白名单”： 指欧盟一般数据保护条例（GDPR）第45条所规定的，由欧盟委员会以“实施法案”方式确定的数据跨境传输“白名单”。 一旦欧盟以外的某国家或地区（也包括国际组织或行业）进入该“白名单”，就意味着欧盟境内的个人数据可以更加自由地传输到该国家或地区（国际组织或行业），而不再受GDPR中诸如数据跨境传输协议、BCR认证等严格条件的限制。 “充分性认定”的门槛和标准比较高，且欧盟方面在判定、审查、修改、撤销等程序中自由裁量权十分大，目前全球范围内也仅有瑞士、以色列、日本等少数国家获得了欧盟“充分性认定”。 （2）第二关，若所在国未进入上述“充分性认定白名单”，则判断是否提供适当协议、行为准则为跨...阅读全文
被包含 db.ruochen.aggregate( { $project: { _id: 0 title: 2, by: 1, }} ); 如此即可不包含_id, 非0可表示显示字段，负数也可以表示显示该字段 $match 获取分数大于70或小于等于90的记录，然后把符合条件的记录送到下一阶段$group 管道操作符进行处理 db.ruochen.aggregate([ {$match: {score: {$gt: 70, $lte: 90}}}, {$group: {_id: null, count: {$sum: 1}}} ]) 当 match 条件和 group 同时存在时，顺序会影响检索结果，必须先写 match 在前面 $skip 过滤前5个文档...阅读全文
nsenter 是一个可以在指定进程的命令空间下，运行程序的命令，它位于 util-linux 包中。 nsenter 用途 nsenter 的一个典型用途是进入容器的网络名字空间，进行网络相关的排障。大多数容器，为了保持轻量，没有包含较为基础的命令，比如说 ip，ping，telnet，ss，tcpdump等，这就给容器内的网络调试带来困扰。这时就可以使用 nsenter 命令仅进入到容器的网络命名空间，使用宿主机的相关命令调试容器网络。 此外，nsenter也可以进入 mnt, uts, ipc, pid, user 命令空间，以及指定根目录和工作目录。 nsenter 使用 首先看下nsenter命令的语法： nsenter [options] [program [arguments...阅读全文
Visual Studio Code 刚刚公布了其 2018 发展路线图。开发团队表示，他们通常会先制定目标，然后将工作分解在后续的 6-12 个月时间内。在当前的规划中，主要会从以下三个角度进行改进： Happy Coding： 为新用户和现有用户提供更愉快的编码体验。 Node、JavaScript 和 TypeScript： 为各种语言和框架实现卓越的端到端体验。 A Rich Extension Ecosystem： 提供更丰富的扩展功能，构建良好的生态系统。 各项大致内容（仅供参考） Happy Coding 计划针对以下方面进行改进： Fundamentals：提高启动性能、减少资源/内存消耗、提高可访问性、支持社区贡献的翻译语言包、改善更新体验、提高可维护性等...阅读全文
trzsz ( trz / tsz ) 是一个兼容 tmux 的文件传输工具，和 lrzsz ( rz / sz ) 类似，并且有进度条和支持目录传输。trzsz-iterm2 是 trzsz 在 iTerm2 上使用的客户端。GitHub: https://github.com/trzsz/trzsz安装指南用 Python3 安装sudo python3 -m pip install --upgrade trzsz-iterm2 用 Homebrew 安装brew update brew install trzsz 配置指南找出 trzsz-iterm2 安装的绝对路径 ( 可以是软链，但不支持相对路径 )。which trzsz-iterm2 下文中的 /usr/local/bin...阅读全文
的文件，大多反馈系统信息的实时情况（进程、内存、cpu、设备信息等）。结论： /proc/meminfo 是 /proc 文件系统下保存你内存相关信息的"伪文件"。2.2 命令输出简介每个发行版输出都有一定差异，我们以debian8 4.19.x发行版为例。root@4f996feeb851:~# free -m total used free shared buffers cached Mem: 1991 1909 81 4 155 836 -/+ buffers/cache: 917 1073 Swap: 1023 1 1022大部分的命令输出意思，大家可以在man文档中找到解析，这里不做赘述。used: 已使用的内存 used = total - free -buffers...阅读全文
