隐私公链 Beam 宣布完成 200 万美元融资，将使用该笔资金发展 DeFi 生态，包括启用 AMM、LP、抵押平台以及算法稳定代币等。同时，Beam 治理正在从 Beam 基金会过渡到 BeamX DAO，还将在 Beam 区块链上发布 BeamX 专用治理代币 BEAMX。BEAMX 总供应量为 1 亿枚，最初将通过 Beam 钱包支持和通过质押 BEAM 分发新治理代币。 此外，Beam 已发布 6.0 版本，并将在区块高度 1280000 处进行启用 Shaders （智能合约）的硬分叉，旨在发展 DeFi 生态。Beam 还将在 6 月中旬通过硬分叉在主网上线 Beam 虚拟机（BVM），还在与原生 DApp 共同建立通往以太坊的去中心化桥梁，之后将扩展到币安智能链和波卡...阅读全文
Kong 1.3 发布了，此版本亮点包括支持原生 gRPC 代理、上游 TLS 交叉认证，以及一系列新功能和性能改进。 原生 gRPC 代理 越来越多的用户转向微服务架构，并且希望有对原生 gRPC 代理的支持，Kong 1.3 解决了这个问题，为支持 gRPC 的基础架构带来更多可控性和可见性。路由和服务条目的协议属性现在可以设置为 grpc 或 grpcs，这对应于通过明文 HTTP/2（h2c）的 gRPC 和通过 TLS HTTP/2（h2）的 gRPC。 这一功能的关键优势在于： 简化运作流程。为用户的 gRPC 服务添加 A/B 测试、自动重试和断路保护，以提高系统可靠性。更具观察性。为 gRPC 服务增强日志记录、分析与 Prometheus 集成。 上游 TLS 交叉认证...阅读全文
Bootstrap 4 正式发布后的两个多月，Bootstrap 4.1 发布了。此次更新包括程序修复、文档更新、构建工具更改，以及新增了一些功能。 值得注意的是，自 Bootstrap 4 发布以来，文档地址采用了版本化设置的方式，这意味着每发布一个新的次要版本都会带来一个新的文档地址。今天发布的这个版本也为文档地址提供了新的 URL，getbootstrap.com/docs/4.1/，当然之前的文档地址 getbootstrap.com/docs/4.0/ 仍可正常使用。 主要更新内容如下： 增加了新的自定义范围表单控件 添加了新的.carousel-fade修改器，可以将轮播从水平滑动切换为交叉淡入淡出 为明文下拉项目添加了新的 .dropdown-item-text 增加了新的...阅读全文
gRPC 1.23.0 发布了。gRPC 是 Google 开源的高性能、通用 RPC 框架，面向移动和 HTTP/2 设计，是由谷歌发布的首款基于 Protocol Buffers 的 RPC 框架。gRPC 基于 HTTP/2 标准设计，带来诸如双向流、流控、头部压缩、单 TCP 连接上的多复用请求等特性。这些特性使得其在移动设备上表现更好，更省电且节省空间占用。 主要更新内容如下： Core 反向移植 #19924 到 v1.23.x. (#19935)为自定义 iomgr 添加缺少的 APP 回调上下文 (#19687)将 DNS 重新解析期间的下限提高到 30 秒 (#19661)确保在 H2 的框架中至少有一个标题 (#19657)在使用 gevent 时分叉时修复段错误...阅读全文
关。 18. 针对单点故障——实施冗余。 19. 为了容错性和持久性——实施数据复制。 20. 对于用户到用户的快速通信 — 使用 Websockets。 21. 分布式系统中的故障检测——实现心跳。 22. 数据完整性——使用校验和算法。 23. 高效的服务器扩展——一致性哈希。 24. 去中心化数据传输——考虑 Gossip 协议。 25. 基于位置的功能 — 使用四叉树、Geohash 等。 26. 避免特定的技术名称 — 使用通用术语。 27. 高可用性和一致性的权衡——最终一致性。 28. 对于IP解析和域名查询——DNS。 29. 处理网络请求中的大数据——实施分页。 30. 缓存删除策略 — 首选...阅读全文
较于PHP、Python、Java来说，JavaScript是最有可能在物联网大行其道的解释性语言。 JavaScript在浏览器没有对手，nodejs在服务器端也在不停的攻城拔寨，积累了大量的资源，构建了一个完整的应用开发生态环境。 JavaScript语言本身特点适合互联网，事件驱动，异步使单线程处理网络事件得心应手。 JavaScript已经跨界到物联网，受到了行业巨头的关注，各种项目发展的如火如荼。 未来的物联网开发 如果JavaScript在物联网获得成功，那么物联网的开发将会发生巨大的变化。 底层驱动由C实现，应用开发者不需要关注硬件，大量的互联网、移动互联网应用开发者加入物联网开发。 传统的交叉编译、烧写、调试的开发方式使用范围将急剧缩小 所见即所得，上位机和下位机的架构由C...阅读全文
》（LFS）是杰勒德·比克曼斯等人编写的久负盛名的安装Linux的教科书，描述了从源代码编译Linux系统的方法。这本书可以从在Linux From Scratch网站上免费下载到，下载链接如文末。书中详细地描述了如何从零开始构建一个完整的 Linux 系统，不过 LFS 包含的套件较少，一般来说 BLFS 提供的套件更多，其几个相关的子项目有如下这些： Beyond Linux From Scratch（BLFS） 标准LFS仅仅安装了足够让系统启动的基本软件，以及使新系统能够编译新软件包的开发工具。BLFS包括了更多的软件包，且都有相应指导。 Crosss Linux From Scratch（CLFS） 为需要进行交叉编译（即在一个平台上编译另一个平台的代码）的用户提供指导，正式版本为1.0...阅读全文
优势的角度来看，尽管AMD、英特尔已经证明了多芯片架构具有一定的经济性，但实际上，与微缩晶体管相比，芯片万能胶并不是在所有时候都能带来最大的成本优势。清华大学交叉院博士研究生冯寅潇和清华大学交叉院助理教授马恺声发表了一篇有关Chiplet成本计算的论文，通过建立Chiplet精算师的成本模型对多芯片集成系统的成本效益进行精准评估。结果发现，现阶段的Chiplets方案只有在800平方毫米的大芯片上才真正有收益，且工艺制程越先进，收益效果越明显。对于5nm芯片系统，当产量达到2千万时，多芯片架构才开始带来回报。戴伟民也表示，不是所有芯片都适合用chiplet的方式，不要为了拆分而拆分，不少情况下单颗集成的系统芯片（SoC), 如基于FD-SOI工艺集成射频无线连接功能的物联网系统芯片，更有价值...阅读全文
MongoDB 服务器都很重要。尤其是，除非有非常好的理由要使用mapReduce、group 或 $where，否则你应该 在配置文件中设置 javascriptEnabled:false，禁用 JavaScript。因为标准 MongoDB 的数据文件是不加密的，另外， 使用专门的用户运行 MongoDB 也是一个明智的做法，对数据文件的完全访问仅限于那个用户，这样就可以使用操作系统自带的文件访问控制了。 没有设计一个模式 对于模式，MongoDB 没有强制要求。这不是说它不需要模式。如果你真想保存文档而又没有一致的模式，那么你可以非常快速、简单地保存它们，但是 检索会十分麻烦 。 “MongoDB 模式设计的六大经验原则 ”是一篇值得一读的经典文章，而第三方工具（如 Studio 3T）提供的类似...阅读全文
-E以及近期火出科技圈的ChatGPT。 无论是个人才智和财富，还是远见和野心，Sam Altman显然是标杆性的“成功人士”。 在离任YC总裁的那一年，曾与无数创业者和技术人才交流过的Sam Altman发表了一篇博客，总结了他眼中获得成功所要具备的13个特质，如果你渴求成功，或者至少希望自己变得优秀，这篇博客对你的个人成长将有所启发。如果你恰好在职业生涯早期就看过，无疑是一种幸运。 不同于热衷分享虚头巴脑的鸡汤式成功学的成功人士，Sam Altman给出的这篇“成功学”建议具有可执行性，最显著且可贵的一个特点是——不装。 注意，Sam Altman这篇文章的原标题是“how to be successful（如何取得成功）”，但这13条特质并不是一个人必然取得成功的充分或必要条件。 要知道...阅读全文
系统的很大一部分现在已经有了这样的预期状态抽象层，而不再依赖工作流的状态——这是一个广泛影响业界的趋势。 — 1 — 术语 运行一个现代化的服务有很多必要部分。特别在谈论基础架构即服务时，有些术语很混乱。比如，谁是“用户”？人还是使用基础架构的服务？还是终端用户？或者别的什么？ 图1展示了本文所设计的各个参与方： 图1：围绕“服务”的术语 服务是某个团队想要运行的面向用户的系统，比如Gmail或者Map。服务由多个内部子服务组成——比如，Gmail服务的检测垃圾邮件的服务仅仅是组成Gmail的众多服务之一。 为了帮助解释本文的观点，我们会提到Shakespeare服务[1]的服务器部分，这是一个假象的服务，如图2所示。 图2：简单的Shakespeare服务，LB是“负载均衡器” 这个服务是...阅读全文
分配器在固定大小的内存池中可实现即时内存分配，这能够显著减少创建一个会话的时长； 6，树型存储：侧重于使用作者多年前开发的弹性二叉树，实现了以O(log(N))的低开销来保持计时器命令、保持运行队列命令及管理轮询及最少连接队列； 7，优化的HTTP首部分析：优化的首部分析功能避免了在HTTP首部分析过程中重读任何内存区域； 8，精心地降低了昂贵的系统调用，大部分工作都在用户空间完成，如时间读取、缓冲聚合及文件描述符的启用和禁用等； 所有的这些细微之处的优化实现了在中等规模负载之上依然有着相当低的CPU负载，甚至于在非常高的负载场景中，5%的用户空间占用率和95%的系统空间占用率也是非常普遍的现象，这意味着HAProxy进程消耗比系统空间消耗低20倍以上。因此，对OS进行性能调优是非常重要的...阅读全文
在真正的生产环境中，如何合理的分配服务器资源、提高利用率、让整个集群运行的更加稳定使得 k8s-scheduler 这个角色在集群中的地位愈发重要。 kube-scheduler的预选(过滤)和精选(打分) api-server会将创建pod的请求发送给kube-scheduler，并且将pod信息记录在etcd数据库中。之后kube-scheduler会根据预选（过滤）规则，首先过滤掉一部分node节点中的pod，没有被过滤掉的pod可以看做是可以被调度的pod，之后再通过更加严格的规则给剩下的pod打分，这一步也叫作优选。打分最高的pod可以看做被优先分配到pod任务。 调度流程简介 创建pod的命令被api-server的api接口接收到。api-server将pod信息存储在...阅读全文
一、SVN切换分支操作介绍SVN（Subversion，下文简称SVN）是一种版本控制系统，它提供了一系列的命令行工具来管理源代码。在代码的开发过程中，可能会需要更改当前工作目录下所处的分支。SVN提供了switch命令供用户进行分支切换操作，该命令只修改当前工作目录下原本的模块链接并不会真的修改目标URL中的版本库。在SVN中，一个版本库可能会有多个分支，我们可以通过checkout命令来创建这些分支，也可以使用branches工具来进行分支的删除、移动、查看等，这些工具都是由SVN提供的。SVN提供了非常完善的分支管理机制，让我们可以方便地在开发过程中，随时随地地更换所处的分支。二、SVN切换分支常用命令及其参数介绍切换分支是SVN的基本操作之一，下面是一些常用的命令及其参数。大家可以...阅读全文
每次项目进度都很紧张、项目发版时间总是一延再延、每个版本bug数量堆积成山、测试期间各种bug总是层出不穷、临近上线发现严重bug，如果项目经理总是被这些问题围绕，那么项目总结迫在眉睫。项目经理如何进行项目总结才能让项目顺利进行，让领导一看就喜欢，今天把经验分享给大家，帮助你做好项目总结。总结的思维模式想写好一份项目总结，总结人员必须具备一定的结构化思维，对问题、数据进行结构分析，且能够通过结构化思维表达出来。结构化思维具备以下四个特点。结论：问题比较多的时候，要进行抽象归纳，做到抓大放小，先解决当前最主要的问题。总结的目的✤对项目进行复盘，发现项目中存在的问题，针对问题找到根本原因并提出解决方案；✤提高项目质量，让项目“健康”前行;✤通过数据衡量当前版本的质量，对项目整体情况进行评估...阅读全文
在Linux的内存分配机制中，优先使用物理内存，当物理内存还有空闲时(还够用)，不会释放其占用内存，就算占用内存的程序已经被关闭了，该程序所占用的内存用来做缓存使用，对于开启过的程序、或是读取刚存取过得数据会比较快。 一. 内存使用说明 Free 命令相对于top 提供了更简洁的查看系统内存使用情况： [root@debian ~]$ free total used free shared buffers cached Mem: 1035108 1008984 26124 0 124212 413000 -/+ buffers/cache: 471772 563336 Swap: 2096472 842320 1254152 这里显示的单位是KB。 在Linux的内存分配机制中，优先使用物...阅读全文
师之前，应当先成为Java工程师。熟练使用各种框架，并知道它们实现的原理。jvm虚拟机原理、调优，懂得jvm能让你写出性能更好的代码；池技术，什么对象池，连接池，线程池……Java反射技术，写框架必备的技术，但是有严重的性能问题，替代方案java字节码技术；nio，没什么好说的，值得注意的是"直接内存"的特点，使用场景；java多线程同步异步；java各种集合对象的实现原理，了解这些可以让你在解决问题时选择合适的数据结构，高效的解决问题 成为Java架构师，需要掌握哪些技能呢？ 1.框架源码分析 设计模式：Singleton单例模式，Factory工厂模式，Proxy代理模式，Template模板模式，Prototype原型模式等Spring5：Spring提醒结构，IOC注入原理，AOP设...阅读全文
1. Kafka介绍 1.1.1. Kafka是什么 kafka使用scala开发，支持多语言客户端（c++、java、python、go等） Kafka最先由LinkedIn公司开发，之后成为Apache的顶级项目。 Kafka是一个分布式的、分区化、可复制提交的日志服务 LinkedIn使用Kafka实现了公司不同应用程序之间的松耦和，那么作为一个可扩展、高可靠的消息系统 支持高Throughput的应用 scale out：无需停机即可扩展机器 持久化：通过将数据持久化到硬盘以及replication防止数据丢失 支持online和offline的场景 复制代码 1.1.2. Kafka的特点 Kafka是分布式的，其所有的构件borker(服务端集群)、producer(消息生产...阅读全文
当 Torvalds 将某些代码标记为“dontuse”，通常表明这个问题比较大。在 5.12 首个候选版本更新中，破坏了交换文件（swapfile）的处理。具体来说，更新后的代码会失去指向 swapfile 开头的正确偏移。用 Torvalds 自己的话来说，“交换还是会发生，但它发生在文件系统的错误部分，最终结果显然是灾难性的”。这样 Linux 内核如果想要将内存中的内容分页到磁盘上的时候，数据就会落在相同磁盘和 swapfile 活跃的分区的随机部分上，而且这不是作为文件，而是作为垃圾直接写入到磁盘的原始扇区。这意味着不仅要覆盖现有文件中的数据，还要覆盖相当大块的元数据，这些元数据的损坏很可能会导致整个文件系统无法挂载和使用。Torvalds 继续指出，如果你根本不使用 swap...阅读全文
的文件，大多反馈系统信息的实时情况（进程、内存、cpu、设备信息等）。结论： /proc/meminfo 是 /proc 文件系统下保存你内存相关信息的"伪文件"。2.2 命令输出简介每个发行版输出都有一定差异，我们以debian8 4.19.x发行版为例。root@4f996feeb851:~# free -m total used free shared buffers cached Mem: 1991 1909 81 4 155 836 -/+ buffers/cache: 917 1073 Swap: 1023 1 1022大部分的命令输出意思，大家可以在man文档中找到解析，这里不做赘述。used: 已使用的内存 used = total - free -buffers...阅读全文
## 概述 Kubernetes 作为 IaaS 和 PaaS 的中间层，当前对于资源的计费依托于 IaaS 层的资源计费。一个 Kubernetes 的集群，按照其购买的节点实例 CVM 计费。而用户则使用的是 Pod，在实际场景中，通常需要面临这些问题，一个 Pod 如何承担成本、如何评估集群的成本、如何进行成本预测和优化建议。针对上述问题，我们推荐用户使用 Kubecost 进行解决。 Kubecost 是一款成本分析工具，可以为集群成本提供洞察、分析、推荐和建议。作为您优化集群成本的财务分析师，Kubecost 可以为您提供全面的成本分析报告。本文将介绍 Kubecost 使用场景、优化建议、详细的功能说明以及如何安装使用。 ## 使用场景 ### 评估每种资源消耗的成本 成本支出...阅读全文
Elasticsearch 7.6.0 发布了，Elasticsearch 是一个分布式的 RESTful 风格的搜索和数据分析引擎。 更新内容较多，摘取部分新特性： Aggregations 新的直方图字段映射器，支持百分位数聚合 #48580 (issue: #48578)对字符串术语实施统计汇总 #47468 Analysis 实施 Lucene EstonianAnalyzer，投票 #49149 (issue: #48895) Authentication 受密码保护的密钥库 (Feature Branch) #49210 Features/ILM+SLM 等待 SLM 策略执行的 ILM 操作 #50454 (issue: #45067)添加 ILM histore 商店索引...阅读全文
SonarQube v8.4 发布了。SonarQube 是一个用于管理源码质量的平台，帮助开发者编写干净的代码，其支持的语言包括：Python、Java、PHP、C#、C、Cobol、PL/SQL 与 Flex 等。 此版本扩展了 OWASP（Open Web Application Security Project，开放式 Web 应用程序安全项目）类型覆盖范围、带来了更快的分析速度、热备份和更快的启动。 Python 添加了 XSS 检测，以及另外 4 个 OWASP Top 10 类型 此版本中添加了一个与 XSS 相关的 Security Hotspot：S5247 查找在模板引擎中已关闭自动转义的所有位置。XSS 在OWASP Top 10 中属于 A7，此版本还增加了其它四个...阅读全文
Linux 系统与服务管理工具 Systemd 被曝存在 3 大漏洞，影响几乎所有 Linux 发行版。Systemd 是 Linux 系统的基本构建块，它提供了对系统和服务的管理功能，以 PID 1 运行并启动系统的其它部分。目前大部分 Linux 发行版都以 Systemd 取代了原有的 System V。 安全公司 Qualys 近日发布报告称其发现 Systemd 中存在 3 个安全漏洞，并且这些漏洞已经存在 3 到 5 年时间。 3 个漏洞已经收录到 CVE，分别是内存损坏漏洞 CVE-2018-16864 与 CVE-2018-16865、信息泄露漏洞 CVE-2018-16866。其中，CVE-2018-16864 于 2013 年 4 月引入（systemd v203），并...阅读全文
#### 关于本站 InfraPub 关注企业基础设施、服务架构、DevOPS工具链、研发效能等相关的话题，是一个专注于相关生态的学习和分享的站点，目标受众是 Linux 系统爱好者、云原生、基础架构、平台工具相关的从业人员。 [InfraPub](https://infras.cn/) 努力为读者提供准确、清晰、及时的资料。 本站内容主要可分为三部分： - 来自网络上的优秀资料，这部分以复制+粘贴为主，小部分文章在粘贴时会修正部分错误。 - 站点维护人员整理的原创文章。 - 软件、硬件、操作系统相关的新闻。 如果发现有侵权类的资料需要处理，请与我联系。我的常用邮箱为 joseph # Debian.cn 。 #### 友情链接 [InfraPub...阅读全文
Google 发布了一个名为 container-diff 的开源项目，这是一个分析和比较容器镜像的工具，可用来分析 Docker 镜像之间的差异。 container-diff 可通过几个不同的标准来检查镜像，包括： Docker 镜像历史 镜像文件系统 Apt 包管理器 pip 包管理器 npm 包管理器 上述分析可以在单个镜像上执行，也可以在两个镜像上执行以进行比较。 该工具可以帮助用户更好地了解他们的镜像内部发生了什么变化，并让他们更好地了解镜像包含什么内容。 单个分析： container-diff analyze [Run default analyzers] container-diff analyze
--type=history [History...阅读全文
Gartner公司公布2018年第三季度全球服务器市场调查报告，根据报告显示，全球服务器出货量为318.3万台，销售额193.9亿美元，同比分别增长12.5%和31.5%。本季度全球出货量与销售额位居前三位是戴尔EMC、HPE和浪潮。 2018Q3全球X86服务器出货量排名 2018Q3全球X86服务器销售额排名 从区域增长来看，全球除去拉丁美洲和东欧地区，其他区域市场均有增长，增速普遍达到两位数。大中华区和北美拉动了全球增长，两个地区的销售额分别同比增长44.6%和39.6%，所占市场份额提升分别为26.7%和41.7%。 从具体产品形态看，多节点、机架类服务器销售额分别同比增长75.2%和31.1%。刀片和塔式服务器继续小幅萎缩，销售额分别同比下降3.7%和4.8%。多节点服务器的增长...阅读全文
发送消息的客户端。 consumer：消息消费者，就是从broker拉取数据的客户端。consumer group：消费者组，由多个消费者consumer组成。消费者组内每个消费者负责消费不同的分区，一个分区只能由同一个消费者组内的一个消费者消费；消费者组之间相互独立，互不影响。所有的消费者都属于某个消费者组，即消费者组是一个逻辑上的订阅者。broker：一台服务器就是一个broker，一个集群由多个broker组成，一个broker可以有多个topic。topic：可以理解为一个队列，所有的生产者和消费者都是面向topic的。partition：分区，kafka中的topic为了提高拓展性和实现高可用而将它分布到不同的broker中，一个topic可以分为多个partition，每个...阅读全文
论 Go 2 了。 开发团队表示，Go 语言如今的目标与 2007 年相同，就是希望使程序员更有效地管理两种规模：生产规模和开发规模，其中又主要针对的是与许多其他服务器交互的并发系统，和许多工程师协调的大型代码库。Go 2 的目标就是解决 Go 1 在规模化方面做的还不好的地方。 据 Russ 估算，目前全球的 Go 开发者至少有 50 万，这意味着有数百万个 Go 源文件和至少十亿行 Go 代码。那些程序员和源代码代表了 Go 的成功，但同时也是对 Go 2 的主要约束。只有在回报非常巨大时，才能让开发者改变原有的旧习惯，学习新用法。Go 2 必须修正 Go 1 的问题，带动所有的 Go 开发者， 也就必须带上所有现有的 Go 源代码，不能让生态系统分裂。 如果把 Go 2 要增加的特性分...阅读全文
PostgreSQL 继续向着将在 2017 年 9 月份发布的第 10 个主版本迈进，EnterpriseDB 首席架构师和 PostgreSQL 贡献者 Robert Hass 根据 PostgreSQL官方路线图 编制 了一份 PostgreSQL 10 重要特性列表。 数月之前发布的 PostgreSQL 10 路线图包含多个单独的路线图，每个路线图对应一个特定的公司或个体贡献者。想要概括地了解路线图的内容并不容易。以下是 Hass 选出的一部分特性： 表分区 ：这可以视为是表继承的简化版本，在表继承中，父表总是为空，子表（分区）有一个隐式约束，当元组插入父表时，它可以影响元组实际上添加到哪个分区。当使用继承关系推导表的属性时，表分区有望简化这个过程，让特定的优化成为可能。 逻辑复...阅读全文
Facebook 高速发展的 2007 年到 2016 年，他们一天部署 3 次代码，cherry-pick 集齐成千上万个 commit；现在使用类似持续交付的方法，每个 commit 能自动部署到 production。公司里有很多员工、很多用户的好处：新代码让公司所有员工先用上，因为员工数足够多，能很快发现问题；然后让 2% 的访问量用上新代码，最后慢慢增加到 100% 的访问量。 不久前有篇关于缩短 Facebook 发布流程的文章，阐述了将代码投入生产的灵活方法。这篇文章着重讲述了他们在一年之内如何从“ cherry-picking ”升级到“ push-from-master ”策略。早些时候， Facebook 也分享了他们部署过程的细节。作者 Chuck Rossi 是...阅读全文
Linux Kernel开发者和维护总负责人 Greg Kroah-Hartman今天正式敲定，即将发布的4.19分支将会是长期支持版本。目前Linux Kernel 4.17已经结束生命周期，而4.18并不具备成为长期支持版本的必要因素，因此LTSI社区就此事和Greg Kroah-Hartman进行了商谈。 最终答案是，即将到来的Linux 4.19分支内核将会成为长期支持版本，意味着在正式发布之后将会持续支持数年时间。现阶段长期支持分支包括Linux 4.14, Linux 4.9, Linux 4.4以及Linux 3.16 and Linux 3.18。 Linux Kernel 4.19带来了诸多改进，包括升级驱动、改进图形和网络，架构更新，核心内核和网络改进，更新的文件系统...阅读全文
AWS 在 EC2 关机后，不会再对计算资源计费；其他资源 比如EBS、Elastic IP 这些还会产生费用。如果你使用了预留实例，还需要考虑预留实例对计费方式的影响，会按照预留实例的计费标准计费。 这种灵活的计费方式，是 AWS EC2 默认就支持的，相比之下，国内绝大多数云主机厂商是不支持的。在开机、关机时（即主机状态发送转变时），AWS 会收取最少一分钟的计费费用。 如果你关机过程用了20秒，AWS会按照一分钟来收费；如果你关机过程用时 1分30秒，则AWS会按照1分30秒收取费用。很良心吧，很灵活吧。 AWS的文档还是要多看的，计费方式和九年前的AWS变化很大。最新版的文档可以从这里下载： https://docs.aws.amazon.com/AWSEC2/latest...阅读全文
前言 Git是目前非常流行的协同开发工具，很多开源网站都使用Git作为代码管理仓库(例如 开源中国，GitHub)，不管是开发还是产品、设计师，Git都很适合，而且很多IDE默认集成了Git，熟练的使用Git会起到事半功倍的效果，所以今天我为大家分享一下Git的介绍与使用。 1.Git是什么？ Git是目前世界上最先进的分布式版本控制系统（没有之一）。 1.1什么是版本控制？ 版本控制是一种记录一个或若干文件内容变化，以便将来查阅特定版本修订情况的系统。如果你是位网页设计师，可能会需要保存某一幅图片或页面布局文件的所有修订版本。 有了它你就可以将某个文件回溯到之前的状态，甚至将整个项目都回退到过去某个时间点的状态，你也可以比较文件的变化细节，查出最后是谁修改了哪个地方，从而找出导致怪异问题...阅读全文
在 Elasticsearch 5.0.0 发布之后，Elasticsearch 在 333 个 commite、2236 个合并请求下，发布了基于 Lucene 7.0.1 的 Elasticsearch 6.0.0 正式版。 Elasticsearch 6.0.0 下载地址 Elasticsearch 6.0 重大改变 Elasticsearch 6.0.0 发行说明 Elasticsearch X-Pack 6.0 重大改变 Elasticsearch X-Pack 6.0.0 发行说明 Elasticsearch 6.0.0 部分亮点如下： 无宕机升级： 使之能够从 5 的最后一个版本滚动升级到 6 的最后一个版本，不需要集群的完整重启。无宕机在线升级，无缝滚动升级。 跨多个...阅读全文
influxdb会对磁盘数据文件{{index+data}}按照分片shard维度进行四次压缩(level1,2,3及full)，以节约磁盘空间3.堆积的原因在队列堆积的时间点，经过多次对比influxdb的日志:#调用方队列堆积时，influxdb的关键日志如下: #influx开始执行第四次全量压缩策略，tsm1_strategy=full ts=2021-01-05T10:30:02.049644Z lvl=info msg="TSM compaction (start)" log_id=0RVRbtjl000 engine=tsm1 tsm1_strategy=full tsm1_optimize=false trace_id=0RWXOKGG000 op_name...阅读全文
Android 12 正式发布，代号「Snow Cone」 自今年 2 月 Google 发布 Android 12 开发者预览版起，时隔 8 个月时间 Google 正式发布 Android 12，该版本带来的重要功能包括： Material You Google 在今年推出了名为 Material You 的全新设计语言，极大地改变了 Android 的视觉效果。它专注于整个操作系统的个性化、色彩和动画。通知面板、快速设置，以及电源按钮菜... 15 2 NGINX 1.18 和 1.19 简析 今天文章的焦点将是互联网上最受欢迎的 Web 服务器 NGINX Open Source 的NGINX 1.19版本。NGINX 1.19 开发分支的推出跟随着早先发布的NGINX 1.18...阅读全文
TMS 是一个用 Java 语言开发的，类似 Slack、Barrychat 的团队协作沟通Web平台，同时也是一个支持博文wiki撰写，国际化翻译管理的 Web管理系统。近期，TMS 发布了新版本 v2.10.0。 新功能： #IHIS4: 博文最近编辑文章列表，方便找到最近编辑创建的文章， 待办事项管理（让繁多的待办事项有条不紊的备忘记录，然后逐步攻破，减少记忆负担，提高工作利率不是一丢丢） 频道组（聊天频道支持创建分组，方便一次性 @多人 ，减少@具体用户的数次（爽的不要不要的） 优化改进： #II5PA: 游客可见博文 分享链接 复制分享 博文过滤查找清除过滤条件，输入框获取输入焦点 #II9N9: 沟通频道，按标签检索过滤 #IINTK: 沟通内容页面当 window...阅读全文
是试验性的，即使它们是让 Parrot 尝试和试的完美解决方案。 Parrot 4.5 内核是 Linux 4.19，已经按照我们为 Parrot 5.0 LTS 实现的新的内核分发策略打包了。 我们计划支持两个内核分支，一个稳定的内核和一个测试内核，并为这两个内核提供更新。Linux4.19 是我们测试分支的一部分，而稳定分支的第一个版本将随 Parrot 5.0 本身一起发布。 更多信息请查看 更新日志。...阅读全文
由于人工智能 / 机器学习日益集成到应用和业务流程中，因此生产级机器学习模型需要更多可扩展的基础设施和计算能力，以用于训练和部署。 现代机器学习算法在大量数据上进行训练，并且需要数十亿次迭代才能使成本函数最小化。这类模型的垂直扩展会遇到操作系统级别的瓶颈，包括可提供的 CPU、GPU 和存储的数量，而且对于这种类型的模型，已经证明效率并不高。更为高效的并行处理算法，例如异步训练和 allreduce 式训练，需要一个分布式集群系统，由不同的 worker （工作器）以协调的方式同时学习。 可扩展性对于在生产环境中服务深度学习模型也非常重要。将单个 API 请求处理到模型预测端点可能会触发复杂的处理逻辑，这将花费大量时间。由于更多用户访问模型的端点，为了有效地处理客户端请求，需要更多服务实例...阅读全文
Ceph v10.2.7 发布了。Ceph 是加州大学 Santa Cruz 分校的 Sage Weil（DreamHost 的联合创始人）专为博士论文设计的新一代自由软件分布式文件系统。自 2007 年毕业之后，Sage 开始全职投入到 Ceph 开 发之中，使其能适用于生产环境。Ceph 的主要目标是设计成基于 POSIX 的没有单点故障的分布式文件系统，使数据能容错和无缝的复制。 该版本更新日志尚未找到，了解更多请查看 提交记录 或关注 官方博客 。 下载地址 Source code (zip) Source code (tar.gz)...阅读全文
价格低廉、基于手机的拉曼光谱仪系统可在几分钟内识别未知的生物分子。 由德克萨斯农工大学 Peter Rentzepis 博士申请专利的新型手持式拉曼光谱仪系统可利用手机摄像头和激光技术的结合，对有害化学物质和材料进行非侵入式鉴定。 这种设备比传统光谱仪便宜得多，速度也快得多，可用于偏远地区进行快速现场分析。 https://www.cnbeta.com.tw/articles/science/1439072.htm...阅读全文
XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。 v2.0.0 Release Notes 1、调度中心迁移到 springboot ； 2、底层通讯组件迁移至 xxl-rpc ； 3、容器化：提供官方 docker 镜像，并实时更新推送 dockerhub（docker pull xuxueli/xxl-job-admin），进一步实现产品开箱即用； 4、新增无框架执行器 Sample 示例项目 “xxl-job-executor-sample-frameless”。不依赖第三方框架，只需 main 方法即可启动运行执行器； 5、命令行任务：原生提供通用命令行任务 Handler（Bean...阅读全文
在英特尔处理器的“熔断”（Meltdown）和“幽灵”（Spectre）漏洞风波还未完全平息的时候，研究人员又在英特尔的处理器上发现了新的漏洞，此前的“熔断”与“幽灵”补丁可能无法完全应对这种攻击手段。 这几名研究者来自美国的几所著名大学。他们发现了一种新的攻击方式，并把这一漏洞称为“BranchScope”。该漏洞与“熔断”和“幽灵”不完全相同，但与后者相似的地方在于，它们都是通过处理器中的分支预测（Branch Prediction）部分发起攻击的。它们的危害也相似：都可以直接访问用户的敏感信息。 研究人员在i7-2600、i7-4800MQ和i5-6200U三枚不同年代的Intel处理器上成功验证了BranchScope漏洞。这很有可能说明，Intel酷睿系列的二代Sandy...阅读全文
Intro Dapr 官方团队已于最近（2021.1.17）正式发布Dapr v1.0，Dapr已正式生产可用，可以部署到自托管环境或 Kubernetes 集群。对于绝大多数开发者来说，想必对Dapr只是有所耳闻，而具体是什么（What），可以解决什么样的问题（Why&How），有怎样的应用场景（Where），并不知悉。本文就尝试简要梳理下Dapr，并尝试回答以上问题。 What's Dapr Distributed Application Runtime. An event-driven, portable runtime for building microservices on cloud and edge. 分布式应用运行时。一个事件驱动、可移植的运行时用于在云上和边缘计算上构建...阅读全文
PromQL 是 Prometheus 提供的一个函数式的表达式语言，可以使用户实时地查找和聚合时间序列数据。表达式计算结果可以在图表中展示，也可以在 Prometheus表达式浏览器中以表格形式展示，或者作为数据源，以 HTTP API 的方式提供给外部系统使用。PromQL 虽然以 QL 结尾，但是它不是类似 SQL 的语言，因为在时间序列上执行计算类型时，SQL 语言相对缺乏表达能力。而 PromQL 语言表达能力非常丰富，可以使用标签进行任意聚合，还可以使用标签将不同的标签连接到一起进行算术运算操作。内置了时间和数学等很多函数可以使用 选择序列选择指定指标名称的序列最新样本： my_metric_name选择指定指标名称序列5分钟的样本范围： my_metric_name[5m]筛...阅读全文
目前非常流行的RDBMS PostgresSQL已经在几周前发布了它的第10个版本。由于Postgres的可靠性、节约成本、成熟，当然还有它的开源，已经21岁的Postgres在开发者之中仍旧非常流行。 Postgres 10带来了一些新特性，其中一些特性另开发者感到十分兴奋。10Clouds在博客中详细介绍了其中的一些特性。通过消除主表（master table）中触发器（trigger）的需求，本地分区（native partitioning）现在变得更简单了。这意味着创建分区表将变得更简单，并且从开发者的角度来看，现在从分区数据表中进行查询和插入与在非分区的数据表进行这些操作是完全一致的。 多列统计（multicolumn statistics）是Postgres 10的另一项改进...阅读全文
本文大部分内容翻译总结自《Software Engineering at Google》 第10章节 Documentation。 另外，该书电子版近日已经可以免费下载了 https://abseil.io/resources/swe_at_google.2.pdf，有兴趣的同学可以下载翻阅下。 首先声明，本问所说的文档不仅限于纯文本文档，还包含代码注释(注释也是一种特殊形式的文档)。 ## 文档的重要性 ## 高质量的文档对于一个组织或团队来说有非常多的益处，比如让代码和API更容易理解、错误更少；让团队成员更专注于目标；也可以让一些手工操作更容易；另外如果有新成员加入的话有文档也会让他们更快融入…… 写文档有比较严重的收益滞后性，不像测试，你跑一个测试case，它能立即告诉你是对还是错...阅读全文
AWS的预留实例（Reserved Instance）是一种计费方式，并不是一种计算实例，简单讲是一个“包年包月”的优惠方式。购买RI后，可以获得30%以上，至最高 75% 的优惠。你可能会说：“这些我都知道，并且RI我已经在用了。” 你真的熟悉 RI 吗？ 我们知道预留实例（RI）分为两种: 标准RI与可转换RI（CRI），可转换RI的价格往往较高而不容易被接受，而我们又经常遇到需要调整RI，那么我们购买的标准RI能不能进行适当的转换呢？答案是没问题的，AWS为满足客户的需求，提供了很灵活性的设定。 今天主要介绍一下RI的三个灵活属性：大小灵活性匹配，合并拆分，可转换(CRI)，我们暂且这么称呼，三者适用于不同的场景，是互相补充的关系。 大小灵活性匹配 场景：区域范围RI 、相同实例类型...阅读全文
最近游戏已上线运营，进行服务器内存优化，发现一个非常奇妙的问题，我们的认证服务器（AuthServer）负责跟第三方渠道SDK打交道（登陆和充值），由于采用了curl阻塞的方式，所以这里开了128个线程，奇怪的是每次刚启动的时候占用的虚拟内存在2.3G，然后每次处理消息就增加64M，增加到4.4G就不再增加了，由于我们采用预分配的方式，在线程内部根本没有大块分内存，那么这些内存到底是从哪来的呢？让人百思不得其解。 探索 一开始首先排除掉内存泄露，不可能每次都泄露64M内存这么巧合，为了证明我的观点，首先，我使用了valgrind。 valgrind --leak-check=full --track-fds=yes --log-file=./AuthServer.vlog & 然后启动测试...阅读全文
