Istio 1.2.0发布 包含重大改进
Lyft Envoy 代理进行构建，可在无需对应用程序代码作出任何发动的前提下实现可视性与控制能力。 Istio 项目是一款强大的工具，可帮助 CTO/CIO 们立足企业内部实施整体性安全、政策与合规性要求。...阅读全文
InfraPub 为您找到相关结果 313 个
开源图数据库 Dgraph 完成 300 万融资
据 Dgraph Labs 创始人 Manish Rai Jain 在其宣布 1.0.0 版本正式发布 的 文章 中透漏，他们已完成了由贝恩资本投资公司的 Salil Deshpande 领头的 300 万融资。凭借早期在基础设施软件和开源软件方面的经验，Salil 将加入 Dgraph 董事会。Jain 表示，这一轮融资正好是我们扩大云服务的时机，并继续建立世界上最先进的图数据库。 Dgraph 是一个可扩展的，分布式的，低延迟的图数据库，于 2015 年开源，最初是出于希望消除传统关系型数据库的典型弱点而创建的。为了解决组织在数据库增长超过单个服务器时面临的一些问题，Dgraph 以更有效的方式分割数据，这使查询可以在没有通用视图的情况下执行。它还减少了网络调用和磁盘查询需要执行查询的...阅读全文
influxdb内存消耗分析及性能优化【探索篇】
开始写入数据之后，在4h+10m之后，会对上个分片进行全量压缩策略 #应用: 本文设置为80小时。目的是不进行full压缩策略，来避免io过多消耗，后面会介绍由于设置的retention policy为72小时，所以此处大于72即可。 compact-full-write-cold-duration = "80h" #描述: 最大并行压缩数,默认会使用golang的逻辑处理器的一半 #场景: 当进行level1，level2,level3及full策略压缩文件时使用的处理器数量， #当前服务器为16core32物理线程，则会在压缩时默认使用16个处理器 #应用: 本文设置为8。用于减轻压缩策略时，cpu与磁盘io的压力，但相应的会导致压缩周期变长。 max-concurrent...阅读全文
Linux 27周年：这27件有趣的事实你可能不知道
许多人认为10月5日是 Linux 系统的周年纪念日，因为这是 Linux 在1991年首次对外公布的时间。不过，你可能不知道的是，早在1991年8月25日，当年还是大学生的 Linus Torvalds 就向 comp.os.minix 新闻组的人透露了由于“业余爱好”他正在研究操作系统的消息。因此，该时间也被许多爱好者视为 Linux 的真正诞生日期。 为纪念 Linux 27 岁诞辰，OMG Ubuntu 列出了 27 个与 Linux 和 Linus Torvalds 相关的有趣事实。 1、截至 2018 年，Linux 内核已有 20,323,379 行代码。尽管近期有所减少，但庞大的代码量意味着 Linux 仍然是地球上（单个）最大的开源项目。 2、Linux 差点不叫这个名字...阅读全文
Systemd 及 Service 文件含义解析
Systemd 是 Linux下的一款系统和服务管理器，兼容 SysV 和 LSB 的启动脚本。Systemd 的特性有：支持并行化任务；同时采用socket式 与 D-Bus 总线式激活服务；按需启动守护进程（daemon）；利用 Linux 的 cgroups 监视进程；支持快照和系统恢复；维护挂载点和自动挂载点；各服务间基于依赖关系进行精密控制。 其中的监视和控制功能的主要命令就是systemctl。 Systemd 有很多不同类型的使用单元，主要包括：系统服务（.service）、挂载点（.mount）、sockets（.sockets）、系统设备（.device）、交换分区（.swap）、文件路径（.path）、启动目标（.target）。一般我们常用的是其中的系统服务。 对于系...阅读全文
技术部门的 SEO 规范
为客户提供SEO顾问服务的时候，经常遇到一些作为外部顾问不方便全程参与的情况。比如有的公司要新建网站，或者现有网站推到重来，问我能否从一开始就参与，提供SEO建议。 网站规划设计阶段就考虑SEO当然是好事，但作为一个远在异国的顾问，参与到这种需要大量深度讨论、沟通、协调的过程中，实在是不好操作，内部SEO人员更适合这种工作。 有的客户公司规模比较大，技术开发、内容、SEO等各部门是分开的，SEO部门的很多需求是要提交给技术、运营等部门实施的。反过来，其它部门的需求也由技术部门实施，但可就不一定经过SEO部门同意了。这个过程中就可能产生对SEO的不良影响。 也有的公司人员流动频繁，即使原先的开发人员都经过SEO培训，也还是会有完全不了解SEO的新人加入团队。 这些情况都需要有一个技术部门必须...阅读全文
如何读懂火焰图？+ 实例讲解程序性能优化 - xuxh120
火焰图（flame graph）是性能分析的利器。本文介绍它的基本用法。 一、perf 命令 让我们从 perf 命令（performance 的缩写）讲起，它是 Linux 系统原生提供的性能分析工具，会返回 CPU 正在执行的函数名以及调用栈（stack）。 通常，它的执行频率是 99Hz（每秒99次），如果99次都返回同一个函数名，那就说明 CPU 这一秒钟都在执行同一个函数，可能存在性能问题。 $ sudo perf record -F 99 -p 13204 -g -- sleep 30 上面的代码中，perf record表示记录，-F 99表示每秒99次，-p 13204是进程号，即对哪个进程进行分析，-g表示记录调用栈，sleep 30则是持续30秒。 运行后会产生一个庞大...阅读全文
Ceph 12.2.0 正式版本发布， 代号 Luminous
。 ceph-mgr还包括一个Prometheus插件。 ceph-mgr现在有一个Zabbix插件。使用zabbix_sender，它可以将集群故障事件发送到Zabbix Server主机。 这样可以方便地监视Ceph群集的状态，并在发生故障时发送通知。 集群的总体可扩展性有所提高。我们已经成功测试了多达10,000个OSD的集群。 目前，每个OSD都具有与其相关联的设备类（例如，hdd或ssd），允许CRUSH规则将数据简单地映射到系统中的设备的子集。 通常不需要手动编写CRUSH规则或手动编辑CRUSH。可以优化CRUSH权重，以保持OSD之间数据的近乎完美的分布。 还有一个新的upmap异常处理机制，允许单个PG移动以实现完美的分发（这需要客户端）。 每个OSD目前可以根据后端设备是HDD还是...阅读全文
Apollo 配置中心简单介绍
盖配置修改实时生效（热发布） 用户在Apollo修改完配置并发布后，客户端能实时（1秒）接收到最新的配置，并通知到应用程序版本发布管理 所有的配置发布都有版本概念，从而可以方便地支持配置的回滚灰度发布 支持配置的灰度发布，比如点了发布后，只对部分应用实例生效，等观察一段时间没问题后再推给所有应用实例权限管理、发布审核、操作审计 应用和配置的管理都有完善的权限管理机制，对配置的管理还分为了编辑和发布两个环节，从而减少人为的错误。所有的操作都有审计日志，可以方便的追踪问题客户端配置信息监控 可以在界面上方便地看到配置在被哪些实例使用提供Java和.Net原生客户端 提供了Java和.Net的原生客户端，方便应用集成支持Spring Placeholder, Annotation和Spring...阅读全文
Docker 核心原理
/ee43bb16af9947ed9e8498ad42c859318e001365043e4cda410f68b4a0d79378# cat memory.limit_in_bytes 104857600 文件驱动 Docker 中的每一个镜像都是由一系列只读的层组成的，Dockerfile 中的每一个命令都会在已有的只读层上创建一个新的层。当镜像被 docker run 命令创建时就会在镜像的最上层添加一个可写的层，也就是容器层，所有对于运行时容器的修改其实都是对这个容器读写层的修改。容器和镜像的区别就在于，所有的镜像都是只读的，而每一个容器其实等于镜像加上一个可读写的层，也就是同一个镜像可以对应多个容器。 这种分层的逻辑是什么呢？ 这就是docker 里文件驱动的职责，负责镜像和容器的文件系统组织。 目前 docker 默认的文件驱动是 overlay2, 它是基于 Linux OverlayFS 的，下面这张图...阅读全文
分布式运行时 Dapr 知多少
bindings and triggers （资源绑定及事件触发） Dapr的Bindings与Azure Functions很类似，其是建立在事件驱动架构的基础之上的。通过建立触发器与资源的绑定，可以从任何外部源（例如数据库，队列，文件系统等）接收和发送事件，而无需借助消息队列，即可实现灵活的业务场景。Dapr的Bindings分为两种： Input Bindings（输入绑定）：当外部资源的事件发生时，借助输入绑定，你的应用即可通过特定的API：POST http://localhost:
说透IO多路复用模型_京东云开发者的博客
FD_ISSET方法来轮询文件描述符，如果数据可读，则读取数据即可。 举个例子，假设此时连接上来了3个客户端，connection的文件描述符分别为 4,8,12，那么其read_fds文件描述符表（bitmap结构）的大致结构为 00010001000100000…0，由于read_fds文件描述符的长度为1024位，所以最多允许1024个连接。 而在select的时候，涉及到用户态和内核态的转换，所以整体转换方式如下： 所以，综合起来，select整体还是比较高效和稳定的，但是呈现出来的问题也不少，这些问题进一步限制了其性能发挥： 文件描述符表为bitmap结构，且有长度为1024的限制。 fdset无法做到重用，每次循环必须重新创建。 频繁的用户态和内核态拷贝，性能开销较大。 需要对文件描述符表进行...阅读全文
Linux Mint 19.1 “Tessa” 正式发布
，Mint-Y，Mint-Y-Dark 和 Mint-Y-Darker 主题现在有 Aqua, Blue, Brown, Grey, Orange, Pink, Purple, Red, Sand 和 Teal 等多种配色可供选择.。窗口上的文字和图标也变得更暗，以便为您提供更好的视野。 其他一些值得注意的改进包括加速 Nemo 文件管理器，让您更快地获取重要文档，以及改进 Linux Mint 项目的内部 X apps。 如果从 ISO 安装 Mint 19.1，您将自动获得 Linux Kernel 4.15 以及所有其他更新。就像 Mint 19.x 系列中的其他版本一样，Mint 19.1 将在 2023 年之前都持续收到更新。它使用与 Mint 19 相同的软件包库，升级非常方便。 您可以...阅读全文
Kiwi TCMS 6.11发布 开源测试用例管理系统
隆时，始终保留测试用例的原始默认测试器、重构为基于类的视图、修复了版本值在 b/c 验证中失败的问题、修复了在 UI 中显示错误版本值的问题。将 Clone TestCase 页面转换为 Patternflix，极大地简化了 UI 和更新行为：允许克隆成多个测试计划、删除“Filter another plan”选项，将改为“Add TP to TC”、克隆的 TC 将显示在 TestPlan 的底部、始终保持原来的默认测试器 API RPC 方法 Bug.Report() 的第一个参数已从 test_case_run_id 重命名为 Execution_id。这可能会破坏现有的 API 脚本，这些脚本试图通过名称而不是位置传递此参数 Settings 允许 ENV 变量...阅读全文
MongoDB 4.2 正式发布 引入分布式事务
MongoDB 4.2 正式发布了，MongoDB Server 4.2 提高了现代事务和分析数据平台的技术水平。 Mongodb-4.2 的主要改动包括： 分布式事务将 MongoDB 的多文档 ACID 从副本集扩展到共享集群，能够为更广泛的用例服务按需物化视图使用新的 $Merge 运算符，在集合中缓存大型聚合的输出是一种常见的模式，新的 $Merge 运算符将可以有效地更新这些结果，而不是完全重新计算它们通配符索引使建模像产品目录这样的高度异构的集合变得简单和自然，而不牺牲对索引的支持。只需定义一个过滤器，它将自动索引集合中所有匹配的字段、子文档和数组MongoDB 查询语言增强功能，如更有表现力的更新、新的数学运算符和扩展的 regex 支持。此版本的 update 和...阅读全文
Proxmox VE 6.2发布 开源虚拟机平台
容视图中，管理员现在可以使用新列“创建日期”过滤存储的数据，例如，该列可以简化从特定日期开始搜索备份的过程。可以无缝更改 Web 界面的语言，而无需重新启动会话。添加了阿拉伯语翻译，因此 Proxmox VE 总共支持 20 种语言。 Linux 容器： 集成容器技术已更新为 LXC 4.0.2 和 lxcfs 4.0.3。Proxmox VE 6.2 现在允许在基于目录的存储上为容器创建模板。适用于 Ubuntu 20.04、Fedora 32、CentOS 8.1、Alpine Linux 和 Arch Linux 的新 LXC 模板。 Zstandard用于备份/还原： 集成的备份管理器支持快速高效的无损数据压缩算法 Zstandard（zstd）。 用户和权限管理： Proxmox...阅读全文
Django 3.0 发布第一个版本 开始支持异步功能
Django 3.0 发布了第一个版本3.0a1，正式版版本将于今年12月份发布。3.0版的Django带来了一些新特性，其中最值得关注的应当是其开始支持异步功能。 django路线图 此前有草案提出要 让 Django 支持异步 。聚集于 HTTP 中间件视图和 ORM，开发者要在 Django 中添加异步支持，同时维护对同步 Python 的支持，并且将完全向后兼容。 该设想最终会替换掉 Django 中的大多数阻塞部分，包括 Session、Auth、ORM 与 Handlers 等，使其 原生支持异步 。而同步 API 将继续存在并得到完全支持，其中一些最终将转变为原生异步代码的同步包装器。 ASGI 模式将 Django 作为原生异步应用程序运行，原有的 WSGI 模式将围绕每个...阅读全文
Debian告知用户其系统在没有商业固件的情况下可能无法工作
此不被视为自由软件。还有类似的情况，即网络适配器和其他组件在没有加载Linux固件文件的情况下无法工作，但在GPU的情况下，甚至没有一个可以工作的桌面显示器都会成为一个障碍。与其违背他们的原则，Debian 11将继续默认不加载linux-firmware文件。然而，他们决定在需要固件的设备周围添加文件。它还概述了如果用户有兴趣，Debian 安装程序如何能够从U盘等加载所需的固件文件。Debian方面认为他们至少没有 “想让用户蒙在鼓里”，不知道如何解决由于缺乏固件而导致显示器无法工作的问题，因此改进了他们的文档。围绕其固件处理，Debian的非免费安装程序镜像也得到了改进。Debian安装程序 Bullseye RC3 也已经升级到 Linux 5.10 LTS 版本，并进行了其他小的改...阅读全文
单核心 IOPS 突破 1000 万，Linux 5.16 有望大幅提升 I/O 性能
，可以视为是每秒的读写次数。与其他性能测试一様，IOPS 仅代表理想环境下的性能指标，不保证实际应用下也能达到同等情况。IOPS 的数值会随系统组态而有很大的不同，依测试者在测试时的控制变量而异，控制变量包括读取及写入的比例、线程数量以及资料区块的大小等。从 Jens Axboe 在社交媒体上分享的截图可以看到，他用最新的 Linux 内核补丁在一个物理 CPU 核心上实现了 1000 万 IOPS。此次测试的设备仍然与他此前实现 890 万 IOPS 时所使用的设备保持一致 —— 采用了一个 AMD Ryzen 9 5950X CPU 和英特尔 P5800X Gen2 傲腾 SSD。为了实现这些的性能提升，Jens Axboe 主要是在内核的 block / NVMe / IO_uring...阅读全文
盖茨退休后的日常：很少吃早餐 保证7个小时的睡眠
据国外媒体报道，微软公司联合创始人比尔盖茨现在还是世界首富，目前个人财富高达900亿美元。 但比尔盖茨在2008年就退出了微软公司的日常管理，仅作为董事长继续保证公司的正常运营，而在2014年，也就是在他60岁的前一年，他又放弃了微软公司董事长一职。 在离开微软管理层之后，盖茨将大部分精力和财富都放到了慈善事业上，通过慈善活动，他也时常出现在公众的视野之中，但也有很多人好奇，曾经忙于微软公司事务的他，在退休之后的每一天又是怎么度过的？ 事实上在2008年退休之后，如果没有慈善等需要外出的活动，他的一天基本都是在他那历时7年、耗资6300万美元打造的豪宅 “仙乐都2.0” 中度过的，他的一天从豪宅中醒来之后就算开始了。 在早餐方面，盖茨喜欢的早餐是可可泡芙，不过他的妻子梅琳达?盖茨却透露，盖...阅读全文
WireGuard简明介绍及使用指引
WireGuard 是 Jason A. Donenfeld 开发的开源VPN协议。目前支持Linux, macOS, Android 以及 OpenWrt。iOS 和 Windows 官方客户端还在开发，但第三方 Windows 客户端已经出现。WireGuard 被视为下一代VPN协议，用来替代OpenVPN，IPSec等VPN协议。 WireGuard 协议作为 Linux 内核模块运行，所以效率极高。使用了最先进的加密技术(利用Curve25519进行密钥交换，ChaCha20和Poly1305用于数据认证，BLAKE2用于散列)，安全性毋庸置疑。WireGuard 是为嵌入式设备开发的，支持IP地址漫游，也就是网络断开再连，对它不会有影响。WireGuard 使用 UDP 协议传...阅读全文
OpenStack 基金会发布新容器项目 Kata
和运行时的标准规范。Hyper 的 runV 被视为“容器管理程序”，支持 Xen 和 KVM。以上两个项目都被包含在 Kata 中，runV 用来启动容器。 在几天前举行的 Kubecon/CloudNativeCon 大会上有一场 演讲 提到了所谓的“虚拟容器”的底层技术，可以运行直接由超级管理程序管理的容器。在多租户环境里运行由 Kubernetes 管理的容器时，租户之间的隔离问题是重中之重。使用不同的虚拟机来运行不同的容器可以达到一定程度的隔离。但对于 Hyper 来说，这样做不是必需的，因为每个容器由单独的管理程序进行管理，而不是运行在单独的虚拟机上。 现有的 OpenStack 容器项目 Magnum 和 Zun 使用了其他容器技术和编配器。用户可以通过 Magnum 为容器创...阅读全文
Facebook 以最高级别身份加入Linux基金会及其董事会
项目使电信运营商可以轻松地在难以到达的区域部署移动网络，从而降低了建设和维护电信网络的成本。Facebook 的 “Data for Good” 计划用于共享地理数据，以解决一些世界范围内的人道主义问题，包括在 COVID-19 疫情期间发挥作用。创建并维护 PyTorch 开源生态系统，为在计算机视觉、自然语言处理和其他学科中利用人工智能和机器学习贡献了很大一份力量；React.js 也由 Facebook 创建，它为世界上一些最受欢迎的网站提供支持，并且由于其简单性和灵活性而成为前端 Web 开发标准。 Linux 基金会会员分为银级、金级和白金级三种不同等级，白金级即最高等级，每年需缴纳会费 50 万美元，同时拥有董事会席位。AT&T、谷歌、华为、IBM、英特尔、微软、Oracle、腾...阅读全文
在TKE上使用Kubecost进行成本管理
的资源。例如，如果您的集群的利用率仅为25%，以资源的最大使用量和 Request 来衡量，则 Allocate idle costs 会按比例增加每个 pod/NS/Deployment 的成本到原来的4倍。 6. **图表选择**： 切换到条形图视图以查看所选窗口的汇总成本，或切换到时间序列视图以查看成本随时间的变化。 7. **附加选项**： 查看其他选项以将成本数据导出为 CSV 或查看帮助文档。 ### Assets  Kubecost Assets 视图显示了按集群中单个资源细分的 Kubernetes 集群成本（例如，按节点、磁盘...阅读全文
聊聊很重要的内核技术eBPF
直接集成到应用程序中的高级库。 2：bpftrace bpftrace是Linux eBPF的高级跟踪语言。它的语言受awk和C以及DTrace和SystemTap等以前的跟踪程序的启发。 bpftrace使用LLVM作为后端将脚本编译为eBPF字节码，并利用BCC作为与Linux eBPF子系统以及现有Linux跟踪功能和连接点进行交互的库。 3：Cilium Cilium是一个开源项目，提供基于eBPF的联网，安全性和可观察性。它是从头开始专门设计的，旨在将eBPF的优势带入Kubernetes的世界，并满足容器工作负载的新可伸缩性，安全性和可见性要求。 4：Falco Falco是一种行为活动监视器，旨在检测应用程序中的异常活动。 Falco在eBPF的帮助下审核Linux内核层的系统...阅读全文
Facebook 正式发布 JavaScript 包管理器 Yarn 1.0
冲突，可以通过手动来解决，但如果冲突数量众多，解决冲突可能会变成一件很麻烦的事情。 因此，Yarn 提供了自动合并 yarn.lock 文件的功能以解决冲突的问题。通过运行 yarn install 命令可以触发合并，如果合并成功，新的无冲突 yarn.lock 文件会被保存到磁盘上。 未来计划 Facebook 表示未来的 Yarn 将要实现下面这些目标： 使用 Yarn 发布包：发布新包通常需要创建正确的更新日志、执行正确的语义版本控制、同步相关项目的版本，还需要频繁地手动或通过脚本来完成其他很多步骤。如果 Yarn 能够为包发布者完成这些事情岂不是更好？ 包的安全性：在添加新软件包或升级旧的包时，包的安全性也是一个很重要的需要考虑的因素。Yarn 将会与 npm 合作，将双因子认证带到...阅读全文
2018 GitHub 最火技术趋势
GitHub的高级技术副总裁Jason Warner在2018的技术趋势中挑出了数据、工作流集成（workflow integration）以及开源工具，他认为这些是一个公司在2018年能够取得成功的关键。 Warner写道，数据将成为2018年全球增长的最重要因素： 现如今，所有的公司都是数据公司，不论他们是否意识到这个情况。在2018年，只要团队知道如何使用数据，数据就会成为他们最大的资产。 数据的重要性日益增长，也标志着云服务平台从分布式云计算平台转型成为数据处理的云平台，其中还包括数据分析和机器学习。这将重点反映到三个关键领域： Warner说，许多重要的系统目前都很脆弱，尽管它们的规模越来越大。为了应对在2018年变得更加频繁的攻击，将会有更多的财力和开发资源分配到改进安全性上...阅读全文
观点：DDR内存即将谢幕 HBM 3/4内存才是未来
Tesla P100上商用了HBM 2技术，不过消费级市场上使用HBM 2技术还是AMD去年的RX Vega显卡，但是因为HBM 2显存的成本太过昂贵，RX Vega上实际上使用了两组4GB HBM 2，等效位宽比第一代减少一半，尽管频率大幅提升，所以实际带宽反而低了一些。 见识过HBM的玩家对该技术肯定印象深刻，那么未来它又该如何发展呢？HPE（惠普企业级）公司的Nicolas Dube日前分享了他的一些观点，在他看来DDR内存要走到尽头了（DDR is Over），特别是一些需求高带宽的场合中。 根据他分享的一些数据，HBM 2内存将在2018年大量应用，HBM 3将在2020年左右应用，改进版的HBM 3+技术在2022年应用，2024年则会有HBM 4内存，带宽及容量也会逐级增长，比如现在的...阅读全文
HTTPS 证书有效期被提议缩短至13个月
由 Web 浏览器制造商、软件开发人员和安全证书颁发机构组成的行业团体 CA/Browser Forum，正在考虑将 HTTPS 证书的有效期从 27 个月缩短到 13 个月。关于这样的提案，已经不是第一次提出。在 2017 年时，CA/Browser Forum 就否决了一项将证书有效期从 39 个月缩短至 13 个月的提案。 而早在一年前，证书的最长有效期已经从 39 个月降至 27 个月。 我们都知道，HTTPS 证书用于加密浏览器和站点之间的连接，帮助软件确定没有人篡改或窃听这些连接。 如果减少 TLS/SSL 证书有效的时间，网站必须更频繁地更新其证书。理论上，这样的证书有效期也有助于减少欺诈活动，如果是偷来的证书则很快会失效，被遗弃的网站也会更快地过期。这将迫使他们使用最新和最...阅读全文
Linux Kernel 5.10本周末发布 十个功能盘点
，Linux Kernel 5.10 获得了更多的 Gen12 / Xe Graphics 修补程序，特定于 Rocket Lake 使用的功能以及其他更改。此外该分支还包括其他相关的工作，例如在支持 Intel DG1 离散图形卡的 HDMI 音频输出支持。 3.AMDGPU DC 为 GCN 1.0 "Southern Islands" 图形处理器添加 AMDGPU DC 显示支持。AMDGPU DC for GCN 1.0 是 AMDGPU DC是遗留下来的遗留项目之一，因为它们可能默认情况下启用 GGPU 1.0 / 1.1 时代硬件的AMDGPU支持，而不是Radeon DRM驱动程序。 最后一个明显的障碍是 AMDGPU DC 缺乏模拟输出支持，因此没有进行默认更改。那些老化的...阅读全文
不可变基础设施 (immutable infrastructure) - 云原生定义解析
云原生技术的不断发展，2018年，CNCF扩展了云原生技术的定义，以下是云原生技术的新定义：“云原生技术有利于各组织在公有云、私有云和混合云等新型动态环境中，构建和运行可弹性扩展的应用。云原生的代表技术包括容器、服务网格、微服务、不可变基础设施和声明式API。这些技术能够构建容错性好、易于管理和便于观察的松耦合系统。结合可靠的自动化手段，云原生技术使工程师们能够轻松地对系统作出频繁和可预测的重大变更。”其中，像容器，微服务等概念早已深入人心，而很多开发人员都对此次提及的“不可变基础设施”这个概念有不少疑惑，下文将对这个概念进行解析。其实不可变基础设施这个概念由来已久，并在不同的场合被很多技术专家已不同的形式提出并讨论过, 例如：“Trash Your Servers and Burn...阅读全文
Redis 6 将采用全新协议RESP3 提供客户端缓存功能
获取数据时的延迟。此功能在大规模的应用程序上十分重要，因为数据离应用程序越近，程序就能更快获取到数据。 antirez 受 Ben Malec 演讲的启发，他想到可以将大部分需要频繁存和取的数据直接放在服务器的内存中，以便让 Redis 为客户端完成部分工作，并使客户端缓存更简单、更有效。这个就是 Client side caching（客户端缓存）的概念。 不过这个思路有一个需要解决的问题是，如何控制数据的有效时间？在程序允许的情况下，虽然可以直接设置数据的有效时间，让数据在一段时间后失效。但 antirez 表示，大多数的应用程序无法接受提供过时的数据的风险，因此必须找到更理想的方案来控制数据的失效时间。 所以 antirez 决定开发新的协议 RESP3，在协议中加入新特性来支持客户端...阅读全文
Linux内存buffer和cache的区别
冲区，一个用于存储速度不同步的设备或优先级不同的设备之间传输数据的区域。通过缓冲区，可以使进程之间的相互等待变少，从而使从速度慢的设备读入数据时，速度快的设备的操作进程不发生间断。 在Free命令中显示的buffer和cache，它们都是占用内存： buffer : 作为buffer cache的内存，是块设备的读写缓冲区，更靠近存储设备，或者直接就是disk的缓冲区。 cache: 作为page cache的内存, 文件系统的cache，是memory的缓冲区 如果 cache 的值很大，说明cache住的文件数很多。如果频繁访问到的文件都能被cache住，那么磁盘的读IO 必会非常小。...阅读全文
Oracle Linux 8.0 发布
Oracle Linux 8.0 发布了，更新包中包括基础 BaseOS 和 Application Streams，其中 BaseOS 提供运行环境的用户空间，Application Streams 提供了一系列以往分发在软件集中的应用，以及可在用户空间内运行的其它产品和程序。 Application Streams Oracle Linux 8 引入了 Application Streams 的概念，它可以比核心操作系统包更频繁地交付和更新多个版本的用户空间组件。Application Streams 包含必要的系统组件和一系列以往分发在软件集中的应用，以及其它产品和程序。 系统管理 引入 Dandified Yum 软件包管理器，它是基于 DNF 技术的 yum 工具的新版本，可在基...阅读全文
Debian 上安装搭建 Shadowsocks 服务
在使用了一段时间后，决定由 CentOS 转移到 Debian 上，以便在低配置的服务器上网站能更加的稳定，Shadowsocks 服务也有之前的 python 版本转移到了 shadowsocks-libev 版本，原因是 libev 的版本是用 C 语言写的，会更加的节省内存，更重要的是该 libev 一直在不断的维护着，更新也很频繁。 搭建环境 本人还是在 Vultr.com 的 VPS 上安装了 Debian 8.0 x86 minimal 系统，在 Debian 8(Jessie) 编译 libev 版本需要开启 debian-backports 来安装 dh-systemd 和 init-system-helpers. 首先要在 debian 的源列表中添加 backports...阅读全文
Debian下安装搜狗拼音输入法
Linux上的中文输入法，基本上都比较原始，仿佛还停留在上个世纪。唯有搜狗还行。 简介 2013年12月，搜狗与Ubuntu Kylin团队开始合作开发“搜狗输入法Linux版”。经过五个月的合作，于2014年4月17日，正式发布了1.0版本。2015年10月16日更新至2.0版本。 搜狗输入法Linux版基于开源小企鹅输入法框架、开源Qimpanel面板以及搜狗输入法引擎开发。目前，我最看重的功能有： 智能输入，动态调频，动态组词 可自由导入的细胞词库 模糊音输入，智能纠错 方便的中英文切换 长词联想 逗号句号翻页 皮肤替换 添加源安装 由于Debian官方是不支持搜狗输入法的，因此纯命令行操作，要先添加源。 如果没有apt-add-repository，先用sudo apt-get...阅读全文
DNS SRV：使用DNS服务器做服务发现
，Client会按照这些SRV的权重分配请求。下一次向服务发起的请求可能发送到了不同的地址。在通过SRV记录的权重来分配请求的时候，使用的是本地缓存的DNS记录，所以不能实时地感知到服务的地址列表变化。除非将 TTL 设置的非常短暂，但这样将会频繁地查询DNS服务器。 Client查询服务地址的过程 rfc-2782中已经做了很好地介绍，这里就不表述了。 配置举例 下面是DNS中 master file，可以看到有 example.com 域名提供了一个名为_foobar._tcp 的服务，这个服务有两个 SRV 记录，分别指向了 sys-box.example.com:1099 和 server.example.com:1099 $ORIGIN example.com. @ SOA...阅读全文
Qt5.9发布：如何评价QT
Quick Controls 2的功能增强，还有基于openGL shader cache 对QML进行类型缓存， 以及.qml / .js文件生成的代码和数据结构的缓存的支持。 这些功能将大大提高使用Qt构建的设备的启动速度。 发布新Qt Creator 4.3.0，Quick Designer里面也看以同时看到和编辑qml code了! 作为Qml项目开发者确实立刻感到了方便！ 还有新框架将允许Qt团队更容易创建新版本，包括修补程序和发布次要版本。 引入自动化性能回归测试，使得对Qt的监控与提高加强。 安全方面，Qt 5.9正式支持INTEGRITY RTOS。 确实越来越多的RTOS应用程亟需要更高级GUI框架来满足用户期望呢。 操作系统和硬件方面，Qt 5.9完全同时支持传统的Win32应用...阅读全文
NVDIMM-P非易失内存标准公布：断电不丢数据、兼容DDR4
(DDR4可超过200GT/s)，不怕断电，也不需要外接供电，但性能和DRAM仍然远不是一个级别。 NVDIMM-N混合使用DRAM、DRAM，在内存条上集成NAND闪存，外接电源供电，断电时将数据转移保存到NAND闪存中，重新来电后恢复到DRAM，但闪存只是个备份，正常工作时闲置无法使用。 有消息称，紫光集团旗下西安紫光国芯也成功研发出了一看基于DDR4的NVDIMM-N。 NVDIMM-P则是以上二者的结合，三星主导DDR4版本，美光主导DDR5版本。 NVDIMM-H正在研发，美国Netlist公司主导，类似NVDIMM-N，也是DRAM、NAND混合体，但硬件结构差异较大。 - THE END - 转载请注明出处：快科技 #内存#DDR4 责任编辑：上方文Q...阅读全文
在 Mac OS X 上安装 Nessus 10
/Nessus/run/var/nessus/plugin_feed_info.inc /Library/Nessus/run/lib/nessus/plugins/plugin_feed_info.inc （1）更新插件 sudo /Library/Nessus/run/sbin/nessuscli update all-2.0.tar.gz all-2.0.tar.gz 为默认名称，请根据插件离线包的实际路径和文件名修改 (sysin) （2）写入配置文件 编辑 plugin_feed_info.inc 文件（这两个文件可能源目录下没有，需要自己创建）： sudo vi /Library/Nessus/run/var/nessus/plugin_feed_info.inc sudo vi...阅读全文
取代TCP：工程师宣布QUIC协议已完成RFC 9000发布
访问：天猫6·18 “开门红”超级红包活动主会场 | 手机版京东6·18“京享红包”25日12点开始领取 最大面额高达18618元 （图 via Orozco 2018）据悉，工程团队中有三位核心成员，且他们对 QUIC 的承诺深信不疑。其中包括 IETF QUIC 工作组只需 Mark Nottingham，协议主要贡献者兼 quicly 创作者 Kazuho Oku，以及核心文档集编辑、杰出工程师 Jana Iyengar 。最新消息是，互联网工程任务组（IETF）已经发布了 RFC 9000，且得到了 RFC 9001 / 9002 / 8999 支持，意味着 QUIC 已从草稿阶段转向了 1.0 正式版。与此同时，基于 QUIC 的 HTTP/3 也有望紧随其后很快发表。对于...阅读全文
Debian下安装配置 Hadoop 3.1.3 集群
在这篇文章里，我将在 VMWare 里面虚拟四台 Debian 虚拟机，一个做master，三个slave。这四台主机的 hostname 分别是 master、slave1、slave2、slave3。下面的 JDK 和 Hadoop 安装配置操作都是使用普通用户 hadoop 来执行，并非 root。 集群环境准备 1. 静态网络的配置 编辑/etc/network/interfaces文件，注释自动获取IP，并添加下面内容 # static IP address auto ens33 iface ens33 inet static address 192.168.20.101 netmask 255.255.255.0 gateway 192.168.20.2 dns...阅读全文
提问的智慧（精简版）
用替换一幅图片的色码（color table）成自己选定的色码，我现在知道的唯一方法是编辑每个色码区块（table slot）， 但却无法从某绘图程序的颜色选择器取得十六进制的 RGB 值。问题解决后，加个简短的补充说明补充说明不必很长或是很深入。简单的一句 你好，原来是网线出了问题！谢谢大家。 比什么也不说要来的好。事实上，除非结论真的很有技术含量，一句话就够了：说明问题是怎样解决的，但大可不必将解决问题的过程复述一遍。对于有深度的问题，张贴调试记录的摘要是有帮助的。但请记住，先描述问题的最终状态，说明是什么解决了问题，在此之后才指明踩坑的地方。在即时聊天软件里问问题为了避免重复答疑，你应该在群里询问常见问题。由于部分聊天软件没有话题串的功能（或着实现很差），同时群里还可能有多个同时讨论的...阅读全文
不要光想着价格 QLC 与 TLC 闪存有什么不同
TLC的这个活生生的案例在前面，解决起来会更容易一些。 3、成本 虽然QLC只是在TLC的电子单元内增加了一个比特位，但其所要求的技术含量却非常高。因为不仅要在原有的基础上增加一个比特单位，还需要双倍的精度才能保有足够高的稳定性以及性能。不过，一旦解决了所有技术上的难题，随着SSD容量的大幅增加，其所需要的单位成本也会相应降低。 4、容量 东芝的QLC的技术已经可以实现每闪存颗粒768Gb（96GB）的容量，相比之TLC颗粒的 512Gb有了更大提升。如果采用16颗粒封装，那么可以实现单颗芯片封装达到1.5TB的容量，容量达到目前单颗最大。如果一块SSD采用八颗这样的新品，总容量可以达到惊人的12TB。 虽说目前QLC 闪存不过刚正式出现在人们的视线中，其在速度、寿命、稳定性等方面可能会比TLC...阅读全文
玩转 AWS 的必备工具
虽然AWS平台早已早已为使用者带来了十分详细和高品质的工具箱，但在具体运用中含的软件还没有尤其方便快捷或是能满足客户的必须，因而，紧紧围绕全部AWS平台，客户及其许多专业开发设计AWS专用工具的企业发布了很多和AWS规范专用工具互为补充的第三方开发环境。这种专用工具集中化在系统软件布署管理方法自动化技术，系统架构图自动生成可视化工具，及其服务器资源监管专用工具等AWS技术栈的最底层服务项目。 系统软件布署管理方法自动化技术专用工具. 中国开发者利好消息！AWS（亚马逊云计算）中国区新用户注册即可免费使用12个月云服务产品啦！每注册一个新用户均可享受新的12个月免费云服务器数据库等产品！快来加入我们吧！ 免费12个月链接： https://aws.amazon.com/cn...阅读全文
玩转 AWS 的必备工具
虽然AWS平台早已早已为使用者带来了十分详细和高品质的工具箱，但在具体运用中含的软件还没有尤其方便快捷或是能满足客户的必须，因而，紧紧围绕全部AWS平台，客户及其许多专业开发设计AWS专用工具的企业发布了很多和AWS规范专用工具互为补充的第三方开发环境。这种专用工具集中化在系统软件布署管理方法自动化技术，系统架构图自动生成可视化工具，及其服务器资源监管专用工具等AWS技术栈的最底层服务项目。 系统软件布署管理方法自动化技术专用工具. 中国开发者利好消息！AWS（亚马逊云计算）中国区新用户注册即可免费使用12个月云服务产品啦！每注册一个新用户均可享受新的12个月免费云服务器数据库等产品！快来加入我们吧！ 免费12个月链接： https://aws.amazon.com/cn/free...阅读全文
Cortex: 高可用和水平扩展Prometheus监控系统
Prometheus已成为cloud-native世界中的默认监控应用程序和系统。对于真是使用案例，Prometheus应该是高可用的，这是有挑战的。一旦在高可用性模式下运行Prometheus，就会遇到很多问题，例如数据重复，为重复数据实现single pane等。为了解决此问题，Cortex诞生了。Cortex是一个CNCF sandbox project，旨在为使用Prometheus 收集的指标提供长期存储和全局指标视图。首先让我们看一下Cortex的主要目标，然后看一下它为Prometheus解决的一些问题。水平可伸缩性– Cortex可以分成多个微服务，每个微服务都可以独立地水平伸缩。例如，如果许多Prometheus实例正在向Cortex发送数据，则可以扩展Ingester微...阅读全文
Debian 9 使用kubeadm创建 k8s 集群（上）
是您将在其中运行所有本地命令的目录。 使用nano或您喜欢的文本编辑器创建名为~/kube-cluster/hosts文件： nano ~/kube-cluster/hosts 将以下文本添加到文件中，该文件将指定有关群集逻辑结构的信息：〜/ KUBE群集/主机 [masters] master ansible_host=master_ip ansible_user=root [workers] worker1 ansible_host=worker_1_ip ansible_user=root worker2 ansible_host=worker_2_ip ansible_user=root [all:vars] ansible_python_interpreter=/usr/bin...阅读全文
UCloud 叶理灯 谈：Docker、K8S 和 Serverless
FaaS，有一个对标的产品叫 Lambda。 Serverless 出现的动力是，由于云计算的发展，带来了如对象存储等很多丰富的中间件，Serverless 概念的提出是希望应用开发者可以不用写后端逻辑，直接把逻辑写在客户端，组合云上的一些服务来完成业务逻辑，这样就没有管理后端资源的负担了。但是后来发现很多时候还是需要后端代码的，所以就演变成如果有后端代码，就拆成函数，托管在 FaaS 服务中，这样的话，你依然是不用管理服务器的，你用的还是一个个服务，没有服务器管理负担。 这个概念在不断进步，2017 年的时候 AWS 提出了一个新的概念，重新定义了什么叫 Serverless，只要一个服务具备了四方面特性：免运维、按需付费、高可用和自动扩容，这个服务就是个 Serverless 的服务。所以...阅读全文
在 Kubernetes 上扩展 TensorFlow 模型
由于人工智能 / 机器学习日益集成到应用和业务流程中，因此生产级机器学习模型需要更多可扩展的基础设施和计算能力，以用于训练和部署。 现代机器学习算法在大量数据上进行训练，并且需要数十亿次迭代才能使成本函数最小化。这类模型的垂直扩展会遇到操作系统级别的瓶颈，包括可提供的 CPU、GPU 和存储的数量，而且对于这种类型的模型，已经证明效率并不高。更为高效的并行处理算法，例如异步训练和 allreduce 式训练，需要一个分布式集群系统，由不同的 worker （工作器）以协调的方式同时学习。 可扩展性对于在生产环境中服务深度学习模型也非常重要。将单个 API 请求处理到模型预测端点可能会触发复杂的处理逻辑，这将花费大量时间。由于更多用户访问模型的端点，为了有效地处理客户端请求，需要更多服务实例...阅读全文
最新评论
