在真正的生产环境中，如何合理的分配服务器资源、提高利用率、让整个集群运行的更加稳定使得 k8s-scheduler 这个角色在集群中的地位愈发重要。 kube-scheduler的预选(过滤)和精选(打分) api-server会将创建pod的请求发送给kube-scheduler，并且将pod信息记录在etcd数据库中。之后kube-scheduler会根据预选（过滤）规则，首先过滤掉一部分node节点中的pod，没有被过滤掉的pod可以看做是可以被调度的pod，之后再通过更加严格的规则给剩下的pod打分，这一步也叫作优选。打分最高的pod可以看做被优先分配到pod任务。 调度流程简介 创建pod的命令被api-server的api接口接收到。api-server将pod信息存储在...阅读全文
可能有问题。自go 1.6之后， 并发地读写map会报错，这在一些知名的开源库中都存在这个问题，所以go 1.9之前的解决方案是额外绑定一个锁，封装成一个新的struct或者单独使用锁都可以。 群众的呼声是响亮的，并发map在项目中大量使用，所以Go 1.9中在包sync加入了新的map， 查询、存储和删除都是平均常数时间，可以并发访问。 Monotonic Time 先前的time包的实现都是基于wall time的，但是当机器的时钟调整后会有问题。 比如在计算duration的时候，如果时钟往回拨，可能导致end时间比start时间还早。 所以Go 1.9使用monotonic Time来实现大部分的time中的函数，在计算duration的时候不会出现因为时钟调整出现的误差了。 设计文...阅读全文
目前非常流行的RDBMS PostgresSQL已经在几周前发布了它的第10个版本。由于Postgres的可靠性、节约成本、成熟，当然还有它的开源，已经21岁的Postgres在开发者之中仍旧非常流行。 Postgres 10带来了一些新特性，其中一些特性另开发者感到十分兴奋。10Clouds在博客中详细介绍了其中的一些特性。通过消除主表（master table）中触发器（trigger）的需求，本地分区（native partitioning）现在变得更简单了。这意味着创建分区表将变得更简单，并且从开发者的角度来看，现在从分区数据表中进行查询和插入与在非分区的数据表进行这些操作是完全一致的。 多列统计（multicolumn statistics）是Postgres 10的另一项改进...阅读全文
在集群化环境里，日志采集是重要基础设施。本文结合最新的 1.0.9 版，对 logpipe 做一个简单的介绍。开源主流解决方案是基于 flume-ng，但在实际使用中发现 flume-ng 存在诸多问题。 比如 flume-ng 的 spoolDir 采集器只能对文件名转档后的大小不能变化的最终日志文件进行采集，不能满足采集时效性要求，如果要采集正在被不断追加的日志文件，只能用 exec 采集器搭配 tail -F 命令，但 tail -F 命令又不能通配目标目录中将来新增的未知文件名。其它解决方案如 logstash 由于是 JAVA 开发，内存占用和性能都不能达到最优。 作为一个日志采集的本地代理，内存占用应该小而受控，性能应该高效，耗费 CPU 低对应用影响尽可能小，要能异步实时追踪...阅读全文
从我们认为 DevOps 只是一个流行语开始，它已经发展了很长的一段时间。现在，DevOps 已经成为了一个主要焦点，并在过去几年一直在塑造着软件世界。专家表示，DevOps 将成为主流，它的流行程度将在 2019 年达到顶峰。 根据 2018 年《DevOps 现状报告》，DevOps 精英级执行团队代码部署频率和发布速度更高，变更故障率更少，事故恢复时间更短，同时高效能团队的比例逐年增长，采用 DevOps 的团队越来越多。 而 Stack Overflow2018 年的薪资计算器报告显示，全球 DevOps 专家的收入最高，美国 DevOps 专家的年薪中位数接近 10 万美元。 以下是“DevOps”一词的 Google Trends 以及 2019 年的预计增长假设。 从统计数据...阅读全文
: Temperature/speed normal Apr 20 00:12:20 vivek-desktop mysqld: Database Server failed 8. setterm 命令 这个命令可以设置中断的属性。下面的例子是强制屏幕全黑15分钟，并且60分钟后把显示器设为待机状态： setterm -blank 15 -powersave powerdown -powerdown 60 下面这段命令可以在中断显示加下划线的文字： setterm -underline on; echo "Add Your Important Message Here" setterm -underline off 或者你可以关闭光标： setterm -cursor off 9. smbclient：向 MS...阅读全文
然避免不了，为了更加从容的应对这些故障，就搞了一个工具 Chaos Monkey 会随机停止生产环境中的虚拟机，通过观察系统在真实故障中的表现来确保程序的健壮性，也通过实战来验证各种高可用技术是否靠谱。接着冒出了 Chaos Gorilla，会停止一整个可用域中的所有机器；最后还有Chaos Kong，直接停掉一整个 Region，非常有挑战精神（丧心病狂）。 为了更好的观察系统在故障时的情况，还研发了全局可视化系统，代号 Flux，可以将整个系统的逻辑架构和各服务之间的流量可视化在大屏幕上，效果图如下： 他们每个月有一个活动：将一个 Region 里的机器全部关掉，看 Netflix 服务是否正常。有兴趣看视频的可以移步这里。 另外，Netflix 除了云服务，还有自建CDN，即 Open...阅读全文
最近游戏已上线运营，进行服务器内存优化，发现一个非常奇妙的问题，我们的认证服务器（AuthServer）负责跟第三方渠道SDK打交道（登陆和充值），由于采用了curl阻塞的方式，所以这里开了128个线程，奇怪的是每次刚启动的时候占用的虚拟内存在2.3G，然后每次处理消息就增加64M，增加到4.4G就不再增加了，由于我们采用预分配的方式，在线程内部根本没有大块分内存，那么这些内存到底是从哪来的呢？让人百思不得其解。 探索 一开始首先排除掉内存泄露，不可能每次都泄露64M内存这么巧合，为了证明我的观点，首先，我使用了valgrind。 valgrind --leak-check=full --track-fds=yes --log-file=./AuthServer.vlog & 然后启动测试...阅读全文
前不久组内又有一次我比较期待的分享：“Linux 的虚拟内存”。是某天晚上加班时，我们讨论虚拟内存的概念时，leader 发现几位同事对虚拟内存认识不清后，特意给这位同学挑选的主题。 我之前了解一些操作系统的概念，主要是毕业后对自己大学四年的荒废比较懊恼，觉得自己有些对不起计算机专业出身，于是在工作之余抽出时间看了哈工大在网易云课堂的操作系统公开课，自己也读了一本讲操作系统比较浅的书 《Linux内核设计与实现》，而且去年自己用 C 写简单的服务器时，也追根究底了解了更多的系统底层知识。多亏了这些知识，让我对应用层的知识更有掌控感，也在上次排查问题时（从应用到内核查接口超时）助了我一臂之力。 前几天另一位同事来问另一个虚拟内存相关的问题，我才发现对于虚拟内存，我的理解还不够深刻，一些概念还...阅读全文
Chromebook, Nokia N900, Odroid XU, 以及一系列使用sunxi处理器的其他设备上进行安装。 Devuan 下载地址列表：https://devuan.org/index.html#download...阅读全文
Desktop 12-SP2 OpenSuse 漏洞检测: 可以使用以下命令查看 sudo 版本: sudo -V 漏洞修复建议 (或缓解措施): 目前阿里云官方软件源已经同步更新，可以通过以下命令更新补丁: Ubuntu/Debian: sudo apt-get update & sudo apt-get upgrade CentOS/RHEL: yum update yum update sudo 注：升级 kernel 可能会导致服务器无法启动，建议您在升级补丁时排除内核升级 打开/etc/yum.conf ，输入： # vi /etc/yum.conf 在 [main] 段中，下添加一行，如下： exclude= kernel* //这里假设是排除内核升级 情报来源:http...阅读全文
FFmpeg 是一款流行的多媒体框架，可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。采用LGPL或GPL许可证。它提供了录制、转换以及流化音视频的完整解决方案。它包含了非常先进的音频/视频编解码库libavcodec，为了保证高可移植性和编解码质量，libavcodec 里很多 codec 都是从头开发的。 还值得一提的是，ffmpeg 转换多媒体文件提供了 FFmpeg 工具，ffserver 流工具，基于 SDL 和 FFmpeg 库和 ffprobe 多媒体码流分析仪 ffplay 媒体播放器。 最新的版本是ffmpeg 3.3.4 "Hilbert", 软件库的版本如下， libavutil 55. 58.100 libavcodec 57. 89.100...阅读全文
慕尼黑决定放弃微软服务转向开源软件的时候，得到了很多人的支持。然而，上个月，慕尼黑表示在 Linux 客户端中心环境下，他们经常会遇到重大难题，运行 Linux 被证明最终难以维持，并决定再次投票是否迁回 Windows。 慕尼黑因为计划“戒掉”微软，并开始对 Linux 和 LibreOffice 的使用而受到了开源界关注。但其实慕尼黑并没有“戒”成功，其邮件服务器最终还是转移到了 Microsoft Exchange 上，并且，在今年 2 月份开始第一次投票，决定是否从 Linux 迁回 Windows。 上周，慕尼黑又举行了一次委员会投票，投票结果显示，社会民主党和保守党派都投票支持从 Linux 迁回到 Windows。Hubner 表示，用户对 Linux 的使用并不满意，公共部...阅读全文
”Debonaire“的新视觉桌面主题，”Debonaire目前正在测试中。但是，它是完全稳定的，可以安全使用。每个Q4OS用户都可以使用LookSwitcher应用程序轻松切换到“Debonaire”桌面。 如何在Q4OS上安装Debonaire主题？ 所有的Q4OS用户现在可以通过 LookSwitcher 应用程序在他们的计算机上安装 Debonaire 主题，他们可以从Software Center软件包管理器下载和安装。安装完成后，打开LookSwitcher应用程序，点击窗口左下角的“显示所有主题”按钮，在主题列表中显示“Debonaire”条目。 在默认情况下，在操作系统的未来版本中启用它之前，Q4OS团队希望您在Q4OS安装中安装Debonaire主题，进行测试，并在论坛主题中发布反馈(正面或...阅读全文
PHP7 的发布废弃了部分特性，一些程序或者插件当前不能很好的运行在 PHP7 上，因此如果服务器上能同时运行多个 PHP 的版本，就可以很好的解决过渡期的兼容性问题。在前面两篇文章中，我们介绍了如何在 Debian Stretch 中安装使用 PHP5，以及如何在Debian环境安装配置PHP 7.2。看完这两篇文章，细心的同学就会发现，两个版本的PHP共存，是很好实现的。 这里我们以同时安装 PHP-7.2 和 PHP-5.6 两个版本为例，说明Debian环境中如何配置实现Nginx中的PHP多版本共存。 一、根据安装配置PHP7.2教程安装 PHP-7.2 和 PHP-5.6： #先安装 PHP7.2 apt install -y php7.2-fpm php7.2-mysql...阅读全文
iptables，MySQL 8.0，MariaDB 10.3，PostgreSQL 10 和 9.6，Redis 4.0等等。主要特性有： 简化应用程序开发 —— 通过减少设置和配置工作，可以更快地编写代码 对于刚接触 Linux 的开发者来说，这是最简单的 RHEL 适用于传统和云/容器的应用程序，两者都有许多新工具 已经提供了许多工具来构建和测试应用程序 下载： 有三种方法可以访问 RHEL 8 beta，这取决于与 Red Hat 的现有关系： 当前的Red Hat开发会员可以通过Red Hat Developer下载。 如果不是开发会员，只需要在上面的链接注册一下即可，不需要费用。 如果是Red Hat Enterprise Linux的合作客户，登录Customer Portal就可以获取客户...阅读全文
BFQ I / O调度程序的性能改进。 Linux Kernel 5.2还为cgroups v2添加了一个冷冻控制器以释放资源，部署了新设备隐射“dust”目标来模拟读取失败或者扇区失败的设备，为 clone(2)添加了CLONE_PIDFD这个Flag从而在创建进程时候获取PID，能够通过pidfd_send_signal(2)使用，并在Android系统中提供了更高的资源监控。 在安全方面，Linux Kernel 5.2附带了一个全新的CPU BUG框架，用于保护设备免受英特尔MDS（微架构数据采样）硬件漏洞的影响，同时还有一个名为“mitigations=”独立于架构的启动选项，以便更容易启用或禁用缓解CPU缺陷。 Linux内核5.2还包括许多更新的和新的驱动程序，以获得更好的硬件支持...阅读全文
SK海力士宣布，已经成功研发出新一代DRAM内存“HBM2E”，可视为HBM2的增强版，拥有业界最高的传输带宽，相比现在的HBM2提升了大约50％，同时容量也翻了一番。 SK海力士的HBM2E每个针脚传输速率为3.6Gbps，搭配1024-bit位宽的话可以提供超过460GB/s的超高带宽，无可比拟。 AMD Radeon VII显卡曾经率先实现1TB/s的显存带宽，但应用了4096-bit的位宽，如果换成HBM2E总带宽可以轻松超过1.8TB/s。 同时得益于TSV硅通孔技术，HBM2E内存可以最多垂直堆叠八颗16Gb芯片，单颗封装总容量因此可达16GB，是目前的两倍。 SK海力士表示，超高带宽的HBM2E可用于工业4.0、高端GPU显卡、超级计算机、机器学习、AI人工智能等各种尖端领域...阅读全文
Raspberry Pi，官方不久前才宣布 Raspberry Pi 4 符合 OpenGL ES 3.1——它是一个 API 规范，允许开发人员使用图形硬件或 GPU。 Raspberry Pi 基金会联合创始人 Ebert Upton 在上个月发布了 Raspberry Pi 4 Model B 的 OpenGL ES 3.1 里程碑，它具有 Broadcom BCM2711，四核 Cortex-A72 处理器和 Broadcom VideoCore VI GPU。 Raspberry Pi 设备的图形里程碑是使用 Raspberry Pi 4 的 VideoCore VI GPU 渲染 RGB 三角形。Upton 提到，在 Raspberry Pi Model B 4 上使用此 GPU 已经实现了第一...阅读全文
Homebrew 是一款 Mac OS 平台下的软件包管理工具，拥有安装、卸载、更新、查看、搜索等很多实用的功能。简单的一条指令，就可以实现包管理，你不用关心各种依赖和文件路径的情况，十分方便快捷。 引用官方的一句话：又提示缺少套件啦？别担心，Homebrew 随时守候。Homebrew —— OS X 不可或缺的套件管理器。 Homebrew的安装有一些前置依赖，具体如下， 64 位 Intel CPUMac OS X High Sierra 10.13 或更新的系统版本Xcode 的命令行工具 xcode-select --installBourne 兼容的 shell (zsh 或 bash) 安装 Homebrew 安装 Homebrew 只需要用普通用户，执行一条命令即可，如下...阅读全文
，优麒麟。优麒麟由工信部、Canonica 和国防科技大学联合开发，整合了多个中国本土流行 Linux 应用。 Ubuntu 20.04 使用 Linux 5.4 内核，该版本具有内核锁定模式和 exFAT 支持等新特性。 内核锁定功能主要是为了防止 root 帐户篡改内核代码，从而在用户态进程和代码之间划清界限。启用该功能后，即便是 root 帐户也无法访问某些内核功能，从而保护操作系统免受受损的 root 帐户影响。 exFAT 文件系统则是 FAT32 的替代者，它由微软开发，但是不仅用于 Windows 系统，目前 exFAT 在整个电子行业中都得到了广泛应用，特别是 SD 卡、USB 闪存驱动、数码相机和 MP3 播放器中使用最为充分，你平时用这些电子产品的时候，多半就使用到了...阅读全文
形执行的通用抽象，为了获得更好的性能，其图执行器支持并发执行操作和异步 API 调用。在性能测试中，与 TensorFlow 当前的运行时相比，TFRT 将经过训练的 ResNet-50 模型（一种流行的图像识别算法）在图形卡上的推理时间缩短了 28％。 TFRT 仍处在早期开发阶段，它已经与 TensorFlow 集成，最终将成为其默认运行时。关于 TFRT 的更多信息，可查看 TensorFlow 官方博客。...阅读全文
程序可以处理这些更复杂的工作负载之前，还有很多工作要做。甚至由于驱动程序错误或未实现的 Vulkan 功能，连 Sascha 的一些演示都无法运行。 为此，接下来几个月的工作将集中在支持基本的 Vulkan 1.0 功能集，至少涉及支持计算着色器、输入附件、纹理像素缓冲区、存储镜像、pipeline 缓存和多重采样。在 Vulkan 1.0 中，还需要支持其它一些功能，例如健壮的缓冲区访问等。 一旦完成了功能开发，则可能会将重心转移到 CTS 一致性上，这将全部用于 bug 修复，并处理特殊情况。最后也会有许多性能调整和优化工作。 Raspberry Pi 基金会还介绍，目前已经将驱动程序的开发转移到一个开放的存储库中，开发者可以在其中找到有关如何构建和安装驱动的说明。...阅读全文
Kong 官方宣布，Kuma 作为 Sandbox 项目被捐赠给了 CNCF，并表示“这是有史以来第一个基于 Envoy 的服务网格被捐赠给基金会”。 Kuma 诞生于 2019 年 6 月，它是一个现代的通用服务网格控制平面，基于 Envoy 搭建（Envoy 是一个为云原生应用设计的代理软件）。Kuma 可以在包括 Kubernetes、虚拟机、容器、裸机和传统环境在内的任意平台上运行，以落实整个组织中的云原生体验。 “服务网格越大，就越有价值”。因此，Kuma 始终提供 Kubernetes 和 Universal 两种模式，以对 Kubernetes 和 VM 工作负载提供支持。在最新发布的 0.6 版本中，Kuma 的原始 DNA 得到扩展，以支持混合通用工作负载，这不仅允许跨...阅读全文
中提供了一个内置选项，可通过启用它来显示网页完整 URL。 具体操作方式如下： 使用 Chrome 83 Canary 或更高版本；前往 chrome://flags 页面；加载 chrome://flags/#omnibox-context-menu-show-full-urls； 选择启用，然后重新启动浏览器；重新启动 Chrome 后，访问任意网站，在 Omnibox 中选择域，然后右键单击并选中 “Show URL” 选项，最后单击网页上的任何其他区域以恢复 URL 的默认状态。 不得不说这个设计看起来有点“蛋疼”，这效果和双击地址栏没多大差别吧？还是等Chrome 83 发布后看看效果。...阅读全文
，TokyoTyrant及Schooner Membrain等。RethinkDB为各种应用压力下提供高性能和高可靠性 支持，主要应用在下面一些场景： 用来处理一些其它方案无法解决的服务负载（如：要求快速的服务启动，在数据量超出内存大小后还要有高的性能，处理各种不稳定的读写压力，处理大量数据等） 提供性能与数据稳定性之间的精细调控 大大提高你的缓存层和key-value存储的性能，在你现有的硬件条件下，能支持更高的应用负载。 使用费用 RethinkDB目前提供两个版本的支持，一个免费版的，一个商用版的。商用版本的价格是每年每台机器$1500。免费版提供目前所有功能，提供后续所有安全相关的升级。但是新功能的升级只保证在付费版本中保持更新，另外商用版本还提供技术支持。...阅读全文
, signature, torrent, pkglist) Tails (“The Amnesic Incognito Live System”的缩写) 是一个十分注重“隐私性”和“隐匿性”的 Linux 发行版，它衍生自 Debian，设计之初就是帮助用户匿名使用互联网，并最大限度保护个人隐私。 为达到此目标，Tails 使用了 Tor 网络，使得网络流量很难被追踪。Tails 还预装了一些应用，包括网页浏览器、IRC 客户端、邮件客户端、即时消息通信工具，它们都以安全为理念进行了预配置，并对网络流量进行了匿名性处理。因此通过 Tails 我们可以不留下任何痕迹“隐身”地使用互联网。...阅读全文
PureFTPd 是一款专注于程序健壮和软件安全的免费FTP服务器软件（基于BSD License）。其可以在多种类Unix操作系统中编译运行，包括Linux、OpenBSD、FreeBSD、Solaris、Darwin等。PureFTPd 还有Android移植版本。 本篇文章，我们介绍如何在 Debian 系统中，安装配置 pure-ftpd。 首选在系统中安装 pure-ftpd：sudo apt-get install pure-ftpd 1. 在系统里增加一个不能登录的用户及用户组，用于映射ftp虚拟用户 sudo groupadd ftpgroup sudo useradd -g ftpgroup -d /usr/sbin/nologin ftpuser 说明： ftpuser...阅读全文
个新用户均可享受新的12个月免费云服务器数据库等产品！快来加入我们吧！ 免费12个月链接： https://aws.amazon.com/cn/free/? sc_channel=seo&sc_campaign=acquisition_CN&sc_medium=backlink&sc_content=developer...阅读全文
ThinkPHP V5.1 —— 12 载初心不改，你值得信赖的 PHP 框架。期盼已久的 V5.1.0 版本今日正式发布，祝大家 2018 年新年快乐！ ThinkPHP 自诞生以来一路走来已经 12 载，初心不改，并将继续努力，感谢大家的一路支持和贡献！ 特性 5.1 版本主要特性包括： 引入容器和 Facade 支持 依赖注入完善和支持更多场景 重构的（对象化）路由 路由跨域请求支持 支持注解路由 配置和路由目录独立 取消系统常量 助手函数增强 类库别名机制 模型和数据库增强 验证类增强 模板引擎改进 支持 PSR-3 日志规范 安装 5.1 版本开始官方不提供下载包，请使用 composer 安装： composer create-project topthink/think tp...阅读全文
于更好的机器学习和数字信号处理。在安全方面，armv9 会获得 Arm Confidential Compute Architecture (CCA)，在使用时屏蔽数据的访问，在硬件层面保护数据。此外，还会有一个叫做 Realms 的东西，应用程序可以在安全和非安全区域之外使用。ARM 并没有透露首款基于 armv9 的新芯片何时会发布，不过可以肯定的是还需要再等待一段时间。...阅读全文
2021 年 1 季度，HDD / SSD 年化故障率对比。在笔记本电脑市场，厂商也愈加倾向于将内置 SSD 作为其轻薄本产品线的唯一选项。此外 BackBlaze 祖辛发表的一项研究，更是揭示了一个有趣的事实 —— SSD 的可靠性，竟然是 HDD 的 21 倍！以定期发表企业存储可靠性报告而被大家所熟知的 BackBlaze，让我们直观地了解到了各款驱动器的平均或年化故障率（AFR）。HDD / SSD 终身年化故障率对比2021 年 1 季度期间，BackBlaze 发现，各品牌机械硬盘的 AFR 为 10.56%，而同期各品牌固态硬盘的 AFR 低至惊人的 0.58% 。换言之，大约每 10 块 HDD 中，就有 1 个发生了故障。而在大约每 200 块 SSD 中，也只有 1 个...阅读全文
的 Sidecar 支持（不包含 iptables）添加了为 sidecar Envoys 配置 DNS 刷新速率 的功能，以减少 DNS 服务器上的负载Graduated Sidecar API from Alpha to Alpha API and Beta runtime. 详细内容请查看发布公告。 源码下载地址：https://github.com/istio/istio/releases/tag/1.2.0 Istio 是一个由谷歌、IBM 与 Lyft 共同开发的开源项目，旨在提供一种统一化的微服务连接、安全保障、管理与监控方式。 Istio 项目能够为微服务架构提供流量管理机制，同时亦为其它增值功能（包括安全性、监控、路由、连接管理与策略等）创造了基础。这款软件利用久经考验的...阅读全文
为普遍的方式，需要通过BIOS设置U盘启动来进入PE，适合2012以前的老机器。 特点： 1.启动稳定进入菜单 2.占用的空间小。 3.功能强大可靠，支持的主板比较多！ 假如不要求太高就是做个u盘保驾护航建议装机版。要是专业的维护人员，建议用双版合一的。也就是说有些U盘启动盘制作工具是装机版+uefi二合一的版本，当然占用的U盘空间也会大一些，适合比较专业的经常装电脑的朋友使用。...阅读全文
Node.js 10.0.0 正式发布，这是自 Node.js Foundation 开展以来的第七个主要版本，并将在 2018 年 10 月成为下一个 LTS 分支。 新版本自带定制化的 Node-ChakraCore 引擎，其功能亮点包括： 全面支持 N-API 可轻松通过新的 Visual Studio Code Extension 进行 Time-Travel 调试 支持 TTD 的生成器和异步函数 支持 Inspector 协议 增强稳定性和其他各种改进 Node.js 10.0.0 还包含以下更新： N-API native addons API 已从实验状态毕业 Async_hooks 过时的实验性 async_hooks API 已被删除 Child Process 忽略未...阅读全文
1月31日上午消息，固态技术协会（JEDEC）发布了Universal Flash Storage (UFS&UFSHCI，通用闪存存储) v3.0标准（JESD220D、JESD223D），和UFS存储卡v1.1标准（JESD220-2A）。简单来说，UFS 3.0引入了HS-G4规范，单通道带宽提升到11.6Gbps，是HS-G3（UFS 2.1）性能的2倍。 由于UFS的最大优势就是双通道双向读写，所以接口带宽最高23.2Gbps，也就是2.9GB/s。 互联层设计方面，严格遵守 MIPI（移动产业处理器接口）的规范协议，其中物理层依据 MIPI M-PHY v4.1，传输层依据MIPI UniProSM v1.8。 其它方面，UFS 3.0支持的分区增多（UFS 2.1是8个），纠...阅读全文
拟constexpr 向量和字符串计时：日历、时区支持std::formatstd::spanstd::jthread 详细变化查看 cppreference.com, open-std.org 和 Wikipedia。 像 Concepts/Ranges/Modules/Coroutines 这些新特性将会对开发者及 C++ 生态产生不小的影响，也为这门“高龄”编程语言增添不少魅力。 工具方面，GCC 10 编译器对 C++20 标准已基本支持，在更早的 GCC 8/9 中，目前尚待完成的是对 modules 的支持。GCC Wiki 页面概述了目前正在进行的工作。此外，Clang C++ 状态报告页面显示已完成了对大部分特性的支持，待完成的包括 concepts, immediate...阅读全文
来源｜Greylock OneFlow社区编译 翻译｜胡燕君、贾川 预告了一整年的GPT-4迟迟没来，人们猜想OpenAI是不是要跳票了，更何况他们之前的得意之作DALL-E也被开源Stable Diffusion打了个措手不及，再不来点深水炸弹业界地位危矣。 不过，就在大家以为今年OpenAI将以沉寂收场时，聊天机器人模型ChatGPT横空出世，让人们看到了AI的更大创造力，聚光灯也再度打到了OpenAI的身上。 今年9月，LinkedIn联合创始人Reid Hoffman与OpenAI首席执行官Sam Altman进行了一场对话，而肩负着宏伟使命且极富远见的Altman就曾预言：AI即将迎来下一个发展阶段。如今，大型语言模型越来越先进，也出现了可以实现文本-图像相互转换的多模态模型，一...阅读全文
Harbor 1.9 发布了，此版本新功能众多，包括 tag 保留和配额、可与 CI/CD 工具集成的 Webhook 通知、数据复制、Syslog 集成以及 CVE 例外策略等安全功能。 Webhook 如果您是项目管理员，可以通过 Webhook 的通知机制，将 Harbor 的项目与您技术栈的其余部分连接在一起。简言之，如果您配置了 Webhook，Harbor 会就把该项目中发生的某些事件（包括推送、拉取、删除镜像和 Helm Charts、镜像扫描及 CVEanqu 漏洞发现）向 Webhook 端点发出通知。通过这些事件，您可以将 Harbor 与其他系统集成在一起，以简化持续集成和开发过程。理想情况下，获得 Webhook 的端点应具有一个操作侦听器，用于解释 JSON 格式...阅读全文
PostgreSQL 原生类型。此外，UUID v4 生成函数 gen_random_uuid() 现在无需安装任何扩展即可使用。 PostgreSQL 分区系统更加灵活，因为分区表完全支持逻辑复制和 BEFORE 行级触发器。 PostgreSQL 13 中的FETCH FIRST语法现已扩展为可包含WITH TIES子句。 指定时，WITH TIES包括基于ORDER BY子句的结果集中最后一行相匹配的任何其他行。 安全性增强 在之前的版本中，新扩展只能由数据库超级用户安装。为了更容易利用 PostgreSQL 的扩展性，PostgreSQL 13 增加了“可信扩展”的概念——允许数据库用户安装超级用户标记为“可信”的扩展。某些内置扩展默认被标记为“可信”，包括pgcrypto, tablefunc和...阅读全文
在当前以容器化和微服务推动的技术中，需要了解的一个重要组织就是Linux基金会，在全世界范围内，Linux基金会通过提供开放源码所需要的统一资源和服务，从而促进和保护Linux的发展，推动Linux的标准化。 2000年，开源发展实验室OSDL（Open Source Development Labs）作为一个全球性的非盈利组织正式创立以促进Linux企业级计算的发展2007年1月22日，另外一个致力于推动GPL的全球性的非盈利组织，自由标准组织FSG（Free Standards Group）和OSDL联合成立了Linux基金会。 Linux基金会是做什么的 拉赞助 Linux基金会致力于围绕开源创建可持续的生态系统，从而加速技术的发展和商业化的推进。而实现这一主要目的的方式之一就是为...阅读全文
Linux 、FreeBSD 、NetBSD、 OpenBSD、 OS X、 OpenSolaris、 AIX、 HP-UX、 Android 以及 Windows。在这个教程，我们将使用 Ubuntu 16 ，你需要拥有这台电脑的 sudo 或 root 权限。我们将完整的进行安装和 Fio 的使用。 在 Debian 系统安装 Fio 对于 Debian 来说， Fio 已经在主仓库内。我们可以很容易的使用 apt-get 的包管理器安装。你只需要简单的执行下述命令： sudo apt-get install fio 当然，你可以可以使用源代码，自己编译安装最新的版本。我们需要从 GitHub 上克隆最新的代码，安装所需的依赖，然后从源码构建应用。首先，确保我们安装了 Git ， sudo...阅读全文
很多同学都已经学习了 Linux ，可能已经在自己的机器上安装过 Linux，甚至都能搭建个简单的个人博客，也有可能编译部署过邮件服务器之类的软件，可是感觉仍然对 Linux 有点摸不着，颇有隔靴挠痒的感受。 总是好奇 Linux 内核是怎么回事，究竟里面有点什么？总是好奇 Linux 是怎么启动起来的，那个什么 GRUB 怎么知道读取引导信息？总是好奇设备怎么就可以被当成文件操作，为什么可以从 /proc 读到进程的信息？总是好奇如何才能构建一个操作系统，从无到有的做成一个可引导的 Linux 启动盘？ 不用羡慕那些说起这些就头头是道是 Linux 极客们，其实你和他们之间只是差一个 LFS 而已。 LFS 是什么？ LFS（英文 Linux From Scratch 的缩写），中文释意...阅读全文
Spring Cloud：Eureka注册中心，Ribbon集成REST实现负载均衡，OpenFeign声明式服务调用，Hystrix实现服务限流熔断降级和数据监控，Zuul实现微服网关，Config分布式统一配置中心，分布式链路跟踪，集成Spring Cloud实现统一整合方案虚拟化容器Docker：Docker环境搭建和使用，搭建Docker私有仓库，Docker分布式集群部署，Kubernetes简介 4. 分布式 Java并发编程和网络编程：Java线程状态，线程池，线程通信，线程安全，Netty高性能原理分布式开发框架：分布式系统口调用技术：RPC，Apache分布式系统Zookeeper原理与应用，阿里Dubbo设计思想与应用分布式中间件：分布式服务器治理，分布式消息通信，分布式数据缓存...阅读全文
types 已废除，将会在10.0中移除。用stages替代。 与stages同义 variables GitLab Runner V0.5.0. 开始引入 GItLab CI 允许在.gitlab-ci.yml文件中添加变量，并在job环境中起作用。因为这些配置是存储在git仓库中，所以最好是存储项目的非敏感配置，例如： variables: DATABASE_URL:"postgres://postgres@postgres/my_database" 这些变量可以被后续的命令和脚本使用。服务容器也可以使用YAML中定义的变量，因此我们可以很好的调控服务容器。变量也可以定义成job level。 除了用户自定义的变量外，Runner也可以定义它自己的变量...阅读全文
了答案。 从单机到分布式，是追求更快和更高的性能，但也带来了更多的不确定性。比如，不确定计算机何时异常，不确定磁盘何时损坏，不确定网络通信的延迟，也不确定消息是否被正常消费。这些不确定性构成了分布式应用的挑战，简而言之： 异构的机器与网络：稳定性问题普遍的节点故障：可靠性问题不可靠的网络：一致性问题 面对这些挑战，业界提出了诸多的分布式理论、协议，如CAP定理，BASE理论，一致性协议2PC/3PC/ZAB，来保证系统的正常运行。虽然问题貌似是有了解决方案，但是应用的复杂度升高了。应用除了需要实现业务需求，还要兼顾非业务需求，集成诸如服务发现、负载均衡、失效转移、动态扩容、数据分片、调用链路监控等分布式系统的核心功能，对应用有很强的侵入性，这就是以Spring Cloud为代表的微服务框架的...阅读全文
，包括大型软件工程项目的工作原理，而且我也明白自己多么地喜欢我的计算机系统。我非常清楚这些日子以来的闲暇时间我是如何度过的。 我会在以下各小节中逐一介绍我所面临的主要困难，讨论顺序不分先后。其中有些困难有一些相互影响——例如，如果改动后的效果更好，那么我们就有机会将包转换成更方便的机器读取。 Debian的变更流程 最近几年，我目前的团队在整个代码库中进行了各种大大小小的重构（涉及数千个项目），因此在关于如何有效地进行这些变更方面，我们学到了很多宝贵的经验。令我苦恼的是，Debian在各方面的工作方式几乎完全相反。我理解每个组织都不同，但我认为我的很多观点确实适用于Debian。 在Debian中，包的推送必须严格遵守一个文档——叫做Debian策略，还有个程序lintian用来保证该策略的实...阅读全文
一 Kafka可视化管理工具kafka-manager 安装及基本使用可参考：https://www.cnblogs.com/dadonggg/p/8205302.html 二 线上环境规划 JVM参数设置 kafka是scala语言开发，运行在JVM上，需要对JVM参数合理设置，参看JVM调优专题 修改bin/kafka-start-server.sh中的jvm设置，假设机器是32G内存，可以如下设置： export KAFKA_HEAP_OPTS="-Xmx16G -Xms16G -Xmn10G -XX:MetaspaceSize=256M -XX:+UseG1GC -XX:MaxGCPauseMillis=50 -XX:G1HeapRegionSize=16M" 这种大内存的情况一般...阅读全文
，CPU持续上升到99% 5分钟内，大量应用报警，并且拒绝服务，RDS的监控显示出现大量慢SQL，联系服务器数据库提供商进行协助 8分钟内，进行数据库主备切换（业务会受损，但是也没办法，没有定位到问题） 9分钟内，部分业务恢复，但是一些业务订单的回调消息堆积超过20w，备库的CPU使用率也持续上升 15分钟内，备库CPU使用率超过97%，业务再次中断，进行切回主库，并进行限流 20分钟内，关闭一些次要应用的流量入口 25分钟内，主库CPU使用率恢复正常 30分钟内，逐步开启关闭的限流应用 35分钟内，所有应用恢复正常 接下来就是与服务器数据库提供商成立应急小组紧急优化可能出现的慢SQL，虽然说可能解决了一些慢SQL，但此次并没有定位到具体的问题，也就为几天后再次发生宕机事件埋下了伏笔 事故影响 某...阅读全文
预设了很多背景知识。 一般使用文档都是有开发者写的，他们都非常了解这个工具的相关的知识，所以习惯性的会认为，啊 这个知识点很简单 用户也肯定会吧，实际上用户不一定会。这本质上就是一种认知偏差，这种现象在跨团队协作 尤其是多端协作的时候也非常明显。 这类型的文档写作中，要求写作者尽可能站在用户的视角上思考，极力避免出现和用户的认知偏差，力争每个步骤做到明确无歧义，每两个步骤之间做到紧密衔接。 ## 概念性文档 ## 当参考文档无法解释清楚某些东西的时候，就需要概念性文档了，比如某个API的具体实现原理。其主要是为了扩充参考文档，而不是替代参考文档。有时候这和参考文档会有些内容重复，但主要还是为了更深层次的说明某些问题、解释清楚某个概念。 概念性文档也是所有文档中写作最难的，也是被阅读最少的，所...阅读全文
