Homebrew 是一款 Mac OS 平台下的软件包管理工具，拥有安装、卸载、更新、查看、搜索等很多实用的功能。简单的一条指令，就可以实现包管理，你不用关心各种依赖和文件路径的情况，十分方便快捷。 引用官方的一句话：又提示缺少套件啦？别担心，Homebrew 随时守候。Homebrew —— OS X 不可或缺的套件管理器。 Homebrew的安装有一些前置依赖，具体如下， 64 位 Intel CPUMac OS X High Sierra 10.13 或更新的系统版本Xcode 的命令行工具 xcode-select --installBourne 兼容的 shell (zsh 或 bash) 安装 Homebrew 安装 Homebrew 只需要用普通用户，执行一条命令即可，如下...阅读全文
转机的设置，并默认已按初始化配置文章对服务器进行了配置。本文将介绍四种方法：firewalld，UFW，iptables，和 socat（推荐）来进行流量中转，根据需要选取其中一种方法操作即可。亦可根据需要，将目标机设置为只允许中转机访问。其中，firewalld，UFW，iptables 均可对 TCP 和 UDP 进行转发，而 socat 还可以对包含域名的地址进行转发。 准备购买合适的 NAT VPS，此处提供一些服务商了解 NAT VPS 的基本使用方法，例如搞清楚 NAT VPS 一般需要在服务商处查看端口映射的设置基础 Linux 操作知识，并了解 vim 编辑器的基本使用方法 使用 firewalld 进行中转此方法在 CentOS 下较为简便（CentOS 8 默认使用...阅读全文
UK8S是UCloud推出的Kubernetes容器云产品，完全兼容原生API，为用户提供一站式云上Kubernetes服务。我们团队自研了CNI（Container Network Interface）网络插件，深度集成VPC，使UK8S容器应用拥有与云主机间等同的网络性能（目前最高可达10Gb/s, 100万pps），并打通容器和物理云/托管云的网络。过程中，我们解决了开源kubelet创建多余Sandbox容器导致Pod IP莫名消失的问题，确保CNI插件正常运行，并准备将修复后的kubelet源码提交给社区。 深度集成VPC的网络方案 按照我们的设想，开发者可以在UK8S上部署、管理、扩展容器化应用，无需关心Kubernetes集群自身的搭建及维护等运维类工作。UK8S完全兼容原生...阅读全文
来自以色列的安全机构CTS-Labs突然曝出猛料，声称AMD Zen架构处理器存在四组12个高位安全漏洞，涉及Ryzen、EPYC全线产品。AMD第一时间对此发表了一份官方声明。 “我们刚刚收到一家名为CTS-Labs的公司的报告，声称我们的特定处理器产品可能存在安全漏洞。我们正在积极进行调查和分析。这家公司AMD从未听闻，而且不同寻常的是，这家安全机构直接将自己的发现公布给了媒体，却没有给AMD合理的时间调查和解决问题。安全是AMD的首要职责，我们持续努力确保我们客户的安全，应对新的安全威胁。如有后续进展我们会第一时间公告。” 可以看出，由于事发突然，特别是这些漏洞发现并没有按照行业惯例提前通知并给予90天的静默期，AMD被打了个措手不及，目前还无法完全证实这些漏洞的真伪。 即便是真的存...阅读全文
作为社区 RoadMap 的重要组成部分，是大数据实时化必然的趋势。但是另一方面，传统离线的计算需求其实并不会被实时任务完全取代，而是会长期存在。 在实时和离线的需求同时存在的状态下，以往的流批独立技术方案存在着一些痛点，比如： 需要维护两套系统，相应的就需要两组开发人员，人力的投入成本很高； 另外，两套数据链路处理相似内容带来维护的风险性和冗余； 最重要的一点是，如果流批使用的不是同一套数据处理系统，引擎本身差异可能会存在数据口径不一致的问题，从而导致业务数据存在一定的误差。这种误差对于大数据分析会有比较大的影响。 在这样的背景下，Flink 社区认定了实时离线一体化的技术路线是比较重要的技术趋势和方向。 Flink 在过去的几个版本中，在流批一体方面做了很多的工作。可以认为 Flink...阅读全文
作为最成功的微型计算机，开源的树莓派（Raspberry Pi）在技术圈和学术界一直广受编程爱好者的好评，各路大神基于树莓派制作的新奇设备层出不穷，围绕这款微型计算机已经形成了一种独特的 DIY 文化，相关的开源软件生态也十分丰富。 树莓派最初是剑桥大学计算机系的一个实验性项目，创始人 Eben Upton 召集了一群教师、学者和计算机爱好者，希望设计出一种能激励儿童参与编程的小型计算机。这个计算机的灵感来自 1981 年 Acorn 公司的 BBC Micro 计算机。第一台树莓派 ARM 原型机安装在一个与 USB 记忆棒大小相同的盒子里，它的一端是 USB 端口，另一端是HDMI 端口。2012 年 2 月 29 日，首批树莓派正式发售，定价为 35 美元。 根据树莓派官方统计的数...阅读全文
且总是设法规避这些批评。但现在我开始尝试听取这些意见，我会先设想这些批评是正确的，然后在这个基础上调整我的计划。做决定的过程充满了艰辛和痛苦，但也只有经历了这个过程才能将自信和自欺欺人区分开来。 保持自信与自我认知之间的平衡可以让人免于傲气、避免与他人脱节。 3 学会独立思考 创业很难，因为培养原创性思维很难。这种思维在学校里面是学不到的，实际上学校培养的是一种相反的思维方式，所以只能靠我们自己来培养原创性思维。 我们可以从第一性原理（first principles）出发，从中想出新的点子，然后与人交流沟通，对这些想法进行改良，之后我们再用轻松快捷的方式进行实际测试。 对创业者来说，失败是家常便饭，但我们一定要抱有必胜的信念，要不断尝试、不断试错，只有这样才能得到幸运之神的眷顾。 在这个过...阅读全文
1确保提案所做的任何变更都可以帮助到尽可能多的 Go 开发者（使他们编写的代码更健壮、正确性更高等），条件2则保证了变更将给使用者带来的影响降到最低。 至于条件3，如果提案不能满足该条件，它将不会被实现。即便这项提案能够解决一个很重要的问题，思路也很好，但在没有实现方案的情况下，它将会被拒绝，并需要重新起草。 下一步 在这篇文章发布时，Go 开发团队表示已经执行提案评估流程的第一步，并开始了流程的第二步，关于具体的提案可点此进行查看。 对于 Go 开发团队已经明确并通过的提案，将会继续实现（即评估流程的第3步）。开发团队表示希望在下一个发布周期的第一天（暂定于2019年2月1日）完成这些提案变更的实现，所以这次可能会在较早的时间开始进行，以留出两个月的反馈时间（2018年12月至2019年1...阅读全文
HBM 2内存，核心容量可达8Gb，通过TSV技术可以实现每个CPU支持64GB HBM2内存，每路插槽的带宽可达2TB/s，而到了HBM 4时代，每个CPU支持的容量可达512GB，带宽超过8TB/s。作为对比的话，目前AMD的EPYC处理器支持8通道DDR4内存，虽然最高容量能达到2TB，但是带宽不过150GB/s左右，与HBM内存相比就差远了。 按照他的观点，在一些需要高带宽的场合中，HBM技术无疑远胜DDR内存，所以他说的DDR内存将死在这方面是成立的，比如HPC高性能计算机行业就非常需要HBM。不过话说回来，DDR将死这个判断并不适合桌面市场，HBM技术虽然各种好，但是现在来看成本问题一时半会都没法解决. 目前能生产HBM内存的厂商只有三星、SK Hynix，美光因为有HMC技术，对...阅读全文
GitHub 刚刚通过官方博客发布了 21 日“挂掉”的事件分析。GitHub 指出此次事件发生的原因是在 10 月 21 日 22:52 UTC 进行日常维护——更换发生故障的 100G 光学设备时导致美国东海岸网络中心与美国东海岸数据中心之间的连接断开。 更具体地，GitHub 分析，虽然两地的连接在 43 秒内恢复，但这次短暂的中断引发了一系列事件，这才导致了长达 24 小时 11 分钟的服务降级。 为了大规模提高性能，GitHub 的应用程序将直接写入每个群集的相关主数据库，但在绝大多数情况下将读取请求委派给副本服务器的子集。GitHub 使用 Orchestrator 来管理 MySQL 集群拓扑并处理自动故障转移，Orchestrator 在此过程中考虑了许多变量，并在...阅读全文
了这里面的东西，每个程序员都应该可以做到这一点。嗯，但愿吧。 重视语言特性，而不是语言 很多人在乎自己或者别人是否“会”某种语言，对“发明”了某种语言的人倍加崇拜，为各种语言的孰优孰劣争得面红耳赤。这些问题对于我来说都是不存在的。虽然我写文章批评过不少语言的缺陷，在实际工作中我却很少跟人争论这些。如果有其它人在我身边争论，我甚至会戴上耳机，都懒得听他们说什么 为什么呢？我发现归根结底的原因，是因为我重视的是“语言特性”，而不是整个的“语言”。我能用任何语言写出不错的代码，就算再糟糕的语言也差不了多少。 任何一种“语言”，都是各种“语言特性”的组合。打个比方吧，一个程序语言就像一台电脑。它的牌子可能叫“联想”，或者“IBM”，或者“Dell”，或者“苹果”。那么，你可以说苹果一定比 IBM 好...阅读全文
Kodachi Linux 是一款基于 Debian 8.6 的操作系统。它是专为保护用户隐私而设计的，因此具有高度的安全及匿名性，并具备反调查取证的特点。 Kodachi 的使用也非常方便简单，你可以通过 USB 驱动来在你的 PC 上启动它。当你完全启动 Kodachi 操作系统后，你将会建立一个 VPN+Tor+DNScry 服务器的运行环境。你不需要特别了解或学习 Linux 的知识，Kodachi 都为你准备好了你所需要的！整个操作系统都活动在你的临时内存 RAM 下。因此，你一旦你关机，任何的操作痕迹都会被清除，避免你的隐私泄露及被追踪调查。 Kodachi 是一个实时的操作系统，你可以从几乎任何计算机上来启动它。例如：从 DVD，U盘 或 SD卡等。它旨在保护你的隐私及匿名性...阅读全文
Untangle NG Firewall 13.0.0 发布了，Untangle NG Firewall 是基于 Debian 的网关系统，它带有可插拔的模块以支持各种网络应用，这包括垃圾邮件阻挡、网页过滤、反病毒、反间谍软件、入侵阻止、虚拟专用网、SSL 虚拟专用网、防火墙等等。 新版本引入了基于 MAC 的设备跟踪功能，用户跟踪（通过多种方法）以及覆盖 Untangle OpenVPN 设置的能力。 此版本还引入了两个新功能：标签（Tags）和触发器（Triggers）。 标记是一个新功能，允许管理员标记主机，设备或用户，以便基于具有与其相关联的特定标签的实体快速创建策略。 标签可以由管理员手动应用或根据条件自动应用。触发器允许管理员在特定事件发生时标记主机，设备和用户。 然后，管理员...阅读全文
源选择方案。该项目始于 Linux Mint 的 Debian 版本的非正式变体，当时用KDE作为缺省桌面，但后来它拥有了自己的名字 SolydK。当 Linux Mint 丢弃了其基于 Debian 且使用 Xfce 桌面的版本后，Solyd X 便问世了。...阅读全文
微软发烧友 Brad Sams 近日在 Petri 上写道，微软正在开发一个名为 Windows Lite 的新版操作系统。顾名思义，Windows Lite 将是轻量级并快速的，因为它抛开了 Windows 长达数十年的臃肿积累。此举似乎暗示着微软转向云计算并重新进入移动领域的野心。但微软想取得成功，它必须从过去的错误中吸取教训。 Windows 的转型是有必要的。尽管微软已经在其 Surface 系列产品上取得了成功，但即便是最新的 Windows 10 系统，仍然包含着几十年前的代码，部分原因是微软的许多企业客户仍然需要与旧软件兼容。因此，Windows 10 不仅臃肿，而且还不适合移动世界。比方说，微软试图将 Surface Go 作为 iPad 的竞争对手，但受操作系统的限制，它...阅读全文
稳定的Linux 内核版本 5.5 版已正式发布。此前Linus Torvalds曾在Linux 5.5-rc7发布的声明中指出，他可能在下周最终发布5.5稳定版。目前5.5稳定版如约而至。 Torvalds在发布公告中指出，尽管本周的补丁程序有所增加，并且由于圣诞节和新年假期前后的停机时间，人们担心Linux 5.5周期可能会延长，但其还是选择了按时发布5.5 kernel，而不是选择额外的发布候选版本。 Linux 5.5带来了许多变化，其中包括有：对Raspberry Pi 4的支持，AMD Navi GPU超频，对新的和即将推出的英特尔平台的支持，默认情况下启用5级分页，比当前用户空间实用程序方便且更好的NVMe驱动器温度驱动器，支持Chromebook语音唤醒，用于内核内单元测试...阅读全文
USB 2.0 插槽的位置卸下了开关模式电源，并在 USB-C 接口旁添加了一个新开关，这样可以提供更高的峰值电流以匹配 8GB 内存版本的需求。 操作系统镜像方面，现在 Raspberry Pi 支持 64 位，其包含与常规 32 位镜像相同的应用程序集和相同的桌面环境，不过只是针对 Debian arm64 构建的。同时现在开始，32 位和 64 位操作系统镜像都不再使用 “Raspbian” 这一名称，改用新的统一的名称：Raspberry Pi OS，这样更便于用户识记。 64 位镜像下载地址：https://www.raspberrypi.org/forums/viewtopic.php?f=117&t=275370 在这一年时间里，Raspberry Pi 4 已经卖出了近 300...阅读全文
去年GitHub突然宣布开源代码也要受美国出口管制EAR让全球程序员都担心了，不过Linux基金会现在可以确认开源技术不受美国管制了。 软件开发方面，开源技术已经成为全球共识，很多项目都是全球各地的程序员合作开发的，不仅有美国及欧洲程序员，中国不少公司及开发者也是全球开源社区的重要组成，任何一方如果强硬限制，那么整个开源社区就存在断链的风险。 本周，Linux基金会在官网上发表了一份白皮书《了解开源科技和美国出口管制》，中英文双版介绍了美国出口管制的限制，最重要的是这个指南明确了“公开发布给全世界享用的开源技术是不受制于美国出口管制EAR，开源至今仍然是一个最为便利的全球协作的模式。” EAR第734.7条款指出，当可被公众获取且无进一步传播限制时，未被归类为密级事项的『技术』或『软件』属...阅读全文
少。 2、透明 这一点很容易理解：我们要使得社区可以观察和了解你正在做的事情：使用易于查找的可公开访问的源代码存储库，使用面向公众的问题跟踪软件，在社区可以找到的地方公布发布计划，以及在公共论坛捕获会议记录(例如归档邮件列表)。 3、开放 对于很多开源项目来说，“透明度”和“开放性”意味着同一件事，但其实这两个术语的含义截然不同。开放不仅仅指的是“一目了然”(这与透明本质上是一样的)。对于许多人来说，开源的“开放”意味着开放新思想，或开放参与。参与开源项目的规则对于每个人应该是一样的(“公平的竞争环境”)：仅仅接受几个补丁是不够的，你必须对新的思路点子开放。总之，你必须允许别人参与你的项目，放弃对项目的绝对控制。 4、保持“公平的竞争环境” 这并不一定意味着你必须让任何人加入项目，而是要确保...阅读全文
否需要触发其他操作，例如记录命令（用来进行回滚或审计）。 在 kubectl 判断出要创建一个 Deployment 后，它将使用 DeploymentV1Beta1 生成器从我们提供的参数中生成一个运行时对象。 API 版本协商与 API 组 为了更容易地消除字段或者重新组织资源结构，Kubernetes 支持多个 API 版本，每个版本都在不同的 API 路径下，例如 /api/v1 或者 /apis/extensions/v1beta1。不同的 API 版本表明不同的稳定性和支持级别，更详细的描述可以参考 Kubernetes API 概述。 API 组旨在对类似资源进行分类，以便使得 Kubernetes API 更容易扩展。API 的组名在 REST 路径或者序列化对象的...阅读全文
近日全球著名开源社区 Apache 基金会，宣布“百度开源的 ECharts 项目全票通过进入 Apache 孵化器”。这是百度第一个进入国际顶级开源社区的项目，也标志着百度开源正式进入开源发展的快车道。 ECharts 成为 Apache 孵化器项目之前，已经是国内可视化生态领域的领军者，近年内连续被开源中国评选为“年度最受欢迎的中国开源软件”，并广泛被各行业企业以及事业单位、科研院所应用。涉及行业包含金融、教育、医疗、物流、气候监测等众多领域，其中甚至包括阿里巴巴、腾讯、华为、联想、小米、国家电网、中国石化等。 ECharts 负责人祖明介绍到：“ ECharts 作为拥有丰富的可视化图表类型和深度交互能力的开源可视化库，配置便捷容易上手，同时上千的配置项和不同层面的扩展机制带来了灵活...阅读全文
这篇文章我会尽可能详细地说明如何快速安装纯净的Debian新系统，需要懂一点vi编辑器的使用方法。 如果是新手，没用过 vim 编辑器也不用担心，我会尽量详细地说明使用方法。 首先在Debian官网上下载网络安装CD或者完整DVD镜像，DVD镜像只需DVD-1即可。如果你的网络环境不错，推荐下载 netinst 包，通过网络安装 Debian 系统。 下载好镜像后做成U盘启动盘，从U盘启动开机。在引导界面选择Graphical install（图形化安装），进入安装过程，如图： 选择语言界面，选择中文吧， 提示虽然是好心，但是安装过程中我就见到一处乱码还就是下面这个图上，直接选是，下一步。 区域选择，选择中国。 主机名，自己随便填吧。 域名可不填，直接下一步。 设置root密码，自己设定好...阅读全文
基本为技术相关的文章。请问起初做这个网站的初衷是什么呢？关于网站还有其他需要说的吗？ 答：原来写过一个成绩分析的php小程序（phpcj的由来），放到网上，得到不少人的鼓励，于是就申请了个域名作为程序的网站。后来在朋友的建议下，做成了博客。说是博客，也就是一个个人笔记，记录一下遇到的问题如何解决的，方便以后查询，好记性不如一个烂笔头嘛！有时遇到问题，搜索一下，也会搜索到自己的博客上，咦，以前不是遇到过这个问题么？ 11.作为一名狂热的Linux爱好者，能介绍下日常你怎么折腾技术或者Linux的吗？您喜欢哪些呢，能与我们分享吗？ 答：由于喜欢折腾各种发行版，笔记本上目前有若干个Linux最新的发行版，现在是 Gentoo + Ubuntu16.04 + Archlinux + Fedora23...阅读全文
。 ceph-mgr还包括一个Prometheus插件。 ceph-mgr现在有一个Zabbix插件。使用zabbix_sender，它可以将集群故障事件发送到Zabbix Server主机。 这样可以方便地监视Ceph群集的状态，并在发生故障时发送通知。 集群的总体可扩展性有所提高。我们已经成功测试了多达10,000个OSD的集群。 目前，每个OSD都具有与其相关联的设备类（例如，hdd或ssd），允许CRUSH规则将数据简单地映射到系统中的设备的子集。 通常不需要手动编写CRUSH规则或手动编辑CRUSH。可以优化CRUSH权重，以保持OSD之间数据的近乎完美的分布。 还有一个新的upmap异常处理机制，允许单个PG移动以实现完美的分发（这需要客户端）。 每个OSD目前可以根据后端设备是HDD还是...阅读全文
时代已经到来，这也是为什么对应公链的代币，币价一直在稳定增长。 相比于 CoinEx 平台的优势，当前的 CET 虽然比较已有增长，当人处于低估状态。在群雄争霸的币圈江湖里凿出登顶之路。那你们觉得这波牛市中CET会是一个百倍币吗？ 快速注册 CoinEx 交易所： [http://cet.im](http://cet.im) （本地址仅为方便记忆，做跳转用。注意官方网站为 coinex.com 和 coinexweb.com ）...阅读全文
随着企业的逐步成熟，他们会开发更多工具。在Google，我们持续创建新的外部和内部服务，以及支持这些服务的基础架构。 从2013年起，我们开始放弃之前用来更新和维护服务的简单的自动化工作流。每个服务都要求复杂的更新逻辑，并且还需要适应基础架构的变化，经常性的集群的启动关闭等等。配置多个，互相交互的服务的工作流变得难以维护。 我们需要一种全新的方案来适应业务的增长以及所涉及到的配置的复杂性。为此，我们开发了声明式的自动化系统，作为统一的控制层，并且取代了工作流。这个系统包括两个主要的工具：Podspec，描述服务基础架构的工具，和Annealing，更新生产环境来匹配Prodspec输出的工具。本文讨论我们解决过的问题，以及我们所选择的架构。 Prodspec和Annealing有一个根本共...阅读全文
开源社区是个独特的存在。它虽然结构松散但却又切实有效，为社会提供便利好用的产品却不以利益为目的，将志趣相同的人们聚集在一起但又完整地保存了每一个个体的独特性...... 这些开源社区就像是一场场风格迥异的社会实验。 其中，Debian 社区是一个典型代表。作为 Linux 最早的发行版本之一，诞生于1993年的 Debian 可以算是开源社区中的“活化石”。这也令 Debian 在机制、行事和文化等方面都体现出了一定的“古典”特质。 最近，Debian 社区正在酝酿一件大事 —— 改革自己的决策机制。一直以来，Debian 的决策机制都饱受诟病，不少优秀的开发者因此离开，这样的变革或许不可避免。 01 离开 “长久以来，Debian 都难以作出改变。” 2014年的时候，Joey Hess...阅读全文
验。 目前，将Kubernetes作为IAAS平台的底层服务管理平台是一个趋势，例如OpenStack的Kolla项目，VMware的Tanzu，以及基于Kubernetes的虚拟化方案KubeVirt。Cloudpods顺应此趋势，早在2019年下半年开始基于Kubernetes构建Cloudpods的服务组件基础设施。理论上，Cloudpods站在了巨人的肩膀上。有了Kubernetes的加持，我们基于Operator管理CRD(Custom Resource Definition)机制做到了更优雅的服务自动化部署，符合IaC（Infrastructure as code）实践的服务升级和回滚，服务的自动高可用部署等等。但在实际效果上，我们基于Kubernetes，获得了一些便利...阅读全文
debian官方提供了脚本ftpsync来搭建源镜像，而 apt-mirror 是一个更简单便捷的源镜像搭建工具。 安装 apt-mirror sudo apt-get install apt-mirror 配置文件/etc/apt/mirror.list只要修改很少的地方，大部分使用默认值即可。 这里使用中科大镜像 ftp.cn.debian.org 作为上游镜像，只镜像 debian jessie amd64 架构，不镜像源代码包。 ############# config ################## # # set base_path /var/spool/apt-mirror # # set mirror_path $base_path/mirror # set...阅读全文
kernel 5.2.5 和 Xorg 7.7(核心 1.20.4) 来支持当前的计算机硬件。内核补丁：Cloop，aufs32 位和 64 位内核都支持新旧计算机，64 位版本还支持具有超过 4GB RAM 和 chroot 到 64 位安装系统崩溃修复任务的系统。如果检测到具有 64 位功能的 CPU，引导加载程序将自动启动 64 位内核 (如果不是手动指定的话)。对于只能从 CD 启动的计算机，而不是从 DVD 或 USB 闪存笔启动的计算机，在“KNOPPIX”文件夹中放置了一个可启动的小型 CD 映像，该文件夹可以与完整的 USB 或 DVD 版本一起使用，以便在旧计算机上启动。QEMU-KVM 3.1 作为可编写脚本的虚拟化解决方案隐私增强的 tor 浏览器，可升级并可通过 knoppix...阅读全文
议》时就条款与附件达成一致，甚至导致主合同交易因此被中止。 GDPR及其相关解释至今未给出完整的穷尽式列举，即便是第29工作组对“个人数据”的概念进行了解释，但也并未采取列举式的定义[3]。 1.2 CCPA对个人信息的定义——抽象定义与实例列举两种方式结合 相比GDPR而言，《加州消费者隐私法案》（CCPA）第1798.145节对消费者“个人信息”进行了更为具体的规定，用“定义+不完全列举”的方式明确了哪些个人信息受CCPA的管辖。在GDPR的基础上，CCPA所列举的”个人信息”的范围更加广泛: (1) 与GDPR关注“特定个人”的信息不同，CCPA将“特定家庭的信息”也纳入管辖范围； (2) 与GDPR强调数据对“特定个人”的指向性不同，按照CCPA规定：如果一些信息可以直接指向”设备...阅读全文
服务化项目服务不可用几十分钟，造成订单数减少几十万笔，损失百万资金。 原因分析 当时是没有定位到具体的原因的，但是下面的原因也是一部分可能引起宕机的情况。 某服务化项目的业务增速非常快，在高峰期，数据库QPS突破35000，系统处于高负荷状态。 在高峰期如果同时执行几个全表扫描的SQL，会造成数据库压力急剧上升，应用超时增多，前端应用超时，用户重试，流量飙升，形成了雪崩效应。 主要原因在与一些老项目的SQL查询性能较差，并且使用的主库，对数据库影响较大。数据库QPS太高，但是缓存方案因为人手原因一直没有落地，慢SQL的问题处理优先级应该提升。 改进方案 针对每个应用建一个数据库账号，严格按照规范使用 缓存优化方案即时落地，慢SQL问题优先处理，集中处理目前已经发现的慢SQL（查询时间超过1S...阅读全文
systemd的各种不方便，比如命令太长，不熟悉daemon报错等。systemd几乎没有所需的外部依赖，它们主要由glibc(或兼容的libc)，setcap和libmount组成。 由于systemd项目合并了udev, logind等基础设施，以及Gnome/KDE积极与systemd集成，这给其它开源内核的桌面用户(以及Debian这样的多内核发行版)造成了困扰。 想想systemd最开始出现时，还是以一个纯粹的init软件的身份，之后短短的时间内大肆攻城略地，合并了很多进程，与Gnome暧昧不清，还设置了API锁定。虽然我可以理解很多linux用户为什么不喜欢复杂的桌面环境，但还是有很多人希望选择一个完整的桌面环境。 init系统中，虽然你可以轻松地选择桌面环境和窗口管理器，但在大多数发行版中...阅读全文
前言 Kubernetes 中大量用到了证书, 比如 ca证书、以及 kubelet、apiserver、proxy、etcd等组件，还有 kubeconfig 文件。 如果证书过期，轻则无法登录 Kubernetes 集群，重则整个集群异常。 为了解决证书过期的问题，一般有以下几种方式： 大幅延长证书有效期，短则 10年，长则 100 年； 证书快过期是自动轮换，如 Rancher 的 K3s，RKE2 就采用这种方式； 增加证书过期的监控，便于提早发现证书过期问题并人工介入 本次主要介绍关于 Kubernetes 集群证书过期的监控，这里提供 3 种监控方案： 使用 Blackbox Exporter 通过 Probe 监控 Kubernetes apiserver 证书过期时间； 使...阅读全文
MySQL 8.0 系列的首个正式版 8.0.11 已发布，官方表示 MySQL 8 要比 MySQL 5.7 快 2 倍，还带来了大量的改进和更快的性能！ 需要注意的是从 MySQL 5.7 升级到 MySQL 8.0 仅支持通过使用 in-place 方式进行升级，并且不支持从 MySQL 8.0 降级到 MySQL 5.7（或从某个 MySQL 8.0 版本降级到任意一个更早的 MySQL 8.0 版本）。作为替代方案，在升级之前请对数据进行全量备份。 本文简要介绍 MySQL 8 中值得关注的新特性和改进。 1. 性能：MySQL 8.0 的速度要比 MySQL 5.7 快 2 倍。MySQL 8.0 在这些方面带来了更好的性能：读/写工作负载、IO 密集型工作负载、以及高竞争...阅读全文
Go 1.10 还没发布，下面将简单介绍正在进行中的 Go 1.10 发布说明草案。Go 1.9 已于 2017 年 8 月发布，最新的 Go 1.10 预计将于 Go 1.9 发布六个月后 —— 2018 年 2 月发布。 Go 1.10 大部分的变更仍然集中在工具链、运行时和库的实现上。一如既往地，此版本依然会 保持与 Go 1.x 的兼容性 ，官方表示几乎所有的 Go 应用程序都能像以前一样继续编译和运行。 语言特性方面的改变 语言特性方面没有实质性的变化。 极端情况下，由无类型常量引起的变化已经弄清楚。因此，编译器也已进行升级，它可允许这样的索引表达式 x[1.0 << s] 通过编译，其中 s 是一个无类型常量。go/types 包也已完善。 方法表达式的语法 (grammar...阅读全文
( ) 和 [ ] 可供选择。然而缺少修饰的方括号会在数组和 slice 的类型声明中造成歧义，在解析索引表达式时也会引起小程度的歧义。因此在设计之初他们决定使用小括号，因为小括号似乎更符合 Go 语言的风格，而且看起来问题最少。 为了使小括号正常工作，并且为了向后兼容，他们表示不得不在类型参数列表中引入type关键字。最后，他们在参数列表、复合字面量和嵌入类型中发现了额外的解析歧义，而这些歧义需要嵌套更多的小括号来解决。不过即便如此，他们还是决定继续使用小括号，因为当时还有更重要的设计问题需要解决。 现在他们决定重新考虑这个最初的决定。如果仅使用方括号声明类型参数，那么声明数组的方式如下所示： type A [N]E 不过这就无法与泛型的声明进行区分： type A[N] E 但如果能接受额外的...阅读全文
己的自定义执行代码，而是使用统一的执行层，统一之后方便审计，并将应用程序开发人员的关注点与运营和安全团队的关注点分离。Kubernetes 零信任我们必须从第一原则重新思考身份，以任意表达性策略的形式来将信任具象化，并将新的执行机制渗透到基础设施的各个层面。面对这些的要求，我们不可避免地经历短暂的恐慌。前面是不是提到需要在 2024 财年之前实现？好消息是，至少对于 Kubernetes 用户来说，采用零信任的某些方面要容易得多。尽管有缺陷和复杂性，Kubernetes 是一个具有明确范围、定义良好的安全模型和明确的扩展机制的平台。这使其成为零信任实施的成功领域。在 Kubernetes 中解决零信任网络的最直接方法之一是使用服务网格。服务网格利用了 Kubernetes 强大的...阅读全文
Terraform Terraform 的安装非常简单，直接把官方提供的二进制可执行文件保存到本地就可以了。比如笔者习惯性的把它保存到 /usr/local/bin/ 目录下，当然这个目录会被添加到 PATH 环境变量中。完成后检查一下版本号： 通过 -h 选项我们可以看到 terraform 支持的所有命令： 在 Azure 上创建一个 Resource Group 要让 Terraform 访问 Azure 订阅中的资源，需要先创建 Azure service principal，Azure service principa 允许你的 Terraform 脚本在 Azure 订阅中配置资源。请参考这里创建 Azure service principal。 配置 Terraform 环境变量 若要配置...阅读全文
querier会根据label自动去重，确保返回给grafana的数据不会重复，这个特性很关键。 有了thanos querier组件，我们可以很简单的解决单点故障问题： 部署N个prometheus同时抓取数据，然后thanos querier代理它们，这样prometheus挂了一台也不影响服务，数据在其他prometheus上还有。 方案1：thanos sidecar + thanos querier 实际上，querier不能直接反向代理prometheus，而是需要在prometheus的POD内部署一个thanos sidecar组件，querier反向代理至sidecar，再由sidecar查询POD内的prometheus。 querier和sidecar之间走GRPC协议，POD内的...阅读全文
合用来做大数据分析的底层存储服务，并不适合用来做网盘等应用，因为修改不方便，延迟大，网络开销大，成本太高。 4. HDFS 的命令行使用 如果没有配置 hadoop 的环境变量，则在 hadoop 的安装目录下的bin目录中执行以下命令，如已配置 hadoop 环境变量，则可在任意目录下执行 help 格式: hdfs dfs -help 操作命令 作用: 查看某一个操作命令的参数信息 ls 格式：hdfs dfs -ls URI 作用：类似于Linux的ls命令，显示文件列表 lsr 格式 : hdfs dfs -lsr URI 作用 : 在整个目录下递归执行ls, 与UNIX中的ls-R类似 mkdir 格式 ： hdfs dfs -mkdir [-p]
Ruby 2.5 系列第一个稳定版本发布，新版包括了一系列新的特性和性能改进。主要变化包括：rescue/else/ensure 允许直接与 do/end 块使用，yield 增加 yield_self，Struct.new 能创建接受关键字参数的类，最高级常量查询不再可用，移除所有 trace 指令提升 5-10% 性能，SecureRandom 将更偏向使用操作系统提供的 SSL 库等。 此版本包括数个新特性和性能提升，例如： 新特性 允许在 do/end 中直接使用 rescue/else/ensure。[功能 #12906] 新增 yield_self 来使用当前上下文 yield 代码块。不同于 tap，此方法会返回代码块的运行结果。[功能 #6721] 支持测量分支代码覆盖和方...阅读全文
Java 架构师是什么？是一个既需要掌控整体又需要洞悉局部瓶颈并依据具体的业务场景给出解决方案的团队领导型人物。一个架构师得需要足够的想像力,能把各种目标需求进行不同维度的扩展，为目标客户提供更为全面的需求清单。 所谓架构师，思考的是全局的东西，是如何组织你的系统，以达到业务要求，性能要求，具备可扩展性（scalability），可拓展性（extendability），前后兼容性等。可能涉及到的东西包括了从硬件到软件的方方面面。 架构师在软件开发的整个过程中起着很重要的作用。 架构师的主要任务不是从事具体的软件程序的编写，而是从事更高层次的开发构架工作。他必须对开发技术非常了解，并且需要有良好的组织管理能力。可以这样说，一个架构师工作的好坏决定了整个软件开发项目的成败。 在成为Java架构...阅读全文
我们安装软件包后，都会做一些配置，如何把这些软件包，以及配置变动导出成一个 deb 软件包，以便下次迁移、重新安装？ 使用 dpkg-repack 这个命令即可。 注意，这个命令会在**当前目录**下，生产新的软件包，务必确保当前目录下有足够的磁盘空间，一般要 2GB - 3GB， `for a in $(sudo dpkg --get-selections|cut -f1); do dpkg-repack $a|awk '{if (system("sleep .5 && exit 2") != 2) exit; print}';done` ...阅读全文
价格低廉、基于手机的拉曼光谱仪系统可在几分钟内识别未知的生物分子。 由德克萨斯农工大学 Peter Rentzepis 博士申请专利的新型手持式拉曼光谱仪系统可利用手机摄像头和激光技术的结合，对有害化学物质和材料进行非侵入式鉴定。 这种设备比传统光谱仪便宜得多，速度也快得多，可用于偏远地区进行快速现场分析。 https://www.cnbeta.com.tw/articles/science/1439072.htm...阅读全文
Raspbian 20171129 已发布，Raspbian 是基于 Debian GNU/Linux 的免费操作系统，它面向 Raspberry Pi 硬件（armhf 处理器架构）而做了优化。Raspbian 带有 35000 多个软件包或预编译软件，它们按优美的格式打包从而便于在 Raspberry Pi 上安装。 更新内容： Added battery monitor plugin for taskbar – works on x86 images or first-generation Pi-Top Added cutdown mode to PCManFM file manager to reduce complexity Added ability to rename...阅读全文
【2018-03-07 更新：中午一点半收到短信提醒，网站已成功备案。这效率杠杠的！】 朋友们，大家好： 为了向大家提供更好的服务，我们决定把服务器迁移回国内。为符合国内的政策要求，我们计划给网站备案。 为确保备案顺利完成，本站在本月内将会关闭 8-10 个工作日，待备案完成后重新开放。 关站开始时间我们尚不确定，关站前将不再通知。给你的访问带来不便，敬请谅解。 谢谢！ Debian中国...阅读全文
Cockpit 195.2 发布了。Cockpit 是一个交互式服务器管理界面，它易于使用且很轻便，通过浏览器中的会话直接与操作系统进行交互。这意味着你可以通过鼠标，在Web界面上管理自己的服务器，比如启动容器，检查存储，配置网络或者查看日志等。 Cockpit 的 Web 同时也提供了一个内嵌的终端，可以直接操作服务器， 此版本更新内容： firewall：仅在添加自定义服务时重新加载防火墙 (rhbz#1725094)networking：清除主/从字段后激活连接 (rhbz#1729378)...阅读全文
DPDK 全称为 Data Plane Development Kit ，是近年来在高速网络通信行业中炙手可热的一种网络报文处理加速框架。DPDK 从十年前诞生直至发展到今天已经可以支持业界主流的高端网卡以及各类加速硬件设备，同时也支持主流的各个CPU 体系结构（可以运行于 X86, Arm, Power 等平台）。同时也可以运行于 Linux/FreeBsd/Windows 等主流操作系统之上。DPDK因为其优异的性能指标被广泛的应用于网关/负载均衡/SDN/虚拟交换的各个场景。 本文主要介绍 DPDK 中的 libgraph 设计思想以及实现，libgraph 的设计思想源自于开源项目 Vector Packet Processor(VPP)。VPP 中的向量包处理优化方案是...阅读全文
采用64位处理器的树莓派3B，虽然具有64位硬件，但是系统还没有跟上节奏。官方尚未正式发布64位Raspbian，近期有团队移植了Debian 9 arm64到树莓派3B，将“装死”一年多的树莓派3B的性能完全释放出来，测试跑下来发现CPU性能最高比32位系统高30倍！ 本文将介绍如何进行对比跑分测试。 硬件测试环境： RaspberryPi 3 Model B 16GB Class 10 TF卡 5v2.5A电源 以太网网线及能连外网路由设备 软件测试环境： GEEEKPI-64bit-beta（内核移植版，操作系统是基于Debian 9的arm64位源码，Debian 9目前还没发布，目前属于beta版，RaspberryPi 官方也没有发布64bit操作系统的计划，但是我们迫切需要...阅读全文
