Linux 的 I/O 调度器是一个以块式 I/O 访问存储卷的进程，有时也叫磁盘调度器。Linux I/O 调度器的工作机制是控制块设备的请求队列：确定队列中哪些 I/O 的优先级更高以及何时下发 I/O 到块设备，以此来减少磁盘寻道时间，从而提高系统的吞吐量。 目前 Linux 上有如下几种 I/O 调度算法： noop - 通常用于内存存储的设备。 cfq - 完全公平调度器。进程平均使用IO带宽。 Deadline - 针对延迟的调度器，每一个 I/O，都有一个最晚执行时间。 Anticipatory - 启发式调度，类似 Deadline 算法，但是引入预测机制提高性能。 查看设备当前的 I/O 调度器： # cat /sys/block//queue/scheduler 假设磁...阅读全文
在使用 git 时，如果不是使用ssh 和 key 验证的方式，则每次提交都会让输入用户名和密码，会显得比较麻烦，在服务器上配置时也无法做到自动同步更新代码。那么如何解决这个问题呢？我们这里介绍除 ssh + key 以外的免密码登录方式。在全局中存储用户的账号密码 以 Windows 环境为例，在 %HOME% 目录中，一般为C:\Users\username（也可以是你自己创建的系统用户名目录）目录下，创建.git-credentials 文件。 文件内容为一行，样例如下： https://username:password@git.example.com 注：username对应的 git 服务器的用户名，password 为密码。然后再进入 git bash 中执行， git...阅读全文
(SARAO)，加州大学圣克鲁兹分校开放源码软件研究中心(CROSS)等。 Linux基金会执行董事Jim Zemlin说："Ceph在帮助企业有效管理高增长和扩展数据存储需求方面有非常丰富的经验，在Linux基金会下，Ceph基金会将能够利用更多资源来帮助完善Ceph生态系统建设。" Ceph联合创始人&Red Hat Ceph首席架构师 Sage Weil说："Ceph基金会的成立证明了一个多元化的开源社区的力量所在，各方共同联合起来致力于解决数据存储和数据服务的爆炸性增长。" Ceph被世界各地的云提供商和企业使用，包括金融机构（Bloomberg，Fidelity），云服务提供商（Rackspace，Linode），学术和政府机构（Massachusetts Open Cloud），电信基础设...阅读全文
带类型； 您的IP (Internet Protocol)地址，该地址有时可以显示您所在地理位置； 您在本网站内浏览过的页面、广告和链接； 您访问本网站时发出的访问请求及其日期、时间和引荐网址（如有）； 通过Cookie标注您的浏览器的唯一性和在本网站的账户信息（包括您访问本网站的各项活动，浏览习惯等）；您可以通过修改浏览器设置的方式拒绝cookie； 我们可能会使用浏览器网络存储（包括 HTML 5）和应用程序数据缓存等机制，在您的设备上收集和存储您所浏览过的网页信息； 如果您需要查询、更正您的个人信息或注销账号，请通过 support@debian.cn 与我们联系并提供您的账号和其他验证信息，我们在核实后会回复您的请求。 2. 信息的使用 我们仅在必要的情况下...阅读全文
今天我们公布了Kubernetes 1.7，这一里程碑版本引入了更为强大的安全性、存储以及扩展性因素，旨在满足Kubernetes在广泛企业环境下所面临的实际需求。 这次发布的版本中安全方面的改进包括加密的Serect，Pod到Pod通讯的网络策略，限制kubelet访问的节点授权器（node authorizer），和客户端/服务端 TLS 证书轮换。 对于在Kubernetes上伸缩数据库的用户，这次版本有一个重要特性向StatefulSet添加了自动化的更新，并增强了对DaemonSet的更新。同时我们宣布对本地存储和用于更快速伸缩StatefulSet的加速模式（burst mode）的alpha支持。 同时，对于高级用户，这次版本中的API聚合允许用户提供的API服务器和...阅读全文
NAND，4D NAND闪存有很强的商业营销味道。 SK Hynix的4D NAND闪存首先会量产TLC类型的，核心容量分别是512Gbt、1Tb，都是96层堆栈，IO接口速度1.2Gbps，不过两者的BGA封装面积是不一样的，1Tb版显然更大一些。 至于QLC类型的，这个未来会是SK Hynix量产的重点，核心容量1Tb，但量产时间会在明年下半年，还需要一些时间。韩联社报道称，SK Hynix公司4日宣布正式宣布96层堆栈的4D NAND闪存，TLC类型，核心容量512Gb，与现有的72层堆栈3D NAND闪存相比，4D NAND闪存的核心面积减少了30%，单片晶圆的生产输出增加了50%，而且性能也更强——读取速度提升30%，写入速度提升25%。 根据官方所说，4D NAND闪存今年内会量产，而...阅读全文
] Service discovery：为 kubernetes 添加新的节点地址类型 #5902[ENHANCEMENT] UI：如果查询返回了一些警告，则显示警告 #5964[ENHANCEMENT] Remote write：减少系列缓存的内存使用量 #5849[ENHANCEMENT] Remote read：使用远程读取流传输以减少内存使用量 #5703[ENHANCEMENT] Metrics：添加了将远程最大/最小/所需分片写入队列管理器的指标 #5787[ENHANCEMENT] Promtool：在标签查询期间显示警告 #5924[ENHANCEMENT] Promtool：改进了解析错误规则时的错误消息 #5965[ENHANCEMENT] Promtool：更多提示规则 #5515...阅读全文
在Reddit上有人表示把42TB的普通存储（没有组RAID或者其他）全部采用Btrfs技术，通过把ext4文件系统迁移到Btrfs至少节省了5TB的存储空间。尽管已经开发了相当长时间，但是鲜有发行版把Btrfs当作默认的文件系统，目前SUSE企业版把Btrfs作为系统默认的文件系统。Linux.com日前采访了Btrfs的主要贡献者Chris Mason，通过他的讲述透露了社交巨头Facebook使用Linux内核与Btrfs文件系统的大量细节。 Chris Mason是开源文件系统项目Btrfs的主要贡献者，Mason最初在Oracle从事Btrfs的开发，后来他加入社交巨人Facebook的Linux内核技术小组继续从事Btrfs文件系统的研发工作。当Facebook需要升级新内核的...阅读全文
-background #000000 -rotate 45 rotate.png 还可以指定为透明背景色： $convert image.png -background rgba(0,0,0,0) -rotate 45 rotate.png 6，合并 合并指的是将一张图片覆盖到一个背景图片上： $convert image.png -compose over overlay.png -composite newimage.png -compose指定覆盖操作的类型，其中over为安全覆盖，另外还有xor、in、out、atop等等 覆盖的位置可以通过-gravity指定： $convert image.png -gravity southeast -compose over overlay.png...阅读全文
看着SSD气势汹汹，机械硬盘丝毫不敢懈怠，唯有不断推陈出新大容量产品，同时把容价比做到更低。据说淘宝上出现了一批全新/充新HGST 8T企业盘，由不景气的乐视云内部流出，居然只要千元出头。 就目前而言，西数、东芝均发布了14TB，前者使用SMR（叠瓦式磁记录），后者使用传统的PMR（垂直磁记录），9碟充氦。 而且，巨头均规划了16TB硬盘，预计明年推向市场。 近日，知名存储服务商Backblaze刊文报道，希捷CTO（首席技术官）Mark Re介绍称，HAMR（热辅助磁记录）存储技术硬盘已经越来越接近商用了。 今年10月的容量密度还是2Tbpsi（每平方英寸容量），Mark Re此次透露，目前已经达到5Tbpsi，是当下希捷最大的12TB硬盘（PMR）1.3Tbpsi的3.8倍，而HAMR...阅读全文
，意味着树莓派 4 能够支持高动态范围（HDR）的 4K p60 HEVC 视频解码、并同时带动两台 4K 显示器。同时，这是消费者首次能够选择 1GB / 2GB / 4GB 运存，且起售价维持 35 美元（240 RMB）不变。 本次升级后，你可以将树莓派 4 当做一台完整的台式电脑来使用，因为官方提供了一整套的桌面配件。套件中包括了主板、机箱、USB 键鼠、电源、两根 HDMI 线、32GB Micro SD 存储卡、以及初学者指南，可帮助您充分发挥设备的潜力，价格为 105 英镑（919 RMB）。 显然，随着树莓派 4 带来的最新改进，树莓派基金会有望帮助人们解决更多的问题。下面是树莓派 4 的详细规格： 处理器：博通 BCM2711，四核 Cortex-A72、64 位 SoC、主...阅读全文
注：我当然是开玩笑的。如果你真的需要被评估看起来有多忙，那么你们公司存在很严重的文化问题。为了忙碌而忙碌的文化是一种有毒的文化，几乎可以肯定这种文化对公司和员工都没有帮助。 也就是说，让我们找点乐子，用一些老式的无意义数据和代码片段组成的面板填充我们的屏幕（好吧，这些数据可能有一定的意义，但是没有上下文）。虽然有很多花哨的 GUI，但是我们为什么不直接使用标准的 linux 终端呢？为了更老派的外观，可以考虑使用 Cool Retro Term：一个酷酷的复古终端。下面我会用 Cool Retro Term，因为它看起来确实 100% 酷。 Genact 我们要看的第一个工具是 Genact。Genact 只是简单地回放你选择的一个序列，在你出去喝茶休息的时候慢慢地、无限期地“编译”你的代码...阅读全文
前言 Git是目前非常流行的协同开发工具，很多开源网站都使用Git作为代码管理仓库(例如 开源中国，GitHub)，不管是开发还是产品、设计师，Git都很适合，而且很多IDE默认集成了Git，熟练的使用Git会起到事半功倍的效果，所以今天我为大家分享一下Git的介绍与使用。 1.Git是什么？ Git是目前世界上最先进的分布式版本控制系统（没有之一）。 1.1什么是版本控制？ 版本控制是一种记录一个或若干文件内容变化，以便将来查阅特定版本修订情况的系统。如果你是位网页设计师，可能会需要保存某一幅图片或页面布局文件的所有修订版本。 有了它你就可以将某个文件回溯到之前的状态，甚至将整个项目都回退到过去某个时间点的状态，你也可以比较文件的变化细节，查出最后是谁修改了哪个地方，从而找出导致怪异问题...阅读全文
Debian 目前正在进行一项桌面壁纸调查投票，为即将到来的 Debian GNU/Linux 10 "Buster" 版本选择默认壁纸。该调查在本周公布，1月6日结束。该调查针对11个背景图片和艺术作品进行投票，最终确定 Debian 下一个版本的默认壁纸。 上面的图片为一部分艺术品的提案。考虑到 Buster 代号跟玩具总动员中的一只狗的名字而来，所以特意选择了一只狗的背景图片。 匿名调查表格可以通过 survey.debian.net 获得，每个艺术品的更多细节可以在 Debian 百科上找到。 Debian 10.0 预计将在明年发布，并通过 Debian 9 "Stretch" 系列进行多次升级。...阅读全文
。 明确处理错误 健壮的程序其实是由处理故障案例的片段组成的，并且需要在故障出现之前处理好。冗余的if err != nil { return err }比出了故障再一个个去处理更有价值。panic 和 recover 也一样。 尽早 return，不要深陷 每次缩进时都会在程序员的堆栈中添加另一个先决条件，这会占用他们短期内存中的 7±2 个片段。避免需要深层缩进的控制流。与其深入嵌套，不如使用守卫子句将成功路径保持在左侧。 并发权留给调用者 让调用者选择是否要异步运行你的库或函数，不要强制他们使用异步。 在启动 goroutine 之前，要知道它什么时候会停止 goroutines 拥有资源、锁、变量与内存等，释放这些资源的可靠方法是停止 goroutine。 避免包级别的状态 要完成明确和...阅读全文
（"hot spot"热点竞争问题）工作负载。 2. NoSQL：MySQL 从 5.7 版本开始提供 NoSQL 存储功能，目前在 8.0 版本中这部分功能也得到了更大的改进。该项功能消除了对独立的 NoSQL 文档数据库的需求，而 MySQL 文档存储也为 schema-less 模式的 JSON 文档提供了多文档事务支持和完整的 ACID 合规性。 3. 窗口函数(Window Functions)：从 MySQL 8.0 开始，新增了一个叫窗口函数的概念，它可以用来实现若干新的查询方式。窗口函数与 SUM()、COUNT() 这种集合函数类似，但它不会将多行查询结果合并为一行，而是将结果放回多行当中。即窗口函数不需要 GROUP BY。 4. 隐藏索引：在 MySQL 8.0 中，索引可以被...阅读全文
source /etc/profile Hadoop文件配置 配置文件都在etc/hadoop/文件夹下 1. hadoop-env.sh # jdk环境变量 （因为要远程调用 ${java_home}找不到变量） export JAVA_HOME=/usr/lib/jvm/jdk 2. workers # 添加所有slave机器的hostname slave1 slave2 slave3 3. core-site.xml