库提供商，将那台Redis最近一周的命令全部调用出来，最后发现，在那个时间点运行了一条keys *...*命令。公司的一个工程师执行keys模糊的匹配命令是为了清理没用的键，但是没有考虑到keys *进行模糊匹配引发Redis锁，造成Redis锁住，CPU飙升，引起了所有调用链路的超时并且卡住，等Redis锁的那几秒结束，所有的请求流量全部请求到RDS数据库中，使数据库产生了雪崩，使数据库宕机。 改进方案 所有线上操作，全部要经过运维通过后方可执行，运维部门逐步快速收回各项权限 新增Redis实例，进行分离 如果有使用类似keys正则命令需求，使用scan命令代替 总结 该事件中出现的两次事故，完全是由于人为操作引起的，如果那位工程师，看过Redis的开发规范，会发现是建议禁用keys命令的...阅读全文
中共中央办公厅、国务院办公厅印发了《推进互联网协议第六版（IPv6）规模部署行动计划》，计划全面推进部署 IPv6，协同推进网络实名制。 通知称，用 5 到 10 年时间，建成全球最大规模的 IPv6 商业应用网络。具体计划包括： 1．到 2018 年末，IPv6 活跃用户数达到 2 亿，在互联网用户中的占比不低于 20%，并在以下领域全面支持 IPv6：国内用户量排名前 50 位的商业网站及应用，省部级以上政府和中央企业外网网站系统，中央和省级新闻及广播电视媒体网站系统，工业互联网等新兴领域的网络与应用；域名托管服务企业、顶级域运营机构、域名注册服务机构的域名服务器，超大型互联网数据中心（IDC），排名前 5 位的内容分发网络（CDN），排名前 10 位云服务平台的 50% 云产品；互联...阅读全文
LUA Script特性有严格的限制条件，事务和Script中操作的key必须位于同一个分片上，这就使得在开发时必须对相应场景下涉及的key进行额外的规划和规范要求。如果应用的场景中大量涉及事务和Script的使用，如何在保证这两个功能的正常运作前提下把数据平均分到多个数据分片中就会成为难点。 所以说，在主从复制和集群分片两个方案中做出选择时，应该从应用软件的功能特性、数据和访问量级、未来发展规划等方面综合考虑，只在确实有必要引入数据分片时再使用Redis Cluster。 下面是一些建议： 需要在Redis中存储的数据有多大？未来2年内可能发展为多大？这些数据是否都需要长期保存？是否可以使用LRU算法进行非热点数据的淘汰？综合考虑前面几个因素，评估出Redis需要使用的物理内存。 用于部署...阅读全文
位置。emergency scratch codes 是单一的使用代码，应急时使用。即使你的手机不可用，它总是允许你访问。 要将服务器注册到Authenticator App中，只需打开应用程序并点击右下角的红色加号即可。然后选择扫描条码选项，扫描打印到终端的二维码。你的服务器和应用程序现在连接。 回到服务器上，我们现在需要编辑用于 SSH 的 PAM (可插入身份验证模块)，以便它使用我们刚刚安装的身份验证器安装包。PAM 是独立系统，负责 Linux 服务器上的大多数身份验证。 需要修改的 SSH PAM 文件位于 /etc/pam.d/sshd ，用以下命令编辑: vim /etc/pam.d/sshd 在文件顶部添加以下行: auth required...阅读全文
Zoom 视频通信公司日前公布了 Zoom 5.0 的详细信息，这是对其视频会议客户端的一次重大更新，以解决最近几周发现的许多安全和隐私问题。在即将发布的版本中，用户可以从增加的 AES 256 位 GCM 加密功能中受益，同时还可以选择通话路由。 Zoom 的首席运营官 Oded Gal 表示，Zoom 从整体上考虑用户的隐私和平台的安全性。从 Zoom 网络到 Zoom 功能集到用户体验，所有的一切都要经过严格的审查。在后端，AES 256 位 GCM 加密技术将提升用户数据在传输过程中的安全标准。在前端，Zoom 最兴奋的是会议菜单栏中的安全图标。这将会把所有安全功能，无论是现有的还是新的，都放在会议主持人的前面和中心位置，这将确保用户可以在会议中即时访问重要的安全控制功能...阅读全文
高可用性。使Prometheus高可用的一种方式是运行多个实例去scraping相同的作业。这些实例在抓取指标时会因微小的时间间隔差异而在数据中产生细微差异。此外，如果其中一个实例宕机了几个小时，那么当查询转发到该实例时，将会出现数据空白。如果我们使用grafana这样的工具将指标展示为图形，我们可能会得到不同的样本值或有数据缺失的图形。可以将Cortex配置为从多个HA Prometheus实例读取数据。它从一个主实例main接受指标，并从其他实例放弃该度量。一旦这个副本掉线，Cortex会无缝切换到另一副本并将其标记为主副本main。为此，Cortex着眼于两个标签，一个共同的标签与一个集群（或一组Prometheus）相关联，另一个识别副本。全局指标视图可以将Prometheus实例配...阅读全文
争议的地方是违背了Unix哲学，太过于复杂。而Devuan提供了多种 init 系统供用户选择，其中包括 sysvinit、sinit、openrc、runit、s6 和 shepherd。 稳定版 Devuan GNU/Linux 到达1.0里程碑历时两年半时间，提供了没有 systemd的稳定、可靠、安全的操作系统。该系统基于Debian GNU/Linux 8 "Jessie"发行版本，目前仅提供安装镜像，没有图形界面、QUMU和Vagrant虚拟镜像的最小化在线ISO，以及支持/不支持UEFI的Xfce Live镜像，以及面向ARM设备的镜像。 除了支持32位和64位之外，嵌入式镜像还允许用户在树莓派、树莓派2、树莓派3、Acer Chromebook、Veyron/Rockchip...阅读全文
Debian项目今天宣布推出了Debian GNU/Linux 9.3 “Stretch”和Debian GNU/Linux 8.10 “Jessie”版本系列。 尽管Debian GNU/Linux 9.3是对操作系统最新稳定版本Stretch系列的第三次维护更新，Debian GNU/Linux 8.10代表了Jessie分支的第十个版本，两者都包含通过官方存储库发布的最新安全更新。 今天发布的消息称：“这一版本主要是对安全问题进行修复，并对严重问题进行了一些调整。安全建议已经单独发布。请注意，发行版并不构成Debian 9的新版本，只是更新了一些包含的软件包。” 新的ISO映像即将推出 Debian GNU/Linux 9.3 “Stretch”和Debian GNU/Linux...阅读全文
+\ ) 以将一个编辑器分成两部分，而无需第二个编辑器组。这允许你在同一个文件上并排使用两个编辑器。你还可以通过"切换布局"按钮... 4 1 GeoGebra 6.0.668.0 发布，绘图神器 Geogebra 是动态数学软件，它将几何、代数、电子表格、绘图、统计和微积分集成在一个易于使用的软件包中。 GeoGebra 6.0.668.0 版本现已发布，具体更新内容如下： Fixed：丢失的 Labelling 菜单 Fixed：绘制抛物线等的问题 Fixed：在 iOS 上，输入框滚动小程序的问题 Fixed：IntersectPath(P, a) 与 Zip() Fixed：列表中... 0 6...阅读全文
示当前的时间 ctrl + z 挂起当前会话 窗口操作 c 创建新窗口 & 关闭当前窗口 [0-9] 数字键切换到指定窗口 p 切换至上一窗口 n 切换至下一窗口 l 前后窗口间互相切换 w 通过窗口列表切换窗口 , 重命名当前窗口，便于识别 . 修改当前窗口编号，相当于重新排序 f 在所有窗口中查找关键词，便于窗口多了切换 面板操作 " 将当前面板上下分屏（我自己改成了 |） % 将当前面板左右分屏（我自己改成了 -） x 关闭当前分屏 ! 将当前面板置于新窗口,即新建一个窗口,其中仅包含当前面板 ctrl+方向键 以1个单元格为单位移动边缘以调整当前面板大小 alt+方向键 以5个单元格为单位移动边缘以调整当前面板大小 q 显示面板编号 o 选择当前窗口中下一个面板 方向键 移动光标选择...阅读全文
关于添加TLS 1.2的博文中都没有提到PCI。它表示，它想要删除“弃用旧的安全协议”的障碍，并致力于“一流的加密”。 但是，如果更好的安全性是真正的目标，为什么微软忽略增加其他现代功能？为了公平起见，Windows Server 2008的TLS支持不是过于差劲。由于ECDHE支持，它至少具有PFS（完全正向保密）密码。 有时候，强行优化一个老系统可能会带来更多安全和生态上的落差。因为它使企业和用户有借口坚持早就该被替换或升级的系统。 这也是为什么去年Chrome把整个Diffie-Hellman密码类都移除掉的部分原因。尽管它可以只保留支持更强的2048位参数，直接取消全部更为简单安全。 Debian放出的仅支持TLS1.2的消息可能不是最终决定，但这种胆识确实值得赞许。与此同时，在...阅读全文
嵌入式设备与JavaScript看似是来自两个不同世界的两个物种，八竿子都打不着。但是随着JavaScript 开疆扩土,从浏览器逆袭登陆到服务端之后又与物联网有了交集。 物联网的未来需要一门解释性语言 传统的嵌入式开发相对于WEB开发来说门槛高，碎片化严重，平台复杂。C/C++性能高，对设备资源要求低，但是对开发者的要求高，开发效率低。 物联网与互联网、移动互联网的基因是相同的，大量的应用才能铸就生态的繁荣。而使用C/C++来开发应用是及其低效和昂贵的，纵观互联网、移动互联网，应用开发是解释性语言的天下。互联网的PHP、JavaScript，移动互联网的Java，JavaScript，而物联网还是使用C/C++。因此，物联网的未来需要一门解释性语言。 JavaScript是最好的选择 相...阅读全文
存在本地的日志，大概就是类似于这个样子：上图显示，共有八条日志数据，其中已经提交了7条，提交的日志都将通过状态机持久化到本地磁盘当中，防止宕机。日志复制的保证机制如果两个节点不同的日志文件当中存储着相同的索引和任期号，那么他们所存储的命令是相同的。（原因：leader最多在一个任期里的一个日志索引位置创建一条日志条目，日志条目所在的日志位置从来不会改变）。如果不同日志中两个条目有着相同的索引和任期号，那么他们之前的所有条目都是一样的（原因：每次RPC发送附加日志时，leader会把这条日志前面的日志下标和任期号一起发送给follower，如果follower发现和自己的日志不匹配，那么就拒绝接受这条日志，这个称之为一致性检查）日志的不正常情况一般情况下，Leader和Followers的日志...阅读全文
官方文档的说明并不详细: https://jasper-zhang1.gitbooks.io/influxdb/content/Query_language/functions.html 实际百分位取第几位的值参考如下 PERCENTILE(field_key, N) 选取某个字段中大于N%的这个字段值。 如果一共有4条记录，N为10，则10%*4=0.4，四舍五入为0，则查询结果为空。N为20，则 20% * 4 = 0.8，四舍五入为1，选取的是4个数中最小的数。如果N为40，40% * 4 = 1.6，四舍五入为2，则选取的是4个数中第二小的数。 由此可以看出N=100时，就跟MAX(field_key)是一样的，而当N=50时，与MEDIAN...阅读全文
存储世界最近发生了很大变化。十年前，Fibre Channel SAN 文件管理器是企业存储的标准。而在目前的环境中，受到基础架构即服务云的影响，数据存储需要更加灵活。 GlusterFS 和 Ceph 是两个灵活的存储系统，在云环境中表现非常出色。 在尝试了解 GlusterFS 与 Ceph 之间的相似之处和不同之处之前，让我们来讨论在云环境中对灵活存储的一些要求。 纵向扩展和横向扩展。在云环境中，必须可以很容易地向服务器添加更多存储空间以及扩展可用存储池。Ceph 和 GlusterFS 都可以通过轻松将新存储设备集成到现有存储产品中来满足这一要求。 高可用性。GlusterFS 和 Ceph 的复制是同时将数据写入不同的存储节点。这样做的结果是，访问时间增加，数据可用性也提高。在...阅读全文
Parrot 是一个基于 Debian 的 GNU/Linux 发行版，其设计上主要考虑安全性和隐私性。 Parrot 通常被用于渗透测试、计算机取证、反向工程、攻击、云计算渗透测试、隐私/匿名、密码等场合。它包含你在网上开发自己的软件或保护隐私所需的一切。 Parrot 4.5 正式发布，其主要变化在引擎层面。Parrot 4.5 放弃了对 32 为应用程序和架构的支持，不在为 i386 体系的机器提供任何更新。现在，32 位的计算机已不再能够运行完整的 Pentest 活动，也不能为我们的安全保护系统提供硬件加速支持。 Parrot 4.5 下一步是支持 OVA 格式的虚拟设备，这些虚拟设备支持倒入 VirtualBox、VMWare 和其他著名的虚拟化环境的程序文件。这些虚拟环境仍然...阅读全文
ip2region 是准确率 99.9% 的 IP 地址定位库，0.0x 毫秒级查询，提供了 Java、PHP、C、Python、Node.js、Golang、C#、Rust、Lua 的查询绑定和 Binary、B 树、内存三种查询算法，妈妈再也不同担心我的 IP 地址定位！ ip2region 1.9 更新如下： 数据升级至 2019/05/02 的版本，国外的数据增加了大量城市级别的数据，ip2region.db 增长到 7MB。开源了 ip2region.db 的生成程序，目前提供了 java 语言的实现，在${ip2region_root}/maker 目录下，便于对 ip2region 的研究或者更改自定义生成配置等，后期会提供 C 语言的实现。 下载地址： Gitee...阅读全文
在AMD发布的7nm锐龙3000处理器及Navi架构RX 5700显卡中，PCIe 4.0都是重要的技术升级，而且是消费级首发支持，这对AMD来说很重要，因为以往引领新平台技术升级的主要是Intel，这次不一样了，AMD要夺回“技术发展的C位。 对于PCIe 4.0技术的好处，AMD日前开始强调该技术的三大优势： 速度更快，x16 双向带宽达到了 32GB/s，是 PCIe 3.0 的两倍。向下兼容，PCIe 4.0 能兼容 PCIe 3.0 设备。更多连接，PCIe 4.0 带宽高，1条顶2条，可以连接更多设备而不需要担心性能下降。 面对AMD在PCIe 4.0上的宣传，Intel这边也坐不住了，日前在一场活动中开始怼PCIe 4.0，Intel表示绝大多数用户从PCIe 4.0技术都不...阅读全文
自从 MongoDB 去年 10 月份宣布将开源协议从 GNU AGPLv3 切换到 Server Side Public License (SSPL)，风波就一直没停过。 前几天 AWS 推出 DocumentDB，以替换原有基于 MongoDB 源码的产品，被视为是对 MongoDB 的一大反击，而这两天英国卫报也完全弃用 MongoDB，最新消息是开源大佬红帽宣布从 Red Hat Enterprise Linux（RHEL）8 中删除 MongoDB。 在最新的 8.0 Beta Release Note 中，RHEL 明确表示因为 MongoDB 使用了 SSPL 协议，所以将不会在 8.0 系统中提供该数据库。 红帽系的 Fedora 也表示已经确定 SSPL 不是一个自由软件...阅读全文
。通过把来自不同列的数据关联起来，查询规划器（query planner）现在可以避免一些边缘情况，在那些边缘情况下，之前的Postgres版本会认为WHERE语句更强的选择性，并且会导致选择了错误计划从而拖慢执行时间。Postgres的这个改进在整个SQL世界中都是极具创新性的。 Postgres 10还对并行性进行了改进。开发者现在可以使用索引扫描（index scans）和仅索引扫描（index-only scans）、并行合并连接（merge joint）以及位图堆扫描。并行查询是通过不同的workers来实现的，因此在某些情况下，设置和分解的成本会超过并行化的好处。默认情况下，可以在大于8MB大小的表以及大于512KB的索引上启用并行表扫描（parallel table scan...阅读全文
整理本文，起源是看到知乎上的一个问题，为什么Linux的进程pid编号极限最大值( process pid max)是131070？ 问题中提到，通过提问者的测试（Ubuntu18.04操作系统下），Python脚本实现的分配进行pid脚本，渠道系统自动分配给进程的最大pid值是131070，这是一个并不特殊的值。（通常可以想到的上限会是与二进制数字相关，例如1024，65536等等）。 很高兴，看到还是有很多人在坚持知乎的本来精神，先问是不是，再问为什么。 Linux 内核的进程 PID 最大值并非 131070，而是 32768 （32 位系统）和 2 的 22 次方（64 位系统）。这是Linux手册中明确给出的说明： /proc/sys/kernel/pid_max (since...阅读全文
Facebook 的首位发布工程师，目前是 Facebook 发布工程的工程总监。 Facebook 的发布周期是“ quasi-continuous ” （准连续）——这只是一种委婉的说法，表明并非每次提交都会部署到生产环境，实际上它采用的是对几十到几百个提交进行批处理，每隔几个小时就进行推送。这种分层发布的方式使任何变更的回滚很容易。 这个新系统从 2016 年 4 月开始，经过一年的时间慢慢地完善。早先的模式是从主干分支的提交中选择特定的变更放到发布分支上。发布分支每天将这些变更推送到生产环境。这种“ cherry-picking ”的特点是，每天选择变更的数量为 500 ~ 1000。剩下的变更就推入到每周发布分支中。随着时间的推移，提交的数量和参与其中的工程师都有所增加，发布工程师的手工劳动变得...阅读全文
从我们认为 DevOps 只是一个流行语开始，它已经发展了很长的一段时间。现在，DevOps 已经成为了一个主要焦点，并在过去几年一直在塑造着软件世界。专家表示，DevOps 将成为主流，它的流行程度将在 2019 年达到顶峰。 根据 2018 年《DevOps 现状报告》，DevOps 精英级执行团队代码部署频率和发布速度更高，变更故障率更少，事故恢复时间更短，同时高效能团队的比例逐年增长，采用 DevOps 的团队越来越多。 而 Stack Overflow2018 年的薪资计算器报告显示，全球 DevOps 专家的收入最高，美国 DevOps 专家的年薪中位数接近 10 万美元。 以下是“DevOps”一词的 Google Trends 以及 2019 年的预计增长假设。 从统计数据...阅读全文
ODE 求解器（solver），以及统一的接口：scipy.integrate.solve_ivp； 两个新的信赖域（trust region）优化器，一个新的线性编程方法，对比先前的 scipy.optimize，性能有了大改进； 诸多新的 BLAS 和 LAPACK 函数； 更多信息，请参见：https://mail.python.org/pipermail/scipy-user/2017-October/037357.html 1.0 版的参与贡献人数达到 121 位。下载：https://www.scipy.org/scipylib/download.html...阅读全文
是 Linux 文件系统的一种新压缩技术，你可以选择待定的文件扩展技术。 4、解决 32 位系统的 2038 年问题 Unix 和 Linux 将时间值以 32 位有符号整数格式存储，其最大值为 2147483647。时间值如果超过这个数值则将由于整数溢出而存储为负数。 这意味着对于 32 位系统，时间值不能超过 1970 年 1 月 1 日后的 2147483647 秒。也就是说，在 UTC 时间 2038 年 1 月 19 日 03:14:07 时，由于整数溢出，时间将显示为 1901 年 12 月 13 日而不是 2038 年 1 月 19 日。 Linux kernel 5.6 解决了这个问题，因此 32 位系统也可以运行到 2038 年以后。 5、改进硬件支持 很显然，在下一个发布...阅读全文
虽然GIMP 3.0的开发工作拖拖拉拉，但GIMP 2.10.x稳定系列继续迎来新的功能。今天新出炉GIMP 2.10.22支持基于AV1的AVIF图像格式的导入和导出。AVIF是一种非常有前途的图像格式，基于免版税的AV1技术，已经被Firefox和Google Chrome等网络浏览器支持，同时继续在其他照片/图像软件中得到采用。 相比较 WebP 和 JPEG 等格式，AVIF 的压缩能力明显更好。AVIF 支持全分辨率下的 10 位和 12 位色彩，以及高动态范围（HDR）。AV1 还使用了一种新的压缩技术：从色度到亮度。大多数图像格式将亮度与色相分开存储。AVIF 使用亮度通道来猜测颜色通道的样子，它们通常是相关的，所以AVIF可以提供更小的文件大小和更清晰的边缘。 不仅如此...阅读全文
发送和接收操作将导致两个goroutine做一次同步操作。 因为这个原因，无缓存Channels有时候也被称为同步Channels 。当通过一个无缓存Channels发送数据时，接收者收到数据发生在再次唤醒发送者goroutine之前。单向channel当一个channel作为一个函数参数时，它一般总是被专门用于只发送或者只接收。为了表明这种意图并防止被滥用，Go语言的类型系统提供了单方向的channel类型，分别用于只发送或只接收的channel。类型 chan<- int 表示一个只发送int的channel，只能发送不能接收。相反，类型<-chan int 表示一个只接收int的channel，只能接收不能发送。（箭头<-和关键字chan的相对位置表明了channel的方向 。）这种限...阅读全文
经过 3 年的开发，17 个 alpha 版本，2 个 beta 版本，超过 7500 个提交，以及来自 350 位不同开发者的贡献，OpenSSL 3.0 终于正式发布了。OpenSSL 1.1.1 以来的主要变化主要版本开发者可以从这里下载 OpenSSL 3.0，并升级你的应用程序使之兼容。OpenSSL 3.0 是一个大版本升级，并不完全向后兼容以前的版本。大多数使用 OpenSSL 1.1.1 的应用程序仍然可以正常工作，只是需要重新编译（可能会有关于使用废弃的 API 的编译警告）。还有一些不能完全兼容的应用可能需要进行修改才能正确编译和使用。如果应用程序需要利用 OpenSSL 3.0 中的一些新功能（例如 FIPS 模块），也需要对应用进行更改。许可证变更在以前的版本中...阅读全文
TLC闪存旗鼓相当。 注：每Cell单元存储数据越多，单位面积容量就越高，但同时导致不同电压状态越多，越难控制，导致颗粒稳定性越差，寿命低，利弊都有。 不得不承认，TLC闪存的出现大大提升了SSD的容量，并在一定程度上降低了SSD的价格。不过，依旧没解决SSD价格的难题，大容量SSD仍旧贵。小容量SSD+大容量HDD的存储方案，终究没有单纯大容量SSD来得好。 当QLC 闪存的诞生，也许既廉价又拥有超大容量的SSD，从理想变为现实。 QLC与TLC之间的区别： 1、寿命 前段时间，东芝称其QLC NAND拥有多达1000次左右的P/E编程擦写循环，打破100-150次魔咒，可以与TLC闪存颗粒寿命想媲美。如果真的达到这个标准，那么QLC SSD就能够“理直气壮”进入市场了。 1000次寿命,对于...阅读全文
将面临更大的挑战。大型强子对撞机有一个到 2035 年的蓝图，包括一些重要的升级。“我们的加速器运转三到四年，然后会用 18 个月或两年的时间来升级基础架构。在这维护期间我们会做一些计算能力的规划。 ”Bell 说。CERN 还计划升级高亮度大型强子对撞机，会允许更高光度的光束。与目前的 CERN 的规模相比，升级意味着计算需求需增加约 60 倍。“根据摩尔定律，我们可能只能满足需求的四分之一，因此我们必须找到相应的扩展计算能力和存储基础架构的方法，并找到自动化和解决方案，例如 OpenStack，将有助于此。”Bell 说。“当我们开始使用大型强子对撞机并观察我们如何提供计算能力时，很明显我们无法将所有内容都放入 CERN 的数据中心，因此我们设计了一个分布式网格结构：位于中心的 CERN...阅读全文
install -y haproxy #直接使用deb来安装 2，详解配置文件 haproxy 的配置文件由两部分组成：全局设定和对代理的设定，共分为五段：global，defaults，frontend，backend，listen。 2.1 配置文件格式 HAProxy的配置处理3类来主要参数来源： ——最优先处理的命令行参数; ——“global”配置段，用于设定全局配置参数； ——proxy相关配置段，如“defaults”、“listen”、“frontend”和“backend”； 2.2 时间格式 一些包含了值的参数表示时间，如超时时长。这些值一般以毫秒为单位，但也可以使用其它的时间单位后缀。 us: 微秒(microseconds)，即1/1000000秒； ms: 毫秒...阅读全文
发显得捉紧见拙，我们急需另一套更好的协议来构建我们的服务,于是就有了 HTTP/2。 HTTP/2 是一个二进制协议，这也就意味着它的可读性几乎为 0，但幸运的是，我们还是有很多工具，譬如 Wireshark， 能够将其解析出来。 在了解 HTTP/2 之前，需要知道一些通用术语： Stream： 一个双向流，一条连接可以有多个 streams。 Message： 也就是逻辑上面的 request，response。 Frame:：数据传输的最小单位。每个 Frame 都属于一个特定的 stream 或者整个连接。一个 message 可能有多个 frame 组成。 Frame Format Frame 是 HTTP/2 里面最小的数据传输单位，一个 Frame 定义如下（直接从官网...阅读全文
作为社区 RoadMap 的重要组成部分，是大数据实时化必然的趋势。但是另一方面，传统离线的计算需求其实并不会被实时任务完全取代，而是会长期存在。 在实时和离线的需求同时存在的状态下，以往的流批独立技术方案存在着一些痛点，比如： 需要维护两套系统，相应的就需要两组开发人员，人力的投入成本很高； 另外，两套数据链路处理相似内容带来维护的风险性和冗余； 最重要的一点是，如果流批使用的不是同一套数据处理系统，引擎本身差异可能会存在数据口径不一致的问题，从而导致业务数据存在一定的误差。这种误差对于大数据分析会有比较大的影响。 在这样的背景下，Flink 社区认定了实时离线一体化的技术路线是比较重要的技术趋势和方向。 Flink 在过去的几个版本中，在流批一体方面做了很多的工作。可以认为 Flink...阅读全文
近日Raspberry Pi（树莓派）基金会宣布发布树莓派3代A+版（Raspberry Pi 3 MODEL A+）。尺寸是标准的树莓派A+尺寸，继承了3代的双频2.4GHz和5GHz无线网络、蓝牙4.2/BLE，以及经过改进的散热管理。拥有64位四核1.4 GHz处理器，并且价格低至25美元。 就像2014年树莓派A+系列首次面世时那样，通过在B+型基础上减半内存、移除USBHUB和以太网卡来寻求更低的成本控制。树莓派3代A+参数如下： 1.4GHz 64位四核ARM Cortex-A53 CPU 512MB LPDDR2 SDRAM 双频802.11ac无线局域网和蓝牙4.2/BLE 改进的USB大容量存储启动 改善的散热管理 树莓派3代B+与A+版的对比： 树莓派3代A+与1代A...阅读全文
今天Go 团队很高兴地宣布Go 1.8发布了。现已提供下载。整个标准库有了显著的性能提升和变化。该版本主要的更新内容如下： Go 1.7中为64位x86引入的编译器后端现在用于所有体系结构，这些体系结构将会有显著的性能改进。例如，我们的基准程序所需的CPU时间在32位ARM系统上减少了20-30％。在此版本中，64位x86系统还有一些性能改进，编译器和链接器更快了，编译时间应该比Go 1.7提高约15％。但是在这一领域还有很长的路要走：我们希望在未来版本中实现更快的编译速度。 垃圾收集暂停时间明显更短，通常在100微秒以下，有时候甚至低至10微秒。 HTTP服务器添加对 HTTP/2 Push的支持，允许服务器抢先发送响应到客户端。这对于通过消除往返行程来最小化网络延迟非常有用。HTTP服...阅读全文
CCPA为数据主体“被遗忘权”的行使设置了诸多障碍，虽然GDPR也设置了类似障碍，但想要运用这些障碍的门槛较高（例如：需确保“数据主体的基本权利和自由与控制者的合法利益不相冲突”，这就要求企业要开展“利益平衡测试”来证明两种利益不互相冲突）。这也体现了CCPA促进数据自由流动和便捷交易的价值取向。 7. 其他不同点 GDPR和CCPA在其它规定上也存在诸多细节不同，但基本逻辑大体一致，例如数据处理的原则、数据处理的记录保存条件、数据保护官（DPO）与数据保护负责人的设定、处罚的机制、生效时间等，在此不做赘述。 CCPA对于GDPR中部分内容的存废，既与立法者的价值取向有关，也与CCPA在整个美国隐私保护法律体系中的定位和作用相关。 美国隐私相关立法中，既有《隐私法案》（The Privacy...阅读全文
。但是 Ubuntu 17.04（Zesty Zapus）仅配备有最新的组件和应用程序。 Ubuntu 17.04（Zesty Zapus）的默认桌面环境仍然是 Unity 7，所以你钟爱的 Ubuntu 桌面环境此刻还没有消失。在未来的 Ubuntu 17.10 中，Unity 依然可用，Ubuntu 17.10 将在下个月开始开发。之后，从 Ubuntu 18.04 LTS 开始，将默认使用 GNOME 桌面。 默认使用 Unity 7 桌面 Ubuntu 17.04 有一些新的特性： 免驱动打印 交换文件 不再支持 32 位 PPC 架构 伴随其他有趣的技术一起装载在 Ubuntu 17.04 的最终发行版上，最值得一提的是交换文件，对于新安装的系统来说可以用它来替代交换分区。所以如果你...阅读全文
昨天刚给公司服务器装了LNMP服务器环境，在这里简单记录一下过程备忘。这里我在安装的时候是用的Dotdeb源，仅供参考。 1. 导入Dotdeb源，据说Dotdeb源里的软件版本比较新。 在向源中导入Dotdeb前，我们需要先获取GnuPG key并导入： wget http://www.dotdeb.org/dotdeb.gpg cat dotdeb.gpg | apt-key add - 提示OK，表明导入成功。然后我们开始导入Dotdeb 源，源列表的位置在“/etc/apt/sources.list”，我们通过vi工具或nano工具打开sources.list，添加如下两行： deb http://packages.dotdeb.org wheezy all deb-src...阅读全文
Elasticsearch 7.6.0 发布了，Elasticsearch 是一个分布式的 RESTful 风格的搜索和数据分析引擎。 更新内容较多，摘取部分新特性： Aggregations 新的直方图字段映射器，支持百分位数聚合 #48580 (issue: #48578)对字符串术语实施统计汇总 #47468 Analysis 实施 Lucene EstonianAnalyzer，投票 #49149 (issue: #48895) Authentication 受密码保护的密钥库 (Feature Branch) #49210 Features/ILM+SLM 等待 SLM 策略执行的 ILM 操作 #50454 (issue: #45067)添加 ILM histore 商店索引...阅读全文
>
Bootstrap 4 正式发布后的两个多月，Bootstrap 4.1 发布了。此次更新包括程序修复、文档更新、构建工具更改，以及新增了一些功能。 值得注意的是，自 Bootstrap 4 发布以来，文档地址采用了版本化设置的方式，这意味着每发布一个新的次要版本都会带来一个新的文档地址。今天发布的这个版本也为文档地址提供了新的 URL，getbootstrap.com/docs/4.1/，当然之前的文档地址 getbootstrap.com/docs/4.0/ 仍可正常使用。 主要更新内容如下： 增加了新的自定义范围表单控件 添加了新的.carousel-fade修改器，可以将轮播从水平滑动切换为交叉淡入淡出 为明文下拉项目添加了新的 .dropdown-item-text 增加了新的...阅读全文
nginx 1.18.0 已发布，这是继 1.16 系列之后的最新稳定版本。 1.18.0 加入了 1.17.x mainline 分支中的新功能和 bug 修复，包括 limit_req 和 limit_conn 中的 dry run 模式，limit_rate, limit_rate_after 和 grpc_pass 指令中对变量的支持，以及支持 auth_delay 指令等。 auth_delay 指令位于 ngx_http_core_module 模块中，用法如下： 语法：auth_delay time; 默认值：auth_delay 0s; 上下文：http, server, location 通过 401 响应状态码来延迟处理未经授权的请求，以防止因密码、子请求结果或 JWT...阅读全文
Planet 3DNow上关于AMD新处理器代号和路线图的文章引发广泛关注，提供了很多此前不曾为人了解的信息。其中，ThreadRipper产品线第三代产品代号Castle Peak，第四代产品代号Genesis，这是位于华盛顿的两处地理坐标。 访问购买页面： AMD旗舰店 看完HEDT，再来了解下锐龙家族， 按照时间顺序，明年一季度，AMD会推出Ryzen 4000U/4000H系列移动APU，其中U代表低电压，H代表35W标准电压，处理器家族代号Renoir（雷诺阿），升级到Zen 2架构，即7nm CPU+12nm I/O集成化设计，同时搭配Navi显卡，插槽为FP6，BGA封装。 接着在二季度末，EPYC嵌入式芯片“Starship”上线，最高8C16T，Zen 2架构。6月份是...阅读全文
固态硬盘近年来也是随着计算机的发展而得到了迅速的发展，目前已经隐隐有要取代机械硬盘的势头。但是关于固态硬盘相关的概念实在是繁琐，很多人选购固态硬盘时，看到商家宣传NVMe，PCIE 却不懂是什么意思，今天我们就来为大家详解这些概念。 首先我们要把 M2 跟 SATA 放一起说，我们常说的 M2 其实是 M.2，更多是指一种尺寸或者插槽，就是上图中右边的尺寸较小的直接插主板上的这种，而 SATA 通常是指上图左边那个尺寸较大的一大块那种。 还要提的是M.2插槽也是有两种的，一种是金手指有两个缺口的Socket 2跟金手指只有一个缺口的Socket 3，这两种可以走不同的通道，我们后面会说到。 接下来要搞懂的是 SATA 跟 PCIE，这两个东西是指串行接口或者就是数据走的通道，相信有人看到这...阅读全文
你想明白了该做什么，就不要犹豫，快速行动起来去完成优先事项。毕竟成功人士就没有执行力弱的。 7 努力工作 通过运用自己的聪明才智或者勤奋努力，一个人可以达成工作领域里百分之九十的成就，能做到这一点已经很不错了。但是要想尽量做到完美，达成百分之九十九的成就，那就必须要兼顾聪明与勤奋，因为这一阶段你的竞争者往往是两者兼备的人。 有付出才有收获，付出越多收获也就越大。努力工作可能会造成工作与生活失衡，我完全可以理解有的人选择去更好地平衡工作与生活，在工作中不那么拼命。但是拼命工作确实有很多好处，在多数情况下，努力工作会产生叠加效应，越是成功的人就越能成功。 这通常很有趣。生活中最大的乐趣之一就是找到你的目标，并且有所建树，然后你会发现你在这件事上的影响力比你自己本身更重要。一位YC创始人表示：他在...阅读全文
。源码中有两个类型实现了 canceler 接口：*cancelCtx 和 *timerCtx 1 2 3 4 type canceler interface { cancel(removeFromParent bool, err error) Done() <-chan struct{} } context.cancelCtx 首先函数 WithCancel 就是我们用来创建可以取消的 context(context.cancelCtx) 的入口。 1 2 3 4 5 6 7 func WithCancel(parent Context) (ctx Context, cancel CancelFunc) { // 将传入的上下文包装成私有结构体 context.cancelCtx c...阅读全文
。 版本发布管理 所有的配置发布都有版本概念，从而可以方便地支持配置的回滚。 灰度发布 支持配置的灰度发布，比如点了发布后，只对部分应用实例生效，等观察一段时间没问题后再推给所有应用实例。 权限管理、发布审核、操作审计 应用和配置的管理都有完善的权限管理机制，对配置的管理还分为了编辑和发布两个环节，从而减少人为的错误。所有的操作都有审计日志，可以方便的追踪问题。 客户端配置信息监控 可以在界面上方便地看到配置在被哪些实例使用。 部署简单 配置中心作为基础服务，可用性要求非常高，这就要求 Apollo 对外部依赖尽可能地少，目前唯一的外部依赖是 MySQL，所以部署简单，只要安装好 Java 和 MySQL 就可以让 Apollo 跑起来。 Apollo 配置中心适用范围 既然 Apollo 定位...阅读全文
载包。 一旦下载完成，拷贝 tmp 文件夹到你的 USB 或者外接硬盘上并且返回你的离线系统。需要确保你的 USB 驱动器上有足够的空闲空间存储所有的下载文件，因为所有的包都放在 tmp 文件夹里。 离线操作系统上的步骤 把你的设备插入你的离线操作系统，然后切换到你之前下载了所有包的 tmp目录下。 cd tmp/ 然后，运行下面的命令来安装所有下载好的包。 sudo apt-offline install apt-offline-bundle.zip 这个命令将会更新 APT 数据库，所以 APT 将会在 APT 缓冲里找所有需要的包。 注意： 如果在线和离线系统可以相互访问到，你可以通过 scp 或者其他传输应用程序将 tmp 文件传到离线操作系统中。如果两个操作系统无法相互访问，还是用...阅读全文
** 90后创业者杨海坡创建微比特集团，打造CoinEx ** 微比特集团创始人杨海坡是一位90后创业者。2016年3月，杨海坡投入比特币矿池的开发，一人独立完成了 ViaBTC (Viabtc Technology Limited) 矿池全部代码，并在 两个月后成功上线，这个矿池是全球第一家挖出 BCH 区块的矿池。当前，ViaBTC 不仅是全球第一大 BCH 矿池，也是全球前五大的比特币矿池。 很快杨海坡发现，交易所也是为行业提供资产发行和价值发现的重要角色，是加密行业的核心，于是他决定加入到数字货币交易所的竞争中。 2017年12月，杨海坡成立了 [CoinEx](http://cet.im)。[CoinEx](http://cet.im) 成立不久就以势不可挡之力迅猛发展，2018...阅读全文
Go 的 channel 在实际项目中是怎么使用呢？ channel 会有有缓冲和无缓冲两种类型，无缓冲的可以简单使用让两个 goroutine 数据同步通信。另外一种场景是对某个 object，使用... 01月24日 22 评论...阅读全文
