，Django 软件基金会）的付费承包商 Django Fellows 合并，或者由少数活跃用户合并。Django 的所有版本现在都由 Fellows 发布。 也就是说核心 committer 团队在项目中几乎没有直接参与 Django 相关流程，并且关于 Django 开发中的几乎所有技术决策都不是在 committer 之间讨论和决定的，而是在任何人都可以参与的公共论坛上通过共识决定的。 这样的情况影响了社区中开发者的参与，也影响了 Django 项目的长期健康发展，所以社区内一直以来都在讨论改革。 Django 社区近日通过了 Django 项目新治理模型的提案 DEP 10，目前正在实施的一些变化如下： 之前的核心 committer 团队解散，相关成员的 commit 权限也将被删除。目前正在...阅读全文
在集群化环境里，日志采集是重要基础设施。本文结合最新的 1.0.9 版，对 logpipe 做一个简单的介绍。开源主流解决方案是基于 flume-ng，但在实际使用中发现 flume-ng 存在诸多问题。 比如 flume-ng 的 spoolDir 采集器只能对文件名转档后的大小不能变化的最终日志文件进行采集，不能满足采集时效性要求，如果要采集正在被不断追加的日志文件，只能用 exec 采集器搭配 tail -F 命令，但 tail -F 命令又不能通配目标目录中将来新增的未知文件名。其它解决方案如 logstash 由于是 JAVA 开发，内存占用和性能都不能达到最优。 作为一个日志采集的本地代理，内存占用应该小而受控，性能应该高效，耗费 CPU 低对应用影响尽可能小，要能异步实时追踪...阅读全文
控制器故障转移接近瞬时。Kafka 社区计划在下一个版本（3.4）中弃用 ZooKeeper，然后在 4.0 版本中完全删除它。此外，Kafka 3.3 还提供了其他一些新特性，比如添加了与元数据日志处理错误相关的指标，允许用户为其他用户创建委托令牌，以及严格统一的粘性分区器，以缩短分区时间。对于 Kafka Streams，这个版本增加了源/接收器指标，如消费/生产吞吐量、暂停/恢复拓扑，并集成了 KStream transform()和 process()方法。Kafka Connect 增加了对源连接器的精确一次语义支持。原文链接： https://www.infoq.com/news/2022/10/apache-kafka-kraft/...阅读全文
的新功能。 第二个安全功能是拦截tab-under(“页签下”)行为的一种新机制。Tab-under是一种比较新的概念，它说明的是网页在新页签下打开链接后将旧页签重定向至新URL。 不止是恶意广告商、普通广告商也在使用tab-under，主要原因是它们绕过Chrome的内置弹出消息拦截器，从而让广告商打开推送恶意产品、服务或站点的多个页签。 这个功能将会在Chrome65中发布，该版本定于在2018年3月初发布。谷歌通过上述两个安全功能拦截恶意(内嵌框架或tab-under)重定向，并在页面地面展示工具栏，详细说明被拦截行为的详情。 拦截重定向用户的误导性UI元素 谷歌新增的第三个安全功能是“滥用体验报告”，是以网站黑名单的形式出现的。这些网站使用误导性的UI元素，在未经用户同意的情况下重定...阅读全文
泛型又近了一步。 另外在本次新版本中，像是 template 支持跨行： {{"hello" | printf}} 又或是 Linux 的默认内存管理策略下又从 MADV_FREE 改回了 MADV_DONTNEED 策略，大家在新版本中不再需要设置： GODEBUG=madvdontneed=1 大家若有需求都可以进一步去了解，现在新版本的功能特性已经锁定，基本尘埃落定。 传送门：https://tip.golang.org/doc/go1.16。 分享 Go 语言、微服务和奇怪的系统设计 ???? 长按关注煎鱼，在知识的海洋里遨游 学习资料分享，关注公众号回复指令： 回复【000】，下载 LeetCode 题解大全。回复【001】，下载 Go 进阶图书 Mastering Go。...阅读全文
欺负项目成员3 月 8 日，外媒通过电子邮件联系了现任领导人 Jonathan Carter，就他对 Preining 问题的看法进行咨询，但没有收到任何回复。而据报道，目前 2022 Debian 项目负责人选举已开启，三位候选人：Felix Lechner、Hideki Yamane 和 Jonathan Carter 正在竞选。3 月 9 日，发送给 Carter 的邮件被转到 Debian 新闻团队和项目负责人手中 ，新闻团队的一位发言人回应说：“目前我们没有关于 Norbert Preining 的声明。”Preining 表示，基本上发生的事情是 DAM 认为他在欺负该项目的成员。DAM 是 Debian 客户经理团队，可以批准和开除项目成员。“我猜他们指的是我与 Martina...阅读全文
PROGRAM DEV SENT RECEIVED 7690 carla /usr/lib/firefox wlan0 12.494 556.580 KB/sec 5648 carla .../chromium-browser wlan0 0.052 0.038 KB/sec TOTAL 12.546 556.618 KB/sec Nethogs 选项很少：在 kb/s、kb、b 和 mb 之间循环；通过接收或发送的数据包进行排序；并调整刷新之间的延迟。请参阅 man nethogs，或者运行 nethogs -h。 vnstat vnstat 是最容易使用的网络数据收集器。它是轻量级的，不需要 root 权限。它作为守护进程运行，并记录你网络统计信息。它默认显示所有的网络接口。使用 -i 选项选择单个...阅读全文
。 * Type=oneshot：这一选项适用于只执行一项任务、随后立即退出的服务。可能需要同时设置 RemainAfterExit=yes 使得 systemd 在服务进程退出之后仍然认为服务处于激活状态。 * Type=notify：与 Type=simple 相同，但约定服务会在就绪后向 systemd 发送一个信号。这一通知的实现由 libsystemd-daemon.so 提供。 * Type=dbus：若以此方式启动，当指定的 BusName 出现在DBus系统总线上时，systemd认为服务就绪。 修改现存单元文件 要更改由软件包提供的单元文件，先创建名为 /etc/systemd/system/<单元名>.d/ 的目录（如/etc/systemd/system...阅读全文
(初学者说明：RX 表示每秒接收数据，TX 表示每秒发送数据)： $ bmon bmon - Linux 带宽监视按 d 键可以查看更详细的带宽使用情况的图形化统计信息，参考下面的截图。 bmon - Detailed Bandwidth Statistics按 Shift + ? 可以查看快速指南。再次按 Shift + ? 可以退出(指南)界面。 bmon – 快速指南通过 Up 和 Down 箭头键可以查看特定网卡的统计信息。但是，要监视一个特定的网卡，你也可以像下面这样作为命令行参数指定。 选项 -p 指定了要显示的网卡，在下面的例子中，我们会监视网卡 enp1s0： $ bmon -p enp1s0 bmon – 监控以太网带宽要查看每秒位数而不是每秒字节数，可以像下面这样使用 -b...阅读全文
止将凭据发送到默认注册表。 Runtime CVE-2021-41089 在docker cp过程中，在 chroot 中创建父目录，以... 2 1 LLVM 13.0.0 正式发布 LLVM 13.0.0 现已发布。本次更新内容主要包括 bug 修复和一些小型功能优化。 主要更新内容 Flang 作为 Fortran 前端现在包含在官方 LLVM 二进制包中 LLDB 可执行文件现在包含在官方预构建的 LLVM 二进制文件包中 对 Armv9-A 领域管理扩展 (RME) 和可扩展矩阵扩展 (SME) 的初始组装支持 在 Clang 中对 OpenCL 内核语言支持... 1 2 Apache Maven 3.8.3 发布，项目管理和构建工具 Apache Maven 3.8.3 发布了...阅读全文
说明 文件随机读写 不支持 21.8336 无 互斥锁性能 0.0231s 0.0186s 1.24倍 Debain 9 文件系统采用了三星与华为合力开发的f2fs，针对mmc和emmc还有tf存储进行了优化，除了大大提升了性能之外，还增加了TF卡的使用寿命，提供了意外断电文件系统的保护，大大避免意外断电导致的文件系统崩溃的情况。 其中由于TF卡的细微差异，导致文件连续读写出现了反转，实际上通过测试文件连续读写的性能方面，f2fs更加优化，超越ext4很多倍。 总体上，64位的系统提供了更好的使用体验，曾经抱怨树莓派跑opencv性能不佳的朋友应该是看到希望了！ 以上测试并非使用官方系统，但能够让大家看到软硬件匹配64位之后，树莓派性能上的提升潜力。作为树莓派爱好者，一起期待官方发布64位系...阅读全文
/debian/ jessie-backports main contrib non-free 1.2安装最新内核，及相关软件组件包，避免编译Hostapd出错，依次执行如下命令： apt-get update apt-get install linux-image-4.3.0-0.bpo.1-amd64 apt-get install linux-headers-4.3.0-0.bpo.1-all-amd64 apt-get install pkg-config libssl-dev gettext openssl hostapd apt-get install libnl-genl-3-dev libnl-genl-3-200 libnl-3-dev libnl-3-200 2.编译、配置...阅读全文
Go 1规范还存在，他们的程序将可以继续编译并正确运行。现在，要设计的Go 2规范，存在破坏与1.x兼容的可能性。Cox认为需要谨慎选择新特性。 Go 2必须带动所有开发者[包括使用Go 1.x的开发者]。只有回报足够丰富，我们才能要求他们放弃旧有习惯，来学习Go 2的新特性。 Go 2还必须兼顾所有现有的Go 1源代码。 我们不能分裂Go生态系统。在混合型的项目中，用Go 2 写的包中导入了用Go 1写的包，或者相反的情况，这种情况必须要在多年的过渡期中正常运行。我们必须弄清楚如何做到这一点，自动化工具像go fix一定会发挥作用。 为了避免引起混乱，Google将新功能的数量限制为“两到三个”，一定不超过五个“，”每一个变化都需要仔细的思考，规划和工具化“。 这些功能不包括“允许使用更加口...阅读全文
Workspaces) 越来越多的科技公司开始采用单体仓库模式（mono-repository — 方便跨项目共享代码，同时避免依赖同步问题）来进行代码控制，这种模式也正逐渐被开源社区和一些小型公司所采纳。 因此，Yarn 增加了一个新特性 ——工作区。工作区可以自动从多个 package.json 中收集所有的依赖项，并一次性将它们安装完毕。项目根目录下会生成一个独立的 yarn.lock 来锁定这些文件。此外，如果多个工作区之间存在依赖，Yarn 会为它们创建链接，这样所有的项目就可以始终共享最新的代码。 自动合并 yarn.lock 文件 (Auto-merging of lockfiles) 多个开发者在开发同一个项目时，可能会需要更新包依赖，从而导致 yarn.lock 文件出现冲突。如果只有一两个...阅读全文
高开发者处理错误的可能性。 为避免处理重复异常，错误检查和错误处理还必须是显性的，在程序文本中可见。 参考示例： func main() { hex, err := ioutil.ReadAll(os.Stdin) if err != nil { log.Fatal(err) } data, err := parseHexdump(string(hex)) if err != nil { log.Fatal(err) } os.Stdout.Write(data) } 简化后： func main() { handle err { log.Fatal(err) } hex := check ioutil.ReadAll(os.Stdin) data := check parseHexdump...阅读全文
的战略文件战略方法关键考虑因素其他组成确定投资回报率投资目标 这里关键的第一步是创建和将你的开源策略形成文字，该策略将“帮助你最大限度地提高组织从开源中获得的利益。”同时，你详细的策略可以帮助你避免因错误而导致的困难，例如：选择错误的许可证或不正确地维护代码。根据指南，该文件还可以： 让领导者感到兴奋并参与帮助在公司内获得支持促进分散的多部门组织的决策帮助建立一个健康的社区解释贵公司的开源方式和对其使用的支持明确贵公司在社区驱动的外部研发中投资的地方，以及贵公司将重点放在增值差异化的地方 Salesforce 的软件架构师兼本指南的撰稿人 Ian Varley 说：“在 Salesforce 内，我们有内部文件，我们将这些围绕开源战略指导和鼓励的文件分发给我们的工程团队。其中鼓励创建和使用开...阅读全文
投票，也就是弹劾机制，可将任期内的当权者赶下台；它严格限定了在委员会里，只允许少于 50% 的成员是企业（5 人委员会里最多有 2 个）；并且关注到核心开发者的选举/淘汰、如何更新治理提案等问题。 而且，PEP 8016 中也提出了新的 PEP 流程，目前的 PEP 流程是提案人确定 PEP 的选题方向，提案人负责收集与整合来自整个社区的反馈。然后，相关领域的专家们汇总全部讨论，并开启为期 14 天的审查，之后进行社区投票。如果一个 PEP 很有争议，任何专家成员都可发起动议来拒绝通过它，这需要超过 2/3 的票数。PEP 8016 的 PEP 流程：理事会在必要时可直接地批准/否决 PEP，但最好是设置流程来避免这样做决策，例如，将决策权委派给团队或者 BDFL 代表。 7 种治理方案一览...阅读全文
/ppa-name #添加ppa源sudo add-apt-repository -r ppa:user/ppa-name #删除ppa源 注意，任何人都可以上传软件包到ppa，所有尽量避免使用ppa，如果必须使用，应选用可以信任的，有固定团队维护的ppa。 dpkg工具管理deb格式软件包 使用PPA源安装软件包 目录...阅读全文
Amazon 应用。Ubuntu 上的 Amazon 图标一直就挂在桌面，这早已被人吐槽，因为它比较鸡肋，相关调查数据也反映了这一点。此次变化，特别是对于普遍不习惯首选 Amazon 购物的中国人来说，是一大好事。 Ubuntu 20.04 将使用 Linux 5.4 内核，该版本具有内核锁定模式和 exFAT 支持等新特性。 内核锁定功能主要是为了防止 root 帐户篡改内核代码，从而在用户态进程和代码之间划清界限。启用该功能后，即便是 root 帐户也无法访问某些内核功能，从而保护操作系统免受受损的 root 帐户影响。 exFAT 文件系统则是 FAT32 的替代者，它由微软开发，但是不仅用于 Windows 系统，目前 exFAT 在整个电子行业中都得到了广泛应用，特别是 SD 卡、USB 闪...阅读全文
关。 18. 针对单点故障——实施冗余。 19. 为了容错性和持久性——实施数据复制。 20. 对于用户到用户的快速通信 — 使用 Websockets。 21. 分布式系统中的故障检测——实现心跳。 22. 数据完整性——使用校验和算法。 23. 高效的服务器扩展——一致性哈希。 24. 去中心化数据传输——考虑 Gossip 协议。 25. 基于位置的功能 — 使用四叉树、Geohash 等。 26. 避免特定的技术名称 — 使用通用术语。 27. 高可用性和一致性的权衡——最终一致性。 28. 对于IP解析和域名查询——DNS。 29. 处理网络请求中的大数据——实施分页。 30. 缓存删除策略 — 首选...阅读全文
做得很突出是不够的，不是每个人都适合做管理。要找到好的经理人，需要观察他们是如何与其他员工共事的，看看他们是否具备足够的灵活性并是否能够拥抱变化。要想知道一个人是否适合管理岗位，可以先分配一些小任务给他们，比如让他带实习生或者让他管理一个小项目。经过一段时间的观察后，看看他是否胜任。 培训经理人需要几个月的时间。Calderon建议这个时间不要太长，以免养成不好的习惯，只要等到他们开始理解管理者角色的时候就可以了。在谷歌，这个时间一般是三个月。Calderon说，不要在他们还没开始工作或刚开始工作时就培训他们，而是要让他们先工作几个月，让他们对工作有所了解，并经历一些挑战。到了培训阶段，不要只是纸上谈兵，而是真正赋予他们管理者的角色。 不要一开始就让他们承担太多的工作。一个新经理人刚开始工作...阅读全文
hash 分区表时指定非常大的分区数量导致 TiDB OOM 的问题 #16219让 union 语句的行为和 select 语句保持相同，修复把 warnings 当 error 的问题 #16138修复 TopN 下推到 mocktikv 中的执行错误 #16200增大 chunk.column.nullBitMap 的初始化长度，以避免多余的 runtime.growslice 开销 #16142TiKV修复 replica read 导致 TiKV panic 的问题 #7418 #7369修复 restore 产生许多空 Region 的问题 #7419修复重复的 resolve lock 请求可能会破坏悲观事务原子性的问题 #7389TiFlash修复从 TiDB 同步 schema...阅读全文
"slave1" # slave2 ssh-keygen -t rsa -C "slave2" # slave3 ssh-keygen -t rsa -C "slave3" 5. 免密码登录 在每台主机上执行： ssh-copy-id -i ~/.ssh/id_rsa.pub master ssh-copy-id -i ~/.ssh/id_rsa.pub slave1 ssh-copy-id -i ~/.ssh/id_rsa.pub slave2 ssh-copy-id -i ~/.ssh/id_rsa.pub slave3 6. 创建用户和用户组 在每台主机上执行： useradd -m -s /bin/bash hadoop JDK 安装与配置 1. 手动安装JDK 解压jdk安装包到/usr...阅读全文
在许多互联网领域，尤其是Web PKI和SSL/TLS行业中，我们大多生活在过去的决定中。脆皮密码、差强人意的协议设计以及不怎么标准的软件始终牵绊着前进的步伐。往往一个新操作系统或库的问世都会迅速被大量使用，然后整个生态系统需要花上很多年的时间处理各种遗留的设计缺陷。 随着互联网规模和重要性的增长，我们试图做出更明智的决定，以避免或至少缩短这一周期。最近，两个操作系统进行了更新，反映了两种不同的保持生态健康的做法： Debian推动了其预发行版本的更改，将只支持TLS 1.2；而微软则开始在Windows Server 2008添加TLS 1.2支持。 这两个选择代表了相反的观点 - 一个展望未来，另一个回顾过去。 Debian发布了一个新版本的OpenSSL库，用于其不稳定的构建 - 一...阅读全文
。通过把来自不同列的数据关联起来，查询规划器（query planner）现在可以避免一些边缘情况，在那些边缘情况下，之前的Postgres版本会认为WHERE语句更强的选择性，并且会导致选择了错误计划从而拖慢执行时间。Postgres的这个改进在整个SQL世界中都是极具创新性的。 Postgres 10还对并行性进行了改进。开发者现在可以使用索引扫描（index scans）和仅索引扫描（index-only scans）、并行合并连接（merge joint）以及位图堆扫描。并行查询是通过不同的workers来实现的，因此在某些情况下，设置和分解的成本会超过并行化的好处。默认情况下，可以在大于8MB大小的表以及大于512KB的索引上启用并行表扫描（parallel table scan...阅读全文
学习使用，商业用途请购买许可。 免责声明：您在使用本工具的过程中存在任何非法行为，您需自行承担相应后果，我们将不承担任何法律及连带责任。 参考链接： [1]: https://sysin.org/blog/nessus-unlimited-on-macos/ [2]: https://zhuanlan.zhihu.com/p/431241617 [3]: https://mp.weixin.qq.com/s/U99sFzozv5HAocAWUpqpyA...阅读全文
Gentoo中文社区，一开始想法挺多，也做了点工作。不过，由于个人技术水平、能力等方面原因，现在社区基本上也没什么动静了。现在年龄越来越大，精力也有限，希望有更多新生力量加入进来，让Gentooo这个发行版在国内有更多影响力！ 2.您会参与哪些线下活动？ 答：我们庄里，有个活动参加就不错了，不像北上广这样的一线大城市经常有。虽然离帝都近，但一是时间紧张，二是自己掏腰包负担路费，看看3K多的月薪，算了吧。。。 3.您怎么看现目前中国的开源社区，又看好哪些？能举例详细说明吗？ 答：中国的开源社区和国外比，有明显的差距，但从这几年的发展来看，氛围是越来越好的。我认为目前最大的问题是：不少社区是靠核心组织者的热情来维持，缺乏一定的资金和硬件条件支持，也就是没有长久发展的机制。再加上拿来主义盛行，在一定程度上也...阅读全文
了一个计划表，同时不可避免地寻求更多的帮助。这让人们有理由相信围绕项目发生的戏剧性事件仅仅是一个小摩擦——也许不可避免，但绝不是像现在看起来这么糟糕。 via: https://lwn.net/Articles/665839/ 作者：Jake Edge 译者：vim-kakali 校对：PurlingNayuki...阅读全文
开始写入数据之后，在4h+10m之后，会对上个分片进行全量压缩策略 #应用: 本文设置为80小时。目的是不进行full压缩策略，来避免io过多消耗，后面会介绍由于设置的retention policy为72小时，所以此处大于72即可。 compact-full-write-cold-duration = "80h" #描述: 最大并行压缩数,默认会使用golang的逻辑处理器的一半 #场景: 当进行level1，level2,level3及full策略压缩文件时使用的处理器数量， #当前服务器为16core32物理线程，则会在压缩时默认使用16个处理器 #应用: 本文设置为8。用于减轻压缩策略时，cpu与磁盘io的压力，但相应的会导致压缩周期变长。 max-concurrent...阅读全文
离谱的人。 我们要尽早树立自信。如果你的判断常常都很准确，能带来很好的结果，那么你一定要加倍自信。 对自己不自信的人很难对未来抱有逆向思维，但是往往逆向思维才能创造出最大的价值。 还记得很多年前马斯克带我参观SpaceX工厂，他详细地谈到了制造火箭的一些细节，但是让我印象最深的还是马斯克谈到向火星发射火箭时的表情，离开工厂时我就在想“啊，这就是自信的样子”。 对大多数创业者来说，激发自己以及团队的士气可以说是最大的挑战之一，如果没有自信，这就成了几乎不可能完成的任务。但往往一个人越有雄心壮志，其受到的打击就会越多。 大多数非常成功的人在面对人们的质疑时至少有一次决定是正确的，否则他们面临的挑战会更多。 我们在自信的同时也要保持清醒的自我认知，才能避免盲目自大。我曾经非常讨厌受到批评和质疑，并...阅读全文
-offline get apt-offline.sig --threads 5 --bundle apt-offline-bundle.zip 在这里的 -threads 5 代表着（并发连接的） APT 仓库的数目。如果你想要从更多的仓库下载软件包，你可以增加这里的数值。然后 -bundle apt-offline-bundle.zip 选项表示所有的软件包将会打包到一个叫做 apt-offline-bundle.zip 的单独存档中。这个存档文件将会被保存在你的当前工作目录中（LCTT 译注：即 tmp 目录）。 上面的命令将会按照之前在离线系统上生成的签名文件下载数据。根据你的网络状况，这个操作将会花费几分钟左右的时间。请记住，apt-offline 是跨平台的，所以你可以在任何操作系统上使用它下...阅读全文
需要花费大量时间与精力，但它是没有薪水回报的。公开信表示，如果之后确认这正是问题所在，那么社区可能会考虑做出一些改变，创造一个有偿的职位来承担领导人的工作。 目前没有一位开发者提名，根据 Debian 的章程，提名期延长了一周，也就是 3 月 17 日截止。如果在这个时间之前还没有人提名，那么提名期还会再延长一周。该流程将无限持续下去，“直到有人屈服并提交他们的名字”。 而除了无人提名的尴尬，更严重的问题是，根据章程，只要任期结束，当前的 Debian 领导人 Chris Lamb 就可以不再履行职责，如果在那个时候还没有选出新的领导人（毕竟提名期是可以无限延长的），那么社区就会处在群龙无首的状态，Debian 将会陷入困境，项目运作的各方面都会停滞不前。 然而，好消息是，Debian 章程...阅读全文
，代码重新检查，避免修改问题引发新的问题 3.6撤销提交（reset） 当发现这一次commit的内容是有错误的，有两种处理方法： 1、修改错误内容，再次commit一次 2、使用git reset 命令撤销这一次错误的commit 第一种方法比较直接，但会多次一次commit记录，而且有可能改错 推荐第二种方法，因为错误的commit没必要保留下来，还原到上一次也能保证正常工作 git commit提交后的结果 重置有三种模式：soft,mixed,hard git reset --hard HEAD 重置stage区和工作目录，就是没有commit的修改会被全部擦掉，适用于重新理清思路 git reset --hard HEAD^ 将你的 HEAD 和当前 branch 切到上一条...阅读全文
正如体育界不成文的规定一样，这些规则基本上不会出现在官方文档和正式记录上。比如说，在棒球运动中，从比分领先时不要盗垒，到跑垒员跑了第一时也不要放弃四坏球保送。对于圈外人来讲，这些东西很难懂，甚至觉得没什么意义。但是对于那些想成为 MVP 的队员来说，这些都是理所当然的。 软件开发，特别是开源软件开发中，也有一套不成文的规定。和其它的团队运动一样，这些规定很大程度上决定了开源社区如何看待一名开发者，特别是新加入社区的开发者。 按部就班，循序渐进 在参与社区之前，比如开放源代码或者其它什么的，你需要做一些基本工作。对于有眼界的开源贡献者，这意味这你需要理解社区的目标，并学习应该从哪里起步。人人都想贡献源代码，但是只有少量的人做过准备，并且乐意、同时也有能力完成这项艰苦卓绝的工作：测试补丁、复审...阅读全文
Apollo（阿波罗）是携程框架部门研发的分布式配置中心，能够集中化管理应用不同环境、不同集群的配置，配置修改后能够实时推送到应用端，并且具备规范的权限、流程治理等特性，适用于微服务配置管理场景。 本文简单从功能特点做介绍，更详细的说明请参考Apollo配置中心介绍。本地快速部署可以参考这里。线上的演示环境从这里可以访问到： 106.54.227.205 （账号/密码: apollo/admin） Apollo 配置中心产生背景 大多情况下程序随着功能的复杂，程序的配置也会增多：包括各种功能开关、参数配置、服务地址信息配置等，同时开发人员对程序配置的期望值也越来越高：配置修改后实时生效，灰度发布，分环境、分集群的管理配置、权限控制、审核机制等。 在这样的大环境下，传统的通过配置文件、数据库...阅读全文
由于人工智能 / 机器学习日益集成到应用和业务流程中，因此生产级机器学习模型需要更多可扩展的基础设施和计算能力，以用于训练和部署。 现代机器学习算法在大量数据上进行训练，并且需要数十亿次迭代才能使成本函数最小化。这类模型的垂直扩展会遇到操作系统级别的瓶颈，包括可提供的 CPU、GPU 和存储的数量，而且对于这种类型的模型，已经证明效率并不高。更为高效的并行处理算法，例如异步训练和 allreduce 式训练，需要一个分布式集群系统，由不同的 worker （工作器）以协调的方式同时学习。 可扩展性对于在生产环境中服务深度学习模型也非常重要。将单个 API 请求处理到模型预测端点可能会触发复杂的处理逻辑，这将花费大量时间。由于更多用户访问模型的端点，为了有效地处理客户端请求，需要更多服务实例...阅读全文
，DPL 代表 Debian 项目去进行关于 Debian 的演讲和演示、参加贸易展览、与其他组织和公司建立良好的关系以及处理一些法律相关问题。也就是说，他是一个形象代表和官方发言人。 在内部，DPL应该与其他 Debian 开发人员交谈，尤其是与代表交谈，以了解他们如何协助开发者的工作。此外就是一些批准预算的财务事宜。也就是一些行政事务。 在多数的公司或组织中，对外品牌和行政都不是核心业务部门，非常边缘化，这些职能常常会面临没有价值感、陷入繁杂琐事的困境。与此同时，DPL 花费时间与精力并不少，却没有任何薪水回报。 这就不难理解为什么会有 DPL 不愿连任。比如，2019年那次轮空事件中接盘的 Sam Hartman，就在 2020年的竞选季中表示不再参选。 02 开发者们的“共同意志” 那么...阅读全文
release：testing被改名为stable，于是stable指向了新release的code name，同时一个新拷贝被创建，命名为下一个要release的code name，并成为新的testing，以前的stable被改名为oldstable，于是对应released的code name的版本号(如sarge对应3.1，etch对应4.0)就发布了。 即使是stable distribution仍然不可避免地存在bugs，解决这些bugs的更新包首先被上传到debian archive的stable-proposed-updates目录下作更进一步的测试，Release Team会定期地评价这些更新并决定它们是否可以被包括到stable中，当一批更新被移至stable中后，stable...阅读全文
因。也有其他人认为，systemd的日志记录并不是很好，二进制日志被很多人所诟病，虽然systemd提供了更快的索引，但二进制日志本身就有问题，而且systemd的日志损坏也不是第一次发生了。而且systemd真正令人反感的是设计不够灵活，对很多人而言，systemd阻止了他们的选择自由，考虑到kFreeBSD分支的软件源无法纳入systemd，为与其他分支保持一致，Debian的开发者尽力避免纳入systemd。但Lennart Poettering本人对此并不在意，并称“Debian GNU/kFreeBSD不过是玩具系统”。 systemd目前还处于中间发展阶段，那些想要超级安全或超级小或超快速系统的人都不适合使用。事实的真相是，systemd的很多反对者并不真正关心“底层”，只是抱怨...阅读全文
-ahead logs)之前将其删除，现在可在 PostgreSQL 13 中进行调整，以指定要保留的 WAL 文件的最大数量， 有助于避免磁盘空间不足错误。 PostgreSQL 13 还增加了更多让管理员可以监控数据库活动的方法，包括从 EXPLAIN 中查看 WAL 使用情况的统计信息、流式基础备份的进度，以及 ANALYZE 命令的进度。此外，可以使用新的 pg_verifybackup 命令验证 pg_basebackup 命令输出的完整性。 应用开发 PostgreSQL 13 对来自不同数据源的 PostgreSQL 数据类型进行了优化。此版本在其 SQL/JSON 路径支持中增加了datetime()函数，它可以将有效的时间格式(如 ISO 8601 字符串)转换为...阅读全文
packet 为单位（默认64K），A 收到一个 packet 就会传给 B，B 传给 C。A 每传一个 packet 会放入一个应答队列等待应答； 数据被分割成一个个 packet 数据包在 pipeline 上依次传输，在 pipeline 反方向上， 逐个发送 ack（命令正确应答），最终由 pipeline 中第一个 DataNode 节点 A 将 pipelineack 发送给 Client； 当一个 block 传输完成之后，Client 再次请求 NameNode 上传第二个 block，重复步骤 2； 7.1 网络拓扑概念 在本地网络中，两个节点被称为“彼此近邻”是什么意思？在海量数据处理中，其主要限制因素是节点之间数据的传输速率——带宽很稀缺。这里的想法是将两个节点间的带宽作为距离的...阅读全文
差，但是更便宜的成本、更大容量的优势是无法忽视的。随着技术的不断发展和成熟，QLC就像当年TLC一样从不被接纳到广泛认可也是早晚的事情. 其实不管是TLC还是QLC，只要价格够便宜，容量够大，速度够快，寿命有保障，总会获得消费者的喜欢，赢得属于自己的市场份额。 而对于HDD来说，QLC的出现将带来更大的威胁。或许真正QLC SSD普及之时，才是HDD 跟我们Say byebye之时。...阅读全文
Kotlin 使用 React.js 创建现代 Web 应用。 使用 create-react-kotlin-app，可让开发者无需费心于项目设置和配置构建这些工作，能专注于快速开始客户端应用开发，同时体会到静态类型语言的优势以及由 JavaScript 生态系统带来的强大配套资源。详情点此了解。 未来的发展方向 Kotlin 语言的未来发展方向主要是在 Kotlin 支持的平台之间实现更好、更广泛的代码重用。官方表示计划通过使用同一 API 以扩展全部平台上的可用库资源集合，其中涵盖 I/O、网络、序列化以及日期处理等。 编译器方面，1.3 版本仍集中关注内部层面的变更，而不是外部可见的语言特性。内部的改变能提高性能、改进类型推断、为所有目标平台生成更高效的代码，以及带来更好的 IDE 插件响应能力...阅读全文
写代码并通过自动化脚本来测试各种案例的测试人员的需求将大幅增长。如果你是测试人员并且在是否学习编码方面处于两难境地，我们建议你还是学习编码吧。了解不同的 DevOps 工具和自动化脚本在当今的软件开发中起着至关重要的作用，并且将在 2019 年占据主导地位。 如果测试人员不学习编写代码和自动化测试脚本，就有可能被淘汰。手动测试将在 2019 年过时，因为它们需要耗费大量的时间。测试自动化不仅可以提高效率，还可以确保更快地将功能交付给市场。 微服务架构采用率增加 DevOps 和微服务将齐头并进。微服务是独立的实体，因此在出现问题时不会给其他系统造成破坏。微服务架构可以帮助公司轻松部署和添加新功能。预计更多的企业将会转向微服务架构，以改进他们的在线运行时间和有效交付。不要只是因为别人采用了微服...阅读全文
现的要早，多年来，他们一直在使用各种开源技术通过 Linux 服务器提供服务。“在过去的十年中，我们发现，与其自己解决问题，不如找到面临类似挑战的上游开源社区进行合作，然后我们一同为这些项目做出贡献，而不是一切都由自己来创造和维护。“Bell 说。一个很好的例子是 Linux 本身。CERN 曾经是 Red Hat Enterprise Linux 的客户。其实，早在 2004 年，他们就与 Fermilab 合作一起建立了自己的 Linux 发行版，名为 Scientific Linux。最终他们意识到，因为没有修改内核，耗费时间建立自己的发行版是没有意义的，所以他们迁移到了 CentOS 上。由于 CentOS 是一个完全开源和社区驱使的项目，CERN 可以与该项目合作，并为...阅读全文
) 对style的操作(对不同的属性操作，影响不一样) 还有一种是用户的操作，比如改变浏览器大小，改变浏览器的字体大小等(回流+重绘) 4、本地存储 本地存储最原始的方式就是 cookie,cookie 是存放在本地浏览器的一段文本，数据以键值对的形式保存，可以设置过期时间。 但是 cookie 不适合大量数据的存储，因为每请求一次页面，cookie 都会发送给服务器，这使得 cookie 速度很慢而且效率也不高。因此cookie的大小被限制为4k左右(不同浏览器可能不同,分HOST)，如下所示： Firefox和Safari允许cookie多达4097个字节，包括名（name）、值（value）和等号。 Opera允许cookie多达4096个字节，包括：名（name）、值（value）和等号...阅读全文
代表cpu使用的时间。例如： 九、Async-profiler的使用 和 火焰图分析 背景： 目前有一个kafka消费者工程,此工程会消费kafka中的消息，并通过fastjson解析该消息为java实体，然后存入到阻塞队列 BlockingQueue中。另外有若干个线程会从queue中批量拿消息，然后以批量形式写入到 elasticsearch 中。目前在使用中发现存在性能瓶颈，需要定位是该工程对消息转化处理较慢，还是写es操作比较慢。 9.1采集cpu profile数据 我们将代码回退到第一次测试的情况,并启动程序，并找到当前进程号(627891)，然后通过如下命令进行采集，并转换为火焰图格式 svg。 ./profiler.sh -d 15 -i 50ms -o svg -e cpu...阅读全文
回绑定变量后的函数（也即闭包），此时即便生成闭包的环境（父函数）已经释放，闭包仍然存在，这个过程很像类（父函数）生成实例（闭包），不同的是父函数只在调用时执行，执行完毕后其环境就会释放，而类则在文件执行时创建，一般程序执行完毕后作用域才释放，因此对一些需要重用的功能且不足以定义为类的行为，使用闭包会比使用类占用更少的资源，且更轻巧灵活，现举一例：假设我们仅仅想打印出各类动物的叫声，分别以类和闭包来实现： 可以看到输出结果是完全一样的，但显然类的实现相对繁琐，且这里只是想输出一下动物的叫声，定义一个 Animal 类未免小题大做，而且 voice 函数在执行完毕后，其作用域就已经释放，但 Animal 类及其实例 dog 的相应属性却一直贮存在内存中： 而这种占用对于实现该功能后，则是没有必要...阅读全文
校验和校验已安装的Debian/Ubuntu软件包，为了避免在你的系统上安装和执行损坏的二进制文件或软件包文件，有必要对照软件包中存储的信息来校验文件系统上的文件。本文转自 51CTO...阅读全文
软件包，或者安装手动下载的软件包。 然而，它们都方便。使用得当，它们可以节省时间和精力，一些工具可以帮助你避免常见问题。确定自己有什么样的要求，然后选择最适合的工具。 原文标题：Improving Debian Linux Package Management: Seven Tools，51CTO译稿，中文原始链接这里。...阅读全文
