如果要了解一两个 ip 的一些简单的情况，比如 ls -l /data | wc -l，以前是要写到 inventory 文件中的， ansible -i hosts all -m shell -a "ls -l /data0/ | wc -l" 也可以这样，一台机器最后面要有一个逗号， ansible all -i 192.168.1.1, -m shell -a "ls -l /data0/ | wc -l" 两台机器用逗号隔开，并且不能有空格， ansible all -i 192.168.1.1,192.168.1.2 -m shell -a "ls -l /data0/ | wc -l" 参考: http://stackoverflow.com/ 除了上面的 shell 模块，还...阅读全文
由于人工智能 / 机器学习日益集成到应用和业务流程中，因此生产级机器学习模型需要更多可扩展的基础设施和计算能力，以用于训练和部署。 现代机器学习算法在大量数据上进行训练，并且需要数十亿次迭代才能使成本函数最小化。这类模型的垂直扩展会遇到操作系统级别的瓶颈，包括可提供的 CPU、GPU 和存储的数量，而且对于这种类型的模型，已经证明效率并不高。更为高效的并行处理算法，例如异步训练和 allreduce 式训练，需要一个分布式集群系统，由不同的 worker （工作器）以协调的方式同时学习。 可扩展性对于在生产环境中服务深度学习模型也非常重要。将单个 API 请求处理到模型预测端点可能会触发复杂的处理逻辑，这将花费大量时间。由于更多用户访问模型的端点，为了有效地处理客户端请求，需要更多服务实例...阅读全文
block: qemu-img: ‘measure’ 命令现在支持 LUKS 镜像block: 实验性支持 qemu-storage-daemon，并提供对 QEMU block-layer/QMP 功能的访问，如块设备作业或内置的 NBD 服务器，无需启动一个完整的虚拟机ARM: 支持以下架构功能 ARMv8.1 VHE/VMID16/PAN/PMU ARMv8.2 UAO/DCPoP/ATS1E1/TTCNP ARMv8.3 RCPC/CCIDX ARMv8.4 PMU/RCPCARM: 支持 Cortex-M7 CPUARM: 新板卡支持 tacoma-bmc, Netduino Plus 2 和 Orangepi PCARM: ‘virt’ 机器支持 vTPM 和 virtio-iommu...阅读全文
正在直播2022开放原子全球开源峰会！>>>>> 谷歌内部使用了许多不同的操作系统平台，其中包括 Linux。15 多年前，谷歌选择基于 Ubuntu LTS 构建内部 Linux 发行版 Goobuntu，主要是看中了 Ubuntu 具备用户友好、易于使用的特性，以及提供了许多优秀功能。此外，LTS 会获得 Canonical 提供 2 年以上的安全更新。 根据官方介绍，Goobuntu 是谷歌长期以来一直使用的 Linux 发行版。不过 Ubuntu LTS 的两年更新周期意味着谷歌必须在操作系统 EOL 之前，对超过 10 万台设备中的每台机器进行升级。这是一项非常困难且耗时的工作，毕竟每两年让所有工程师从头开始配置他们的工作空间，这对生产力是严重的打击，并且从经济角度来看也是一个不...阅读全文
TensorFlow 是一个端到端开源机器学习平台。它拥有一个包含各种工具、库和社区资源的全面灵活生态系统，可以让研究人员推动机器学习领域的先进技术的发展，并让开发者轻松地构建和部署由机器学习提供支持的应用。 TensorFlow可以在系统范围内，Python虚拟环境中，作为Docker容器或与Anaconda一起安装。在本教程中，我们将讲解如何在Debian 10的Python虚拟环境中安装TensorFlow。 虚拟环境使你可以在一台计算机上拥有多个不同的隔离Python环境，并在每个项目的基础上安装模块的特定版本，而不必担心会影响其他项目。 以下内容提供了如何在Debian 10上的Python虚拟环境中安装 TensorFlow。 1、安装Python 3 venv 首先我们要验证...阅读全文
：sysdig -p"%proc.name %fd.name" "evt.type=accept and proc.name!=httpd" 容器 查看机器上运行的容器列表及其资源使用情况：sudo csysdig -vcontainers查看容器上下文的进程列表：sudo csysdig -pc查看运行在debian.cn容器里CPU的使用率：sudo sysdig -pc -c topprocs_cpu container.name=debian.cn查看运行在 debian.cn 容器里网络带宽的使用率：sudo sysdig -pc -c topprocs_net container.name=debian.cn查看在 debian.cn 容器里使用网络带宽最多的进程：sudo sysdig...阅读全文
如果你在 dmesg 日志中发现了该错误，对应的 xfs 分区不能被挂载和使用， ``` "XFS Filesystem has duplicate UUID"， ``` 临时解决办法是，在 mount 命令中使用 nouuid 挂载选项， ``` # mount -o ro,nouuid /dev/nvme0n1p1 /mnt ``` 临时解决办法在你机器重启后将失效，持久的办法应该是使用 xfs_admin 命令行工具生成新的 UUID，然后将新的UUID配置到 /etc/fstab 中， ``` # xfs_admin -U generate /dev/nvme0n1p1 Clearing log and setting UUID...阅读全文
响到Ubuntu 17.10机器，并允许具有物理访问权限的攻击者通过拒绝服务（DoS攻击）来使系统崩溃。 最后，这个更新补充了Eric Biggers在Linux内核的密钥管理子系统中发现的一个安全漏洞，该漏洞无法正确地限制添加已经存在但没有实例化的密钥，这可能导致本地攻击者执行任意代码或者使易受攻击的系统崩溃。 Canonical敦促所有Ubuntu用户立即更新他们的系统到新的内核版本，即用于Ubuntu 17.10的linux-image 4.13.0.19.22，用于Ubuntu 17.10的Linux-image-raspi2 4.13.0.1008.6，用于Raspberry Pi 2，linux-image Ubuntu 17.04为4.10.0.42.46，Ubuntu...阅读全文
在Linux分发软件有两种形式，一种是源码，一种是安装包。当目标机器不带有编译环境，且不能联网时，安装包就是唯一的方案了。 Linux 下的安装包有多种格式，不同Linux使用的格式并不完全相同。市场上主流的安装包格式是*.deb *.rpm 其中deb是debian系列的安装包，rpm是CentOS系列的安装包。 本文主要介绍的是一种简单的deb安装包的制作方法，使用范围有限。如需了解更多可以阅读Debian 新维护人员手册 所需工具 如果没有安装dpkg工具包的话，就先安装(一般是默认安装的) sudo apt-get install dpkg 文件结构 example-package ├── DEBIAN （必须） │ ├── control （必须） │ └── md5sums...阅读全文
Debian 团队宣布 Debian 9 Stretch 在发布时将不太可能会支持 Secure Boot。Debian 9 的代码在今年 2 月冻结，之后开发者的精力转向解决 bug 等问题上。 UEFI Secure Boot 是微软在 Designed for Windows 8 认证时要求 OEM 的产品必须支持，它的设计目的是防止恶意程序潜入到引导进程，用户如果想要在机器上安装替代操作系统，那么该操作系统需要获得微软的有效签名。Debian 团队称，shim 得到了微软签名，但 dak 没有。 开发者表示，虽然 Stretch 在发布时可能不会支持 Secure Boot，但在 Stretch 生命周期内引入 Secure Boot 支持仍然是可能的。...阅读全文
2012 年宣布的 GNU Guix 包管理器项目正式释出了 1.0.0 版本。在过去七年中，260 名开发者递交了超过 4 万个 commits，此外还有文档、翻译、设计等方面的大量工作。 GNU Guix 是事务性包管理器，可以安装在 GNU/Linux 发行版上，也可以作为 i686、x86_64、ARMv7 和 AArch64 机器的独立操作系统发行版。 用户可使用 Guix 安装应用程序并保持程序在最新状态，软件开发者可以产生一次性的软件环境，系统管理员可以更容易的部署复杂服务。 感兴趣的用户可以使用虚拟机镜像体验 Guix。...阅读全文
国内腾讯云和阿里云的机器是没有ipv6的，但安装完 Debian 9 却发现默认启用了ipv6，所以需要将 IPv6 禁用，或者降低优先级。 方法一：降低 IPv6的优先级 使IPv4优先 默认的安装中，ipv4 和 ipv6 并存，并且 ipv6 却优先于 ipv4。如果不需要彻底关闭 ipv6，可以设置让 ipv4 优先于 ipv6。配置方式如下： echo "precedence ::ffff:0:0/96 100" >>/etc/gai.conf 当然也可以直接修改 /etc/gai.conf 文件，找到下面这一行 #precedence ::ffff:0:0/96 100 把前面的#去掉即可。 方法二：设置 GRUB 启动参数禁用 IPv6 编辑 /etc/default...阅读全文
Debian 使用的包管理器 apt/apt-get 曝出了一个远程代码执行漏洞，该漏洞允许网络中间人在正在安装任何包的机器上以 root 权限执行任意代码。最新版的 apt 已经修复了该漏洞，尚未安装最新更新或正在安装最新更新的用户可以通过暂时禁用 HTTP 重定向来防止中间人攻击。 Debian 紧急释出了 9.7 版本，修复该漏洞。将现有版本升级之此版本可以通过包管理系统指向 Debian 的 HTTP 镜像来实现。建议遵循 DSA-4371 中的说明。 镜像列表：https://www.debian.org/mirror/list Bug 修复 base-filesUpdate for the point release 安全更新 DSA-4371apt 完整的软件包更新列表...阅读全文
“spectre-meltdown-checker”命令，即可马上看到检查结果： 如果你的计算机很容易受到这三种投机行为攻击，请确保机器已装上最新可用的 Debian GNU/Linux 内核包、以及来自官方资源库的最新版软件。 当然，切记让你的 PC 时刻保持最新状态。...阅读全文
SK海力士日前宣布推出新一代企业级SSD硬盘，不过官方并没有公布SSD硬盘的名称，只知道是NVMe标准的，基于72层堆栈的3D TLC闪存，M.2版容量最大4TB，U.2容量可达8TB。 性能方面，SK海力士表示新一代企业级硬盘的连续速度可达3200MB/s，随机性能可达160K IOPS，与2018年FMS展会上推出的72层堆栈闪存硬盘相比，新一代企业级SSD的顺序读写性能提升30%，随机写入提升了70%，同时支持读取敏感型及混合型应用，包括数据中心、AI、ML机器学习及VDI虚拟桌面架构等。 值得一提的是，SK海力士的新一代企业级SSD具备极低的功耗，正常应用低于14W，这在企业级SSD中是很低的水平了。 此外，SK海力士还表示将在今年底推出容量更大的企业级SSD硬盘，闪存会从目前的...阅读全文
GitHub的高级技术副总裁Jason Warner在2018的技术趋势中挑出了数据、工作流集成（workflow integration）以及开源工具，他认为这些是一个公司在2018年能够取得成功的关键。 Warner写道，数据将成为2018年全球增长的最重要因素： 现如今，所有的公司都是数据公司，不论他们是否意识到这个情况。在2018年，只要团队知道如何使用数据，数据就会成为他们最大的资产。 数据的重要性日益增长，也标志着云服务平台从分布式云计算平台转型成为数据处理的云平台，其中还包括数据分析和机器学习。这将重点反映到三个关键领域： Warner说，许多重要的系统目前都很脆弱，尽管它们的规模越来越大。为了应对在2018年变得更加频繁的攻击，将会有更多的财力和开发资源分配到改进安全性上...阅读全文
访问：2021阿里云上云采购季：采购补贴、充值返券、爆款抢先购云通信分会场：爆款产品低至7.2折，短信低至0.034元/条 相比之下，ARMv9的升级看点就多了，过去10年计算架构有了太多变化，ARM处理器也不止是移动/嵌入式专用了，已经扩展到了PC、HPC高性能计算、深度学习等等新市场。ARMv9在兼容ARMv8的基础上，提升了安全性、增强了矢量计算、机器学习及数字信号处理，同时继续提升处理器性能。首先来说说性能上的变化，以智能手机等移动平台使用的Cortex-X/A系列为例，X1/A78这一代的性能相比16nm A72提升2.5倍，下一代的Matterhorn架构及Makalu架构会保持30%以上的IPC性能提升。IPC提升与频率无关，如果再考虑到未来工艺带来的频率增加，那么CPU性能...阅读全文
片的反应“令人愉快”，Norrod说。 这一代Naples仅面向单插槽以及双插槽市场。双插槽系统最多支持八个内存通道，适合数据库等对宽带有更高要求的内存应用程序。 Naples比同级别的英特尔芯片提供更多I/O和内存容量。这一特性将为机器学习带来方便，特别是在芯片与GPU等协处理器协同运行时。AMD希望将Zen芯片与即将推出的Vega GPU配对，打造专为机器学习而生的芯片组合。 芯片中连接两个插槽的高带宽架构独一无二，这使得它成为双插槽服务器的理想选择。 AMD已授权中国天津海光先进技术投资有限公司（简称THATIC)生产Zen芯片。 Naples芯片将同英特尔Skylake服务器芯片进行直接对决，目前谷歌云服务使用的便是Skylake。高性能应用是AMD的弱项，而英特尔一直在高性能计算领...阅读全文
为了保护数据不被泄漏，我们使用软件和硬件防火墙来限制外部未经授权的访问，但是数据泄露也可能发生在内部。 为了消除这种可能性，机构会限制和监测访问互联网，同时禁用 USB 存储设备。 在本教程中，我们将讨论三种不同的方法来禁用 Linux 机器上的 USB 存储设备。所有这三种方法都在 CentOS 6＆7 机器上通过测试。那么让我们一一讨论这三种方法。 方法 1：伪安装 在本方法中，我们往配置文件中添加一行 install usb-storage /bin/true， 这会让安装 usb-storage 模块的操作实际上变成运行 /bin/true， 这也是为什么这种方法叫做伪安装的原因。 具体来说就是，在文件夹 /etc/modprobe.d 中创建并打开一个名为...阅读全文
术的不需要考虑太多 :)。 支持安全启动 在 Buster RC1 中，Debian 现在支持 安全启动 secure-boot。这意味着打开了安全启动设置的机器应该能够轻松安装 Debian。不再需要禁止或者处理安全启动的事 🙂 Debian-Live 镜像的 Calameres Live-installer 对于 Debian Buster 的 Live 版，Debian 引入了 Calameres 安装器 来替代老的 Debian-installer。Debian-installer 比 Calameres 功能更多，但对于初学者，Calameres 相对于 Debian-installer 提供了另外一种全新的安装方式。安装过程的截图： 如图所见，在 Calamares 下安装...阅读全文
双监视器输出 vs 单 HDMI 输出USB 2.0 升级为 USB 3.0 端口如果说 35 美元仍然贵了些，那么还有更便宜的树莓派型号。比如 Raspberry Pi Zero 仅售 5 美元，而 Raspberry Pi Pico 微控制器板仅售 4 美元。 9.每年都有一场“树莓派争霸赛”▲ 用树莓派打造的智能车是的，你可以与其他的树莓派开发者同台竞技。“Pi Wars” 是一年一度的机器人竞赛，参赛者必须使用树莓派设备来制造机器人身上所有的装备。比赛内容包括各种挑战，例如导航障碍物路线，弹出气球和导航迷宫。比赛项目有人力遥控的机器人，也有全自动化的机器人挑战。今年的 Pi Wars 将于 2021 年 7 月举行。参考链接：https://www.tomshardware.com...阅读全文
，TokyoTyrant及Schooner Membrain等。RethinkDB为各种应用压力下提供高性能和高可靠性 支持，主要应用在下面一些场景： 用来处理一些其它方案无法解决的服务负载（如：要求快速的服务启动，在数据量超出内存大小后还要有高的性能，处理各种不稳定的读写压力，处理大量数据等） 提供性能与数据稳定性之间的精细调控 大大提高你的缓存层和key-value存储的性能，在你现有的硬件条件下，能支持更高的应用负载。 使用费用 RethinkDB目前提供两个版本的支持，一个免费版的，一个商用版的。商用版本的价格是每年每台机器$1500。免费版提供目前所有功能，提供后续所有安全相关的升级。但是新功能的升级只保证在付费版本中保持更新，另外商用版本还提供技术支持。...阅读全文
为普遍的方式，需要通过BIOS设置U盘启动来进入PE，适合2012以前的老机器。 特点： 1.启动稳定进入菜单 2.占用的空间小。 3.功能强大可靠，支持的主板比较多！ 假如不要求太高就是做个u盘保驾护航建议装机版。要是专业的维护人员，建议用双版合一的。也就是说有些U盘启动盘制作工具是装机版+uefi二合一的版本，当然占用的U盘空间也会大一些，适合比较专业的经常装电脑的朋友使用。...阅读全文
以删除图像标签，而无需删除基础清单和所有其他关联的图像标签。您还可以查看未加标签的图像，并可以选择将其排除在垃圾收集之外。” 此版本的一些主要功能包括有： 启用 Trivy 作为默认漏洞扫描程序Harbor 组件之间的 TLS 可实现更安全的组件内流量能够为核心 Harbor 服务配置 SSLWebhook 增强功能，例如与 Slack 的交互和多端点支持增强型机器人帐户改进的错误处理框架能够在 UI 中查看未标记的图像能够选择性地从图像中删除标签，而无需删除图像摘要或相关标签。 更多详细信息请查看 Harbor 2.0.0 的 Changelog。...阅读全文
统的实现，深度参与到社区的创新和实践。除标准组件外，此次openEuler社区还孵化了A-Tune和iSula两个开源子项目：A-Tune是智能性能优化系统软件，即通过机器学习引擎对业务应用建立精准模型,再根据业务负载智能匹配最佳操作系统配置参数组合，实现系统整体运行效率提升；iSula是一种云原生轻量级容器解决方案，可通过统一、灵活的架构满足ICT领域端、边、云场景的多种需求。 开发者可以通过访问如下链接，获得相关代码和文档，供参考学习、了解openEuler操作系统的架构和源代码， https://gitee.com/openeulerhttps://gitee.com/src-openeuler...阅读全文
，如渗透测试、安全研究、计算机取证和逆向工程。该发行版由 Offensive Security Ltd 维护和资助，拥有超过 600 个预装的渗透测试程序，包括 Armitage (一个图形化网络攻击管理工具）、Nmap (一个端口和服务扫描工具)、Wireshark、John the Ripper password cracker、Aircrack-ng、Burp Suite 和 OWASP ZAP（Web 应用安全扫描器）等等。 Debian 带来了超过 51000 个软件包（为了能在您的机器上轻松地安装，这些软件包都已经被编译包装为一种方便的格式），一个软件包管理器（APT），以及其他帮助您在上千台计算机上管理数千个软件包的工具，过程就如安装一个应用程序那么简单。而这些全都是自由软件。...阅读全文
SK海力士宣布，已经成功研发出新一代DRAM内存“HBM2E”，可视为HBM2的增强版，拥有业界最高的传输带宽，相比现在的HBM2提升了大约50％，同时容量也翻了一番。 SK海力士的HBM2E每个针脚传输速率为3.6Gbps，搭配1024-bit位宽的话可以提供超过460GB/s的超高带宽，无可比拟。 AMD Radeon VII显卡曾经率先实现1TB/s的显存带宽，但应用了4096-bit的位宽，如果换成HBM2E总带宽可以轻松超过1.8TB/s。 同时得益于TSV硅通孔技术，HBM2E内存可以最多垂直堆叠八颗16Gb芯片，单颗封装总容量因此可达16GB，是目前的两倍。 SK海力士表示，超高带宽的HBM2E可用于工业4.0、高端GPU显卡、超级计算机、机器学习、AI人工智能等各种尖端领域...阅读全文
Parrot 是一个基于 Debian 的 GNU/Linux 发行版，其设计上主要考虑安全性和隐私性。 Parrot 通常被用于渗透测试、计算机取证、反向工程、攻击、云计算渗透测试、隐私/匿名、密码等场合。它包含你在网上开发自己的软件或保护隐私所需的一切。 Parrot 4.5 正式发布，其主要变化在引擎层面。Parrot 4.5 放弃了对 32 为应用程序和架构的支持，不在为 i386 体系的机器提供任何更新。现在，32 位的计算机已不再能够运行完整的 Pentest 活动，也不能为我们的安全保护系统提供硬件加速支持。 Parrot 4.5 下一步是支持 OVA 格式的虚拟设备，这些虚拟设备支持倒入 VirtualBox、VMWare 和其他著名的虚拟化环境的程序文件。这些虚拟环境仍然...阅读全文
于更好的机器学习和数字信号处理。在安全方面，armv9 会获得 Arm Confidential Compute Architecture (CCA)，在使用时屏蔽数据的访问，在硬件层面保护数据。此外，还会有一个叫做 Realms 的东西，应用程序可以在安全和非安全区域之外使用。ARM 并没有透露首款基于 armv9 的新芯片何时会发布，不过可以肯定的是还需要再等待一段时间。...阅读全文
动态主机配置协议（DHCP）是一种用于使主机能够从服务器自动分配 IP 地址和相关的网络配置的网络协议。DHCP 服务器分配给 DHCP 客户端的 IP 地址处于“租用”状态，租用时间通常取决于客户端计算机要求连接的时间或 DHCP 服务器配置的时间。 DHCP 如何工作？ 以下是 DHCP 实际工作原理的简要说明： 一旦客户端（配置为使用 DHCP 的机器）连接到网络后，它会向 DHCP 服务器发送DHCPDISCOVER数据包。 当 DHCP 服务器收到DHCPDISCOVER请求报文后会使用DHCPOFFER包进行回复。 然后客户端获取到DHCPOFFER数据包，并向服务器发送一个DHCPREQUEST包，表示它已准备好接收DHCPOFFER包中提供的网络配置信息。 最后，DHCP...阅读全文
1. HDFS概述 Hadoop 分布式系统框架中，首要的基础功能就是文件系统，在 Hadoop 中使用 FileSystem 这个抽象类来表示我们的文件系统，这个抽象类下面有很多子实现类，究竟使用哪一种，需要看我们具体的实现类，在我们实际工作中，用到的最多的就是HDFS(分布式文件系统)以及LocalFileSystem(本地文件系统)了。 在现代的企业环境中，单机容量往往无法存储大量数据，需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统。 HDFS（Hadoop Distributed File System）是 Hadoop 项目的一个子项目。是 Hadoop 的核心组件之一， Hadoop 非常适于存储大型数据 (比如 TB 和 PB)，其就是使用 HDFS 作为存...阅读全文
2018 年伊始，Wine（Wine Is Not an Emulator） 项目发布了年度更新，释出了最新的 3.0 稳定版本。 Wine 是一个在 Linux 和 Unix 类操作系统上运行 Windows 应用及游戏的开源兼容层。 经过近一年的开发，Wine 3.0 发布了许多神奇的功能，如 Android 图形驱动可以使用户在基于 Android 的机器上运行 Windows 应用和游戏，对 AMD Radeon 和 Intel GPU 默认启用 Direct3D 11 支持，在 macOS 上支持 AES 加密支持，程序管理器的 DDE 支持以及任务调度器。 此外，Wine 3.0 通过 reg.exe 引入了输出注册表项的功能，对中继调试和 OLE 数据缓存增加了各种增强，以及...阅读全文
(Jeremy King)上周日在纽约参加美国全国零售联合会大会时表示，公司一直在大力投资技术以改善供应链、电商以及物流服务。沃尔玛还将在今年增大投入，扩大机器人在仓库和门店的使用等。 他表示，沃尔玛在2018年扩大了技术团队，增加了大约1700名技术人员，并预计还会在今年增加2000名技术人员。 拉特斯曼表示，亚马逊不断扩大的云服务需要越来越多的计算机服务器。亚马逊在公用云服务市场占据领先，谷歌和微软公司正在努力追赶。“他们投入巨资在全世界建立计算平台，”他表示。 银行也是大型IT支出机构，其中包括摩根大通、美国银行以及富国银行。拉斯特曼认为，网络安全和数字银行工具是银行最明显的投资领域。...阅读全文
项目使电信运营商可以轻松地在难以到达的区域部署移动网络，从而降低了建设和维护电信网络的成本。Facebook 的 “Data for Good” 计划用于共享地理数据，以解决一些世界范围内的人道主义问题，包括在 COVID-19 疫情期间发挥作用。创建并维护 PyTorch 开源生态系统，为在计算机视觉、自然语言处理和其他学科中利用人工智能和机器学习贡献了很大一份力量；React.js 也由 Facebook 创建，它为世界上一些最受欢迎的网站提供支持，并且由于其简单性和灵活性而成为前端 Web 开发标准。 Linux 基金会会员分为银级、金级和白金级三种不同等级，白金级即最高等级，每年需缴纳会费 50 万美元，同时拥有董事会席位。AT&T、谷歌、华为、IBM、英特尔、微软、Oracle、腾...阅读全文
理音视频材料，包括通过机器学习 物联网（例如 IoT 传感器维持长期连接并寻求最小功耗） WebRTC 工作组正对现有及新的用例进行迭代，重点理解全部需求及其优先级。W3C 近期开始的 WebTransport 和 Web Codecs 工作预计将低延迟流媒体的优势引入更广大的媒体和娱乐生态系统。 WebRTC 成为 W3C 为应用程序开发定义开放 Web 平台的众多标准之一，具有前所未有的潜力。其让开发人员能够构建丰富的交互体验，由巨大的数据存储提供动力，可用于任何设备以及环境。 WebRTC 标准文档：https://www.w3.org/TR/webrtc/...阅读全文
针对性地使用Btrfs的一些特性来提高我们手头工作的性能。我们比较关注在系统任务管理、快照之类的事情上。 Linux.com：我们都知道Facebook是Linux的重度用户。在Facebook庞大的基础设施里，哪些地方用到了Linux？ Chris Mason：简单地说，Facebook所有的基础设施都使用了Linux。围绕分布式操作系统我们利用了Btrfs的很多特性，比如分布式任务管理、利用快照功能快速更新以及哈希校验功能，等等。 我们在相当数量的机器上运行着Gluster——既支持XFS也支持Btrfs，我们的目标就是做好存储这件事。在Gluster上喜欢用Btrfs的其中一个原因是，数据循环冗余校验（cyclic redundancy checks）和元数据循环冗余校验使我们能够检测...阅读全文
。 关于 Kotlin/Native 说了这么多，Kotlin/Native 到底是什么？Kotlin/Native 能将 Kotlin 编译成机器码，目前还处于技术预览版阶段，离商用估计还需要至少一年的时间。 Kotlin/Native 不是 Jni 的概念，它不仅仅是要与底层代码比如 C、C++ 交互，而且还要绕过 JVM 直接编译成机器码供系统运行。这说明了什么？Kotlin 准备扔掉 Java 这根拐杖了。 第一次看到 Native 这个名字或许会很自然地想到 Jni，Kotlin 跑在 JVM 上面，使用 Jni 与底层代码交互。不过详细深入研究后可以发现，Kotlin 开发团队的野心不可小觑，Java 诞生这么多年，也没有涉足过编译成除 Java 虚拟机字节码以外的字节码的事情...阅读全文
近日，一位安全研究员在博客上表示发现了本田公司的云端数据库未设密码，这可能导致 1.34 亿份文档，约 40GB 数据被泄漏，其中包括机器主机名、MAC 地址、内部 IP 及操作系统版本等。在收到该研究员的提醒后，本田方面已对漏洞进行修复。 本田 1.34 亿份文档，40GB 数据险遭泄漏 根据安全研究员 Justin Paine 的说法，自 2019 年 7 月 1 日起，他就发现了本田对外暴露的 ElasticSearch 数据库未设置任何密码，内部包含大约 1.34 亿份文档，这些文档可以转换为大约 40GB 数据，而这些数据的日期最早可以追溯至 2019 年 3 月左右。 最初，Justin Paine 以为这些数据来自本田的一家经销商，但他很快否定了这一想法，因为这些文档包含了本...阅读全文
受限于机器总线的数量，在32位机器上，有32条总线，每条总线有高低两种电位分别代表 bit 的 1 和 0，那么可访问的最大地址就是 2^32bit = 4GB，所以说 32 位机器上插入大于 4G 的内存是无效的，CPU 访问不到多于 4G 的内存。 但 64位机器并没有 64位总线，而且其最大内存还要受限于操作系统，Linux 目前支持最大 256G 内存。 根据虚拟内存的概念，在 32 位系统上运行 64 位软件也并无不可，但由于系统对虚拟内存地址的结构设计，64位的虚拟地址在32位系统内并不能使用。 直接操作物理内存 操作系统使用了虚拟内存，我们想要直接操作内存该怎么办呢？ Linux 会将各个设备都映射到 /dev/ 目录下的文件，我们可以通过这些设备文件直接操作硬件，内存也不例外...阅读全文
，包括大型软件工程项目的工作原理，而且我也明白自己多么地喜欢我的计算机系统。我非常清楚这些日子以来的闲暇时间我是如何度过的。 我会在以下各小节中逐一介绍我所面临的主要困难，讨论顺序不分先后。其中有些困难有一些相互影响——例如，如果改动后的效果更好，那么我们就有机会将包转换成更方便的机器读取。 Debian的变更流程 最近几年，我目前的团队在整个代码库中进行了各种大大小小的重构（涉及数千个项目），因此在关于如何有效地进行这些变更方面，我们学到了很多宝贵的经验。令我苦恼的是，Debian在各方面的工作方式几乎完全相反。我理解每个组织都不同，但我认为我的很多观点确实适用于Debian。 在Debian中，包的推送必须严格遵守一个文档——叫做Debian策略，还有个程序lintian用来保证该策略的实...阅读全文
来源｜Greylock OneFlow社区编译 翻译｜胡燕君、贾川 预告了一整年的GPT-4迟迟没来，人们猜想OpenAI是不是要跳票了，更何况他们之前的得意之作DALL-E也被开源Stable Diffusion打了个措手不及，再不来点深水炸弹业界地位危矣。 不过，就在大家以为今年OpenAI将以沉寂收场时，聊天机器人模型ChatGPT横空出世，让人们看到了AI的更大创造力，聚光灯也再度打到了OpenAI的身上。 今年9月，LinkedIn联合创始人Reid Hoffman与OpenAI首席执行官Sam Altman进行了一场对话，而肩负着宏伟使命且极富远见的Altman就曾预言：AI即将迎来下一个发展阶段。如今，大型语言模型越来越先进，也出现了可以实现文本-图像相互转换的多模态模型，一...阅读全文
阅读行为放在编写之上 。Go 通过工具和自定义来强制所有代码格式化成特定的样式。这消除了学习项目特定语言的方言时的困难，并有助于发现错误，因为它们 看上去 就是不正确。 由于专注于分析和机器辅助，Go 开发人员开始采用越来越多的工具来发现常见的编码错误，这种工具从来没有在 C 语言开发者中产生共鸣 – Go 开发人员 希望 工具帮助他们保持代码清洁。 并发性 十多年来，芯片设计师一直在警告 免费午餐将会结束 。从最低端的手机到最耗电的服务器，硬件的并行性以 更多、更慢、堆砌 cpu 内核 的形式出现，但只有 当 你的语言可以利用它们才有意义。因此，并发特性需要内置到我们编写的要在今天的硬件上运行的软件中。 通过提供一种基于协程的 轻量级并发模型 ，或者是 Go 中已知的 goroutines...阅读全文
使崩溃内核和 initramfs 尽早加载，以便它可以捕获 vmcore 信息，包括早期内核崩溃。 容器与虚拟化 新的容器工具：Podman、Buildah 与 skopeo 现在在 Oracle Linux 8 上可用：Podman：Podman 是 Libpod 的一部分，它的定义可以简单用这个命令表示：`alias docker=podman`。Buildah：Buildah 是一个用于构建 OCI（Open Container Initiative）镜像的工具。skopeo：skopeo 是一个命令行工具，用于对容器镜像和镜像库执行各种操作，支持使用 OCI 镜像与原始的 Docker v2 镜像。Q35 机型是一种更现代的 PCI Express-based 机器类型，现在可用于...阅读全文
工作负载。 测试环境以及测试机器配置： 首先通过使用 Java 2D 基准测试对 Java 图形管道的性能进行压测，可以看到文本渲染性能一直稳步提升，直到第 12 版达到最高点，然后逐渐下降为目前 13 和 14 的水平，与 OpenJDK 8 比较相似。 而在 Java 2D 的图像渲染性能方面，它们的水平基本保持一致，但是 OpenJDK 14 以微弱的的性能优势成为了最好性能的那个。 这里还测试了使用矢量图形的渲染效果，水平基本保持一致。 通过进行非常基本的 Java SciMark 微基准测试，可以看到 OpenJDK 8 目前为止是最快的，并且自 OpenJDK 9 至 14 以来，性能基本上持平。OpenJDK 的运行速度约为 OpenJDK 8 的 88％。 通过使用 Java...阅读全文
文件的默认值32768，与早期内核的PID范围相同。 在32位系统中，32768是pid_max的最大值。64位系统，pid_max最大可达2^22。（PID_MAX_LIMIT，约4亿）。 到达极限的情况： 1、当 PID 达到上限后，内核会从 0 重新开始寻找可用的 PID 并分配。 2、而所有 PID 均已被占用的话，则将抛出 fork failed: Resource temporarily unavailable 提问者所说的最大值应该只是发行版设置（ CentOS 8.0 64 位上为 400w 左右）。通过上述Linux手册中的说明，我们也可以通过修改 /proc/sys/kernel/pid_max 的值来调整 pid 取值范围。 在 Debian 10 的机器上，这个文件的...阅读全文
-go/blob/master/question/q003.md) - [判断两个给定的字符串排序后是否一致](https://github.com/lifei6671/interview-go/blob/master/question/q004.md) - [字符串替换问题](https://github.com/lifei6671/interview-go/blob/master/question/q005.md) - [机器人坐标计算](https://github.com/lifei6671/interview-go/blob/master/question/q006.md) - [语法题目一](https://github.com/lifei6671/interview-go...阅读全文
可能有问题。自go 1.6之后， 并发地读写map会报错，这在一些知名的开源库中都存在这个问题，所以go 1.9之前的解决方案是额外绑定一个锁，封装成一个新的struct或者单独使用锁都可以。 群众的呼声是响亮的，并发map在项目中大量使用，所以Go 1.9中在包sync加入了新的map， 查询、存储和删除都是平均常数时间，可以并发访问。 Monotonic Time 先前的time包的实现都是基于wall time的，但是当机器的时钟调整后会有问题。 比如在计算duration的时候，如果时钟往回拨，可能导致end时间比start时间还早。 所以Go 1.9使用monotonic Time来实现大部分的time中的函数，在计算duration的时候不会出现因为时钟调整出现的误差了。 设计文...阅读全文
frp是一个使用go语言开发的反向代理服务，可用于内网穿透，支持tcp, udp协议，为http和https协议提供了额外的能力，且尝试性支持了点对点穿透。 由于ngrok 2.x已经闭源，ngrok 1.x已不再维护，所以这里尝试使用frp替代ngrok作为个人的内网穿透工具。 0.前提条件 一台Linux云主机(这里是CentOS 7），并要求具有固定公网IP暴露这台云主机指定端口的能力 有一个域名解析到这个公网IP，如frp.frognew.com和*.frp.frognew.com解析到这个公网IP 1. 下载frp服务端frps和客户端frpc可执行文件 分别在服务器和个人本地机器上，从[https://github.com/fatedier/frp/releases]下载对应平...阅读全文
source /etc/profile Hadoop文件配置 配置文件都在etc/hadoop/文件夹下 1. hadoop-env.sh # jdk环境变量 （因为要远程调用 ${java_home}找不到变量） export JAVA_HOME=/usr/lib/jvm/jdk 2. workers # 添加所有slave机器的hostname slave1 slave2 slave3 3. core-site.xml