文章 链接到标题 技术 链接到标题 S3 Express is All You Need - WarpStream
[[AWS]] [[S3 Express]] 发布,每 GB 的存储成本比 S3 标准高 8 倍。超过 512KB 的每个 API 操作(写入/读取)按 GB 收费。对于大容量场景,S3 Express 不会带来显著的成本或性能改进,但是从软件设计上,可以完全围绕对象存储来构建,比在应用程序层手动复制数据更便宜、更耐用并且更不容易出错。
[[baotiao]] 前两天发布的推特也是类似的观点:
我觉得学术界和工业界还是有点脱钩, 还在研究一些在 数据库在 modern hardware 上的优化, 我理解以后的数据库大部分应该是针对云上的硬件进行优化了, 包括 VM, essd 等等
Rust std fs 比 Python 慢!真的吗!?
从最初的用户上报,到一点点的复现问题,进行各种尝试,包括不限于:更换内存分配器、调整 mitigations、调整透明大页、调整 NUMA等等。最终确定是与 FSRM 相关。社区力量大啊。
如何发现 offset 的差异:
两个相同的系统调用不可能有不同的时间,在排除了 length 参数差异之后,找到了 -e raw=read 参数,发现了 offset 差异。
FSRM,即 Fast Short REP MOV,是英特尔最初的创新,近期也被AMD采纳,用以提升 rep movsb 和 rep movsd 的速度。它旨在提高大量内存复制的效率。声明支持它的CPU将在 glibc 中默认使用 FSRM。