← 返回蜂巢洞察

文章标签

s3

浏览带有「s3」标签的蜂巢洞察文章。

文章列表

按更新时间排序

3 篇
技术实践

光标技术利用S3 WAL机制，使Git存储系统的处理能力提升到每秒可接收超过300次推送请求。

Cursor推出了名为“Continuity”的Git存储架构，该架构以基于S3技术的预写日志作为数据存储的权威来源。这种设计将本地的NVMe仓库转换为缓存系统，并将副本协调机制与数据一致性保障机制分开处理。在模拟测试中，使用S3 Express One Zone时，Cursor能够实现线性扩展——当副本数量达到100个时，每秒仍可完成超过300次数据推送操作。 作者：Leela Kumili

副本 s3 leela
技术实践

演示主题：如何通过一份数据同时完成从S3存储系统到GPU的计算任务——重新思考用于机器学习训练的数据加载方式

Onur Satici详细解释了如何利用Vortex这一由Linux基金会推出的开源列式文件格式来彻底改变高吞吐量数据加载的方式。他说明了如何通过层叠式的轻量级编码技术、基于文件结构的数据分段优化机制以及零拷贝内存传输技术，消除CPU与NVMe之间的性能瓶颈，从而让S3存储中的数据能够以高达60 Gbps的速度直接传输到GPU上，而无需在进行任何预处理操作。 作者：Onur Satici

s3 onur 利用