USDB

USDB е специализирана разпределена база данни, създадена от изследователския екип на ByteDance за преодоляване на ограниченията в пропускателната способност при препоръчителни модели с милиарди параметри.

Технически характеристики

• Оптимизация за разредени матрици: Ефективно индексиране и кеширане на разредени вектори (sparse embeddings).
• Хибридно ниво на съхранение: Безшевно разпределение на данните между HBM, DRAM и ултрабързи NVMe дискове.
• Суперскаларна паралелност: Поддръжка на милиони едновременни четения с гарантирана закъснение под една милисекунда.