火山引擎存储&数据库高级解决方案架构师张朝阳进行了题为《超大规模云原生对象存储 TOS 架构与实践》的分享。他从对象存储的发展及挑战、TOS云原生技术架构、字节内部应用实践、火山引擎TOS全景解决方案四个方面进行了分享。
他表示,目前对象存储主要面临4个方面的挑战:弹性能力、上传时延、新型工作负载、规模化。但在字节内部,得益于云原生技术架构,这些问题基本得到了解决,并在持续优化中。
字节跳动的对象存储TOS在组件构成上主要包括API服务、元数据服务、全局缓存、数据持久化服务、管理调度及运维监控服务等,具有云原生化部署、灵活异构体系、多重可靠性机制、精细化运营运维等特点。更多阅读:火山引擎弹性计算云上实践
在应用实践上,通过结合字节跳动内部的视频业务及协同办公场景,重点介绍了TOS在应对超大规模部署、超大吞吐考验、超高可用设计、智能运营运维等方面的实践经验。
火山引擎TOS全景解决方案则包括:
- 数据上云及分发场景中,用户可组合使用存储迁移服务DMS、内容分发网络CDN;
- 视频场景中,用户可基于TOS组合使用丰富的视频中台产品能力;
- 机器学习场景中,用户可组合使用机器学习平台以及文件存储NAS、并行文件系统vePFS;
- 大数据与数据湖场景,用户可组合使用大数据统一存储、数据湖构建、湖仓一体分析等服务。
更多阅读: