一种在CTyunOS中提升Hadoop数据吞吐量的动态资源调度方法

AITNT
正文
推荐专利
一种在CTyunOS中提升Hadoop数据吞吐量的动态资源调度方法
申请号:CN202411961679
申请日期:2024-12-30
公开号:CN119781935A
公开日期:2025-04-08
类型:发明专利
摘要
本发明的目的是提供一种在CTyunOS中提升Hadoop数据吞吐量的动态资源调度方法,该方法包括:将Hadoop与CTyunOS对接;对负载进行预测;采用Hadoop任务调度逻辑与CTyunOS底层资源调度机制根据预测的负载结果进行动态资源调度。本发明通过利用CTyunOS的内核级资源调度能力,开发一种动态资源调度机制,实现资源调度的动态化,能够实时响应资源需求变化,提高资源利用率,增强Hadoop任务调度逻辑与CTyunOS底层资源调度机制的交互,充分利用系统提供的优化特性。减少高延迟和提高数据吞吐量,尤其是在高并发环境下,通过优化节点间负载分布和改进数据传输效率来提升系统整体性能。
技术关键词
动态资源调度方法 数据吞吐量 任务调度 节点 分布式缓存系统 时间序列数据库 副本 网络命名空间 IO吞吐量 虚拟化管理 令牌桶算法 容器 快照功能 逻辑 迁移技术 重试机制 平滑算法
系统为您推荐了相关专利信息
1
刚性航天器的姿态控制方法、系统、装置及介质
刚性航天器 模糊滑模控制器 闭环控制系统 模糊规则 传感器节点
2
基于行为体行为特征相似性的多智能体强化学习协作方法
全局状态信息 协作方法 模块 决策 编码器架构
3
数据库构建方法及装置、计算机程序产品和电子设备
数据库构建方法 分子 关系 实体 计算机程序产品
4
一种元宇宙区块链信息共享方法
信息共享方法 信息共享技术 区块链系统 分布式密钥 信标协议
5
一种基于多模态生理数据与AI的自伤行为预警与干预方法及系统
多模态生理 干预方法 接触式传感器 深度学习模型 动态时间规整算法
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号