摘要
集中化,合并任务的处理是分布式设计中的一个难点。由于不同任务中需要频繁的数据交换,且需对不同任务的结果进行合并,使其难以使用目前主流的分布式设计模型。分布式管道设计模式是一种高度解耦合的分布式设计模型,适合处理业务粒度较大,数据交换频发,IO瓶颈较高的任务。文章在分布式管道设计模式的基础上,参考服务发现机制实现了一个高性能的管道服务框架。
Centralization and combined task processing is a difficulty in distributed design.Due to there are frequent data exchanges in different tasks and the results of different tasks need to be merged,it is difficult to use the current mainstream distributed design model.Distributed pipeline design pattern is a high decoupling distributed design model,which is suitable for the tasks with large business granularity,frequent data exchange and high IO bottleneck.Based on the distributed pipeline design pattern,this paper implements a high performance pipeline service framework with the reference of service discovery mechanism.
作者
戴振邦
江恩杰
刘力嘉
甘江伟
DAI Zhenbang;JIANG Enjie;LIU Lijia;GAN Jiangwei(School of Chemical Engineering,Northwest Minzu University,Lanzhou 730124,China;Information Engineering Department,Chengyi University College,Jimei University,Xiamen 361021,China;College of Physics and Electronic Information Engineering,Minjiang University,Fuzhou 350108,China)
出处
《现代信息科技》
2021年第7期44-49,53,共7页
Modern Information Technology
基金
大学生创新创业训练计划项目(省级)(202013471013)。
关键词
分布式
服务发现
动态负载均衡
管道任务
高解耦
distributed
service discovery
dynamic load balancing
pipeline task
high decoupling
作者简介
戴振邦(2000-),男,汉族,福建莆田人,本科在读,研究方向:分布式、数据挖掘、集群计算;江恩杰(2000-),男,汉族,福建漳州人,本科在读,研究方向:人工智能、模式识别、云服务;刘力嘉:(2000-),男,汉族,福建漳州人,本科在读,研究方向:虚拟化;甘江伟(2000-),男,汉族,福建永安人,本科在读,研究方向:微电子。
