马氏决策规划是在赋值马氏过程中，如果在某状态选用不同的决策能够改变相应的状态转移矩阵及报酬矩阵所产生的动态随机系统求最优策略的问题的解决方法。根据报酬函数和目标函数的不同，建立了不同类型的优化模型，如有限阶段模型、折扣模型、平均模型和无界报酬模型等。排队规则是顾客到达时，若所有服务台都正在被占用，则顾客可以随即离去，也可以排队等候的规则。随即离去的称为损失制或即时制；排队等候的称为等待制。对于等待制，为顾客服务的次序可以采用先到先服务、后到先服务，随机服务，有优先权的服务等规则。队列可以排在具体的处所，也可以是抽象的。有的系统规定容量有限，有的系统规定容量无限。队列的数目可以是单列，也可以是多列。在多列中，各列间的顾客有的可以互相转移，有的不能;有的可以中途退出，有的不能。