摘要：該文研究macro-femto異構蜂窩網絡中移動用戶的功率控制問題,首先建立了以最小接收信號信干噪比為約束條件,最大化毫微微小區的總能效為目標的優化模型;然后提出了基于Q-Learning算法的毫微微小區集中式功率控制(PCQL)算法,該算法基于強化學習,能在沒有準確信道狀態信息的情況下,實現對小區內所有用戶終端的發射功率統一調整。仿真結果表明該算法能實現對用戶終端的功率有效控制,提升系統能效。