ch573配置GPIO唤醒，功耗能降下去但响应不及时如何解决？

如下图  
我在这里 配置GPIO [PB-22 作为按键]唤醒，  功耗就会增加 2.5mA ， 猜测应该是使能了 GPIO的时钟  ，
如果用扫描的方式  100us 也会增加很多(约100-200uA)   时钟再长，功耗能 降下去，但响应不及时

这个如何解决？