我的电脑上写的输入20v 3.5/4.5A，但是我的电源适配器是OUTPUT是20V 4.5A的行不行？

没问题的。只要电源适配器的输出电压与电脑匹配，且电流能力大于等于电脑的需要电流，就可以正常运行的。
但是你要注意插头是否一致，有些插头是外正内负，有些是外负内正，这个必须一致。