法律主观：
不可以不退赃款只交罚金，罚金是向国家缴纳的金钱的刑罚方法，而赃款是需要直接还给被害人或者上缴司法机关的，两者互不冲突。退赃是一定需要执行的，但是罚金是对违法者的刑罚，具体判不判并处罚金，或者罚多少都是由法律决定的。退赃与罚金不是选择关系，罚金都是上缴国库，不能被挪用或者私用。 法律依据： 《中华人民共和国刑法》第六十四条 【犯罪物品的处理】犯罪分子违法所得的一切财物，应当予以追缴或者责令退赔;对被害人的合法财产，应当及时返还;违禁品和供犯罪所用的本人财物，应当予以没收。没收的财物和罚金，一律上缴国库，不得挪用和自行处理。
法律客观：
《中华人民共和国刑法》第五十三条 罚金在判决指定的期限内一次或者分期缴纳。期满不缴纳的，强制缴纳。对于不能全部缴纳罚金的，人民在任何时候发现被执行人有可以执行的财产，应当随时追缴。 由于遭遇不能抗拒的灾祸等原因缴纳确实有困难的，经人民裁定，可以延期缴纳、酌情减少或者免除。
