专项资金的管理涉及多个环节，其中包括资金的拨付和回收。财政部门需要对专项资金的用款计划进行严格的审核。如果用款计划符合相关规定，财政部门应当在规定的时间内及时拨付专项资金。如果用款计划不符合规定，财政部门则需向申请单位书面说明原因，并要求申请单位重新编制用款计划。

在实际操作中，如果当年的专项资金没有完全使用，财政部门是否可以收回这部分资金取决于剩余金额的大小。当剩余金额较小，财政部门通常会暂时留存这部分资金。然而，如果剩余金额较大，财政部门则拥有收回该部分资金的权利，以确保资金使用的效率和合理性。

资金的回收不仅有助于财政部门更好地管理资金，也有助于提高资金使用的透明度和效率。通过及时审核和管理，财政部门可以确保资金被合理使用，避免资金闲置或浪费，从而实现财政资金的最大化效益。

因此，对于专项资金的管理，财政部门应当建立完善的审核和管理机制，确保每一笔资金都能得到合理使用。同时，申请单位也应当积极配合财政部门的工作，确保用款计划的准确性和合理性，以提高专项资金的使用效益。

此外，对于资金回收的具体操作，财政部门可以根据实际情况制定相应的回收流程和标准，确保操作的规范性和透明度。这样不仅可以减少资金的浪费，还可以提高财政资金的使用效率，为社会经济发展提供有力支持。