解除取保候审、变更强制措施或者执行刑罚的同时，县级以上执行机关应当制作《退还保证金决定书》，通知银行如数退还保证金，并书面通知决定机关。执行机关应当及时向被取保候审人宣布退还保证金的决定，并书面通知其到银行领取退还的保证金。

《刑事诉讼法》第七十三条

犯罪嫌疑人、被告人在取保候审期间未违反本法第七十一条规定的，取保候审结束的时候，凭解除取保候审的通知或者有关法律文书到银行领取退还的保证金。

根据《最高人民检察院公安部国家安全部关于取保候审若干问题的规定》二十一条的规定，被取保候审人在取保候审期间没有违反刑事诉讼法第七十一条的规定，也没有故意重新犯罪的，在解除取保候审、变更强制措施或者执行刑罚的同时，县级以上执行机关应当制作《退还保证金决定书》，通知银行如数退还保证金，并书面通知决定机关。执行机关应当及时向被取保候审人宣布退还保证金的决定，并书面通知其到银行领取退还的保证金。