得去。因为派出所是你的户口所在地，也是户口本办理的地方，户口本退的话需要去派出所进行存档，办理相关手续。