いいえ、できません。
取付の際、取り付け用スピーカープレート側のみ脱着可能です。