Като отиде на другата страница така и така ще изчезне, но примерно нещо такова:
<button id='btn1' onclick='btn1click()'>click me</input>
function btn1click() {
document.getElementById('btn1').style.display="none";
document.location.href='newpage.html';
}