原則上是不允許任意拆除的，因為窗臺屬于承重結構的范圍，對陽臺板起到配重作用。如果是年代比較久的老房子，由于跟現在建造有點區別，但是只要是承重墻的都不能隨便拆，如果就拆窗戶那一點點影響應該不大。但是承重墻隨意拆除過多會影響房屋整體平衡，尤其是低樓層，嚴重的話會引起樓層倒塌等危險。

總的來說，為了安全起見，建議盡量不拆老房子陽臺的窗臺。如果必須進行拆改，建議咨詢專業人員或物業公司，了解相關法律法規和安全注意事項，以確保拆改過程的安全性和合法性。