更换小天鹅浴霸灯需要以下步骤：
1. 关闭电源：在更换浴霸灯之前，务必关闭电源，以避免触电事故。
2. 拆卸浴霸灯罩：通常，浴霸灯罩是通过螺丝或卡扣固定在浴霸上的。使用螺丝刀或扳手等工具，将灯罩上的螺丝拧松或卡扣打开，然后轻轻取下灯罩。
3. 取出旧灯泡：在灯罩内部，可以看到浴霸灯泡。通常，灯泡是通过旋转或插拔的方式固定在灯座上的。根据灯泡的类型，选择合适的方法将其取出。
4. 安装新灯泡：将新的浴霸灯泡插入灯座中，并确保灯泡安装牢固。如果是旋转式灯泡，将其顺时针旋转到底；如果是插拔式灯泡，将其插入灯座中并确保接触良好。
5. 安装浴霸灯罩：将灯罩对准浴霸，然后将螺丝拧紧或卡扣固定，确保灯罩安装牢固。
6. 打开电源：在完成灯泡更换后，打开电源，检查浴霸灯是否正常工作。

需要注意的是，在更换浴霸灯泡时，应该选择与原灯泡相同规格和型号的灯泡，以确保其兼容性和安全性。如果不确定如何更换浴霸灯泡，建议咨询专业的电工或售后服务人员。同时，在使用浴霸时，也应该注意安全，避免触电和烫伤等事故的发生。