一般情况下，新的玻璃杯不需要用开水烫。这是因为现代玻璃杯通常经过高温处理和消毒，具有较好的耐热性和抗菌性能，可以直接使用。但是，为了保险起见，建议在使用前先用清水冲洗一遍，以确保杯子表面没有残留的灰尘和杂质。

如果您购买的是手工制作的玻璃杯或者是没有经过高温处理的玻璃杯，那么建议先用温水浸泡一段时间，再用开水烫一遍，以消除可能存在的细菌和杂质。

需要注意的是，不要将冷玻璃杯直接放入开水中，避免温度变化过快导致玻璃杯破裂。最好是先用温水预热一下玻璃杯，再慢慢加入开水。同时，也不要将热玻璃杯直接放入冷水中，避免热胀冷缩导致玻璃杯破裂。