如果孕妇在怀孕初期吃了冰棒肚子不舒服时，当症状较轻，只是轻微的肚子痛或不适，可以先观察一下情况，看看是否会自行缓解。如果症状较重，如剧烈腹痛、呕吐、腹泻等，应及时就医。建议孕妇避免食用过多的冰冷食物，如冰棒、冷饮等，以免刺激肠胃，导致不适。同时，孕妇需要注意饮食的卫生和营养，多吃易消化的食物，可以多吃一些新鲜的水果以及蔬菜，少吃辛辣刺激性的食物，避免暴饮暴食。

怀孕初期孕妇需要充分的休息和睡眠，避免过度劳累和精神紧张，可以适当进行轻度的运动，如散步、瑜伽等，以增强体质和缓解不适。如果症状持续或加重，应及时就医进行检查，排除宫外孕、流产等风险。同时，建议孕妇需要定期进行产前检查，以确保胎儿的健康发育。