刚剥的橙子皮确实可以用来泡水，但这需要一些注意事项。首先，橙子皮上可能残留有农药或果蜡，因此在使用前最好将其彻底清洗干净。其次，为了避免橙子皮的苦涩味道，建议将皮切成细丝或小块，然后用温水浸泡一段时间，这样有助于提取出橙子皮的香气和味道。另外，你也可以选择将橙子皮晾干后再泡水，这样橙皮的味道会更加浓郁。不过需要注意的是，橙子皮泡水后的口感和味道可能会因人而异，有些人可能不太适应其味道，所以可以先尝试喝一小口，看看是否适合自己的口味。

总的来说，刚剥的橙子皮可以用来泡水，但需要注意清洗和浸泡的时间，以及个人口味的适应性。如果你喜欢尝试不同的饮品，不妨尝试一下用橙子皮泡水，或许会给你带来意想不到的口感体验。