孕晚期宫缩频繁，需要去医院吗？

我现在孕37周+4天，最近宫缩特别频繁。今天早上起床后就感觉肚子一直发紧发硬，还伴随着轻微的姨妈痛。下午睡醒后症状不但没缓解，反而更明显了，肚子时不时就硬得像石头一样。最让我担心的是，之前宫缩都只在晚上出现，现在白天也开始了。

更奇怪的是，我下面还有灼痛感，但暂时没有见红或破水。这种情况需要马上去医院吗？还是再观察看看？我头胎是40周+2天生的，这胎突然提前这么多天，让我有点措手不及。