Територія, де зараз знаходяться стадіон та парк 1-го Травня, у ХІХ ст. була відведена для маневрів та огляду військ. Тут були побудовані казарми і конюшні, знаходився іподром.
В 1920 — 1930 рр. на цьому місці була центральна площа міста під назвою «Дворцова». В ті часи на цій території не було жодного дерева.
В 1924 році в центрі цієї міської площі був встановлений пам'ятник «жертвам революції», який існує й понині, але вже в парку імені 1-го Травня.
Пам'ятник ділив площу на дві частини.
На північ від пам'ятника розташувався стадіон, це ж місце служило для проведення міських заходів.
У 1934 році на місці колишнього стадіону та іподрому, в той час на центральній площі міста, проводиться розбивка і посадка нового парку імені 1-го Травня. Стадіон переноситься на місце, де були розібрані завали конюшень і казарм, на те місце, де він зараз знаходиться. Тут же, поряд з полем стадіону, була збудована 30 – метрова парашутна вишка. Сучасний парк 1-го травня - це пам’ятка садово-паркового мистецтва, яка охороняється законом. На території парку розміщена алея пам’яті ІІ-ї світової війни, пам’ятник воїнам-інтернаціоналістам, пам’ятник ліквідаторам чорнобильської катастрофи, пам’ятник воїнам-прикордонникам.
Щорічно до пам’ятників покладають квіти. В теплу пору року це місце масового скупчення людей, переважно молоді, а ввечері, коли сідає сонце, тут можна побачити людей поважного віку, які полюбляють відпочивати на галявинах під віковими деревами.