В близост до брега на река Дунав, на около 22 км от град Гулянци, област Плевен, се намира античният град Улпия Ескус. Римският град е възникнал през І в. н. е. като наследник на тракийско селище. Около него по-късно е изграден лагерът на Пети македонски легион.
Военният лагер получава статута на колония след славната победа на император Марк Улпий Траян (98 г. – 117 г.) над даките. По случай победата Улпия Ескус е обявен за град със собствено управление. Римският град се превръща във важен кръстопът, като силен разцвет преживява през ІІ – ІІІ в., когато е изградена централната градска част. Улпия Ескус е строен по типичния за римските градове начин - имал правоъгълна форма, а улиците са в посока изток – запад и север – юг. И днес посетителите могат да видят останки от улици, храмове, голяма гражданска базилика. Общата територия на града била около 280 дка.
Градът е в разцвета си и през ІV в. – при управлението на император Константин Велики (307 г. – 337 г.). Тогава столица на римската империя става Константинопол, а на брега на река Дунав е изграден голям каменен мост, за откриването на който на 5 юли 328 г. идва лично императорът.
Улпия Ескус е разрушен от аварите в края на VІ в. От Х до ХІV в. върху останките от античния град е съществувало друго селище.
Първите разкопки на античния град се провеждат през 1904 -1905 г. По-късно, през 1947 – 1951 г. археолозите откриват голяма обществена сграда, а в едно от помещенията й е намерена една от най-добрите римски многоцветни подови мозайки по българските земи. В централната част е изобразена сцена от комедията „Ахейци”. Мозайката е реставрирана и консервирана и днес може да се види в Регионалния исторически музейв Плевен. При разкопки са открити още форумен комплекс, храмове на Капитолийската троица (Юпитер, Юнона, Минерва), голяма базилика, обществени сгради, бани и др.
Античният град е част от обектите на Регионалния исторически музей - Плевен, затова част от находките, открити в Улпия Ескус, са изложени в специално отделена зала на музея.
С брой 88 на Държавен вестник от 1965 г. римският град е обявен за архитектурно-строителен паметник на културата от Античността и Средновековието с категория национално значение. През 2011 г. в брой 104 на Държавен вестник Улпия Ескус получава статут на археологически резерват.