Am 6 Juni 1941 marschierten die nationalsozialistischen Truppen in Daugavpils ein und von ersten Tage der Besetzung wurde die Kampagne zur Ausrottung der Juden in Daugavpils begonnen. Gemäß der Verordnung vom 15. Juli 1941 mussten alle Juden ins Ghetto – in der Befestigungen am linken Ufer von Daugava ziehen.
Die meisten Gefangenen waren Juden aus Daugavpils, aber später wurden auch einige Tausende Juden aus umliegenden Städten und ländlichen Gebieten – Krāslava, Grīva, Višķi, Indra, Kārsava, Dagda, Ilūkste und anderen Orten (auch aus Litauen) im Ghetto untergebracht.
Insgesamt waren etwa 15.000 bis 20.000 Juden im Ghetto untergebrach, von denen weniger als 100 überlebten.
Das Denkmal für die jüdischen Opfer und das Ghetto von Daugavpils wurde am 10. November 1991 zum fünfzigsten Jahrestag des Holocaust enthüllt (Autor Bildhauer Oļegs Marinoha).
Das Denkmal besteht aus einer Granitsäule mit einem geschnitzten Davidstern und einer jiddischen Inschrift „Zum Andenken an die Kinder Israels“ und 16 Steinsäulen an beiden Seiten, die symbolisch an das Andenken an die Holocaust-Opfer in verschiedenen europäischen Länder erinnern. Auf diesen Säulen sind der Davidstern, sowie Name des Landes und Anzahl der Opfer dargestellt: Tschechoslowakei – 30000, Russland/Weißrussland/die Ukraine – 1 252 000, Baltische Länder – 223 000, Griechenland – 45000, Luxemburg – 1000, Jugoslawien – 20000, Rumänien – 300 000, Italien – 3000, Belgien – 40 000, Polen – 3 000000, die Niederlande – 105 000, Norwegen – 900, Bulgarien – 14 000, Frankreich – 90 000, Ungarn – 450 000.