Dziś brak na teorię tę jednoznacznych dowodów, ale jeszcze kronikarz Jana III Sobieskiego wspominał, iż w to właśnie w Raciborzu zlokalizowali swoją stolicę Kwadowie. Germańskie plemię Kwadów na kilkadziesiąt lat przed narodzinami Chrystusa prowadziło walki z wojskami Juliusza Cezara. Rzymianie zwyciężyli, zaś pokonani germanie udali się na dzisiejsze Morawy i Śląsk. Również w trybie przypuszczającym pisze się o notatce nazywanej Geografem Bawarski, a która wspomina o ludzie Golensizi zajmującym dorzecze Górnej Odry – naukowcy sugerują, że jeden z grodów mógł być zlokalizowany w miejscu dzisiejszego zamku. O warowni w tym miejscu wyraźnie wspomina Kronika Galla Anonima – obiekt zajęły wojska Bolesława Krzywoustego w 1108 roku.
