Most már biztos, hogy valami szoftveres gond volt. A 18.04.5 megjelenésekor fel is tettem a legfrissebb HWE-t (5.4.0-42 kernel + x.org), ami azóta is hiba nélkül működik.