Hittade äntligen det jag letade efter...
I my.cnf,
[mysqld_safe]
timezone = UTC
Jag satte det här alternativet under [mysqld], och mysql kunde inte starta.
Anropar "SET time_zone='+0:00';" på varje sidladdning skulle också fungera, men jag gillar inte tanken på att anropa den frågan vid varje enskild sidladdning.