Tydligen behandlar den heltal annorlunda än strängar. Medan json_contains(`column_name`,"1") är ett giltigt anrop, för att kontrollera om det innehåller "ART" måste du använda json_contains(`column_name`,'"ART"') (observera det dubbla citatet).
Det löste mitt problem!