Du verkar vilja ha en left join :
select a.id, b.idcategory, b.value
from a left join
b
on b.id = a.id and b.idcategory = 1;
value kolumnen har NULL istället för 'no value' . Du kan ersätt den, men NULL brukar tjäna det syftet.