聚合列而不是整行：

SELECT json_agg(v.image) AS images
FROM  (
   SELECT json_build_object('pos',pos, 'type',type, 'color',color) AS image  -- !
   FROM   images i -- simpler

   UNION ALL
   SELECT json_build_object('pos',pos, 'type',type, 'value',value)
   FROM   letters l  -- simpler
   ) v;

字符串
值得注意的是，您的查询生成json，而不是jsonb。
嵌套整行时更简单：

SELECT json_agg(v.image) AS images
FROM  (   
   SELECT to_json(i) AS image
   FROM   images i

   UNION ALL
   SELECT to_json(l)
   FROM   letters l
   ) v;

型
类似于**jsonb**（其中白空间不是问题）

SELECT jsonb_agg(v.image) AS images
FROM  (   
   SELECT to_jsonb(i) AS image
   FROM   images i

   UNION ALL
   SELECT to_jsonb(l)
   FROM   letters l
   ) v;

型
fiddle
参见：

• Return multiple columns of the same row as JSON array of objects的

如果这两个表的列类型确实匹配，则可以通过标记行并在聚合位置构建jsonb来缩短查询：demo at db<>fiddle

select jsonb_agg(jsonb_build_object('pos',pos,'type',type,label,color_or_value))
from (select pos, type,'color' as "label",color as "color_or_value" from images
      union all 
      select pos, type,'value' as "label",value from letters )v;

字符串
| jsonb_agg|
| --|
| [{“pos”：0，“type”：“image”，“color”：“red”}，{“pos”：1，“type”：“image”，“color”：“blue”}，{“pos”：2，“type”：“text”，“value”：“book”}]|