我正在学习Scala，并且尝试从一个大型嵌套json文件中筛选出一些列，以使其成为一个DataFrame。

{
  “meta”: 
    {“a”: 1, b: 2”}    // I want to ignore meta
  “objects”:
  [
    {
         “caucus”: “Progressive”,
     “person” : 
         {
          “name”: “Mary”,
          “party”: “Green Party”,
          “age”: 50,
          “gender”: “female” // etc..
         }
    }, // etc.
   ] 
}

因此，数据看起来像这样，用spark读入。

val df = spark.read.json("file")
    df.show()
+--------------------+--------------------+
|                meta|             objects|
+--------------------+--------------------+
|[limit -> 100.0, ...|[[, [116.0, 117.0...|
+--------------------+--------------------+

而不是这样，我想要一个DataFrame与列：姓名|党|核心小组。
我已经对explode（）进行了一些修改，并将该模式重新生成为StructType（），但不确定通常如何处理这样的嵌套结构。