ホームページ > バックエンド開発 > Python チュートリアル > Spark データフレームでネストされた JSON を分解できません

Spark データフレームでネストされた JSON を分解できません

WBOY
リリース: 2024-02-11 10:51:03
転載
464 人が閲覧しました

无法分解 Spark 数据框中的嵌套 JSON

#質問内容

spark は初めてです。データフレームを平坦化しようとしていますが、「分解」によってそれを行うことができません。

元のデータ フレーム構造は次のとおりです:

リーリー

次のスキーマに変換する必要がありますか?

リーリー

試してみました

リーリー

しかし、エラーが発生しました:

id|approvaljson
1|[{"approvertype":"1st line manager","status":"approved"},{"approvertype":"2nd line manager","status":"approved"}]
2|[{"approvertype":"1st line manager","status":"approved"},{"approvertype":"2nd line manager","status":"rejected"}]
ログイン後にコピー


正解


まず、json のような文字列を構造体の配列に解析し、次に

inline を使用して配列を行に分割し、列 リーリー ###結果### リーリー

以上がSpark データフレームでネストされた JSON を分解できませんの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。

関連ラベル:
ソース:stackoverflow.com
このウェブサイトの声明
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。
最新の問題
人気のチュートリアル
詳細>
最新のダウンロード
詳細>
ウェブエフェクト
公式サイト
サイト素材
フロントエンドテンプレート