КАК ПРИВЕСТИ ДИНАМИЧЕСКИ-СТРУКТУРИРОВАННЫЕ JSON В ФОРМАТ KEY: VALUE

Данный скрипт обрабатывает json строки и формирует датафрейм: путь, ключ, значение.

Для запуска:

1. ввести в командной строке spark-shell,
2. указать путь к json и выходному файлу,
3. скопировать скрипт и ввести в командную строку.