yrepear 12 окт 2022 в 11:05

Подводные камни Spark: что делать с перезаписью и дополнением в таблицах

11 мин

4.8K

Блог компании VKBig Data*Администрирование баз данных*Хранение данных*Хранилища данных*

+16

Комментарии 1

ol_mur 18 сен в 10:40

Подскажите, пожалуйста, почему не используете команду writeTo в режиме replace для замены данных? Она доступна с версии Spark 3.1.0 (https://spark.apache.org/docs/3.4.2/api/python/reference/pyspark.sql/api/pyspark.sql.DataFrame.writeTo.html)

Зарегистрируйтесь на Хабре, чтобы оставить комментарий