На текущий момент из коробки в open-source версии читать YQL-ем данные из внешних источников нельзя, но мы хотим вернуться к этой задаче в обозримом будущем.
Можно читать данные из S3 через CHYT, ну и всегда можно сделать свою UDF ;)
Привет, в основном YQL использует формат skiff как input/output формат. Действительно, раньше не было поддержки arrow, причём как на стороне YT (в джобах), так и на стороне YQL (с точки зрения ввода-вывода, и более важно - с точки зрения поддержки блочных вычислений).
"Внедрение" - это процесс от момента "есть код который вроде бы делает то, что нужно и его можно включить по флажку" до момента "код работает на разнообразной продакшен нагрузке и включен по-дефолту".
На текущий момент из коробки в open-source версии читать YQL-ем данные из внешних источников нельзя, но мы хотим вернуться к этой задаче в обозримом будущем.
Можно читать данные из S3 через CHYT, ну и всегда можно сделать свою UDF ;)
Привет, в основном YQL использует формат skiff как input/output формат. Действительно, раньше не было поддержки arrow, причём как на стороне YT (в джобах), так и на стороне YQL (с точки зрения ввода-вывода, и более важно - с точки зрения поддержки блочных вычислений).
"Внедрение" - это процесс от момента "есть код который вроде бы делает то, что нужно и его можно включить по флажку" до момента "код работает на разнообразной продакшен нагрузке и включен по-дефолту".