https://cloud.google.com/composer/docs/concepts/cloud-storage

я есть несколько случаев использования файлов, которые я не знаю, как лучше всего использовать Cloud Composer. Как мне лучше всего это сделать?

1) Мне нужно использовать файл закрытого ключа (.pem) для доступа к SFTP-серверу. Где должен храниться этот файл и как к нему обращаться? В первоначальном Airflow я просто поместил бы файл в папку / keys / в том же каталоге, что и / dags /.

2) Мне нужно переместить файлы с SFTP-сервера в облачное хранилище. С помощью Airflow on prem я загружаю их с SFTP-сервера в определенное место на рабочем экземпляре Airflow и затем загружаю оттуда. Могу ли я сделать что-то подобное с Composer или есть обходной путь, так как я не могу получить доступ к файловой системе?

Ответы на вопрос(2)

Ваш ответ на вопрос