Nano Hash - криптовалюты, майнинг, программирование

CSV-массив напрямую в Google Cloud Storage

В настоящее время у меня есть сценарий, который сохраняет файл csv локально, а затем загружает его в хранилище Google Cloud.

Я собираюсь перенести это приложение на Google App Engine, однако я понимаю, что вы не можете записывать файлы непосредственно в локальную файловую систему, и это необходимо сделать непосредственно в хранилище Google Cloud.

Честно говоря, я не уверен, как передать данные CSV напрямую в загрузку.

Следует ли мне использовать какие-либо потоки чтения и записи?

Любая помощь очень ценится.

google-cloud-platform node.js javascript google-cloud-storage google-app-engine
08.06.2018

Ответы:


1

Вы в чем-то правы. Вы не можете записывать на диск при использовании App Engine Standard, но в гибкой среде можно!

Кроме того, поскольку вы отметили этот вопрос тегом node.js, я предполагаю, что ваш код написан на этом языке. Еще лучше, поскольку, если вы хотите использовать его в App Engine, вы необходимо использовать Flexible, поскольку node.js нельзя запустить в App Engine Standard.

Таким образом, вы можете без проблем переместить этот код в App Engine Flexible.

Вы также можете переместить этот код в облачные функции, но вы можете записывать временные файлы только в экземпляр функции в _ 3_. Обратите внимание, что он будет потреблять ресурсы памяти, выделенные для функции.

Вы сможете продолжать использовать свой код в том виде, в каком он у вас уже есть, только изменив место для записи временного файла (если вы используете облачные функции).

ИЗМЕНИТЬ:

Когда я писал это, Node был доступен только в гибком варианте, но это уже не так: введите Node.js в Стандарт App Engine.

Но это ничего не меняет в вашем случае: вы по-прежнему не можете записывать на диск при использовании Standard, поэтому гибкие или облачные функции - ваши лучшие варианты.

11.06.2018
Новые материалы
Кластеризация: более глубокий взгляд
Кластеризация — это метод обучения без учителя, в котором мы пытаемся найти группы в наборе данных на основе некоторых известных или неизвестных свойств, которые могут существовать. Независимо от..
Как написать эффективное резюме
Предложения по дизайну и макету, чтобы представить себя профессионально Вам не позвонили на собеседование после того, как вы несколько раз подали заявку на работу своей мечты? У вас может..
Частный метод Python: улучшение инкапсуляции и безопасности
Введение Python — универсальный и мощный язык программирования, известный своей простотой и удобством использования. Одной из ключевых особенностей, отличающих Python от других языков, является..
Как я автоматизирую тестирование с помощью Jest
Шутка для победы, когда дело касается автоматизации тестирования Одной очень важной частью разработки программного обеспечения является автоматизация тестирования, поскольку она создает..
Работа с векторными символическими архитектурами, часть 4 (искусственный интеллект)
Hyperseed: неконтролируемое обучение с векторными символическими архитектурами (arXiv) Автор: Евгений Осипов , Сачин Кахавала , Диланта Хапутантри , Тимал Кемпития , Дасвин Де Сильва ,..
Понимание расстояния Вассерштейна: мощная метрика в машинном обучении
В обширной области машинного обучения часто возникает необходимость сравнивать и измерять различия между распределениями вероятностей. Традиционные метрики расстояния, такие как евклидово..
Обеспечение масштабируемости LLM: облачный анализ с помощью AWS Fargate и Copilot
В динамичной области искусственного интеллекта все большее распространение получают модели больших языков (LLM). Они жизненно важны для различных приложений, таких как интеллектуальные..