同步 gs 桶与 s3 桶(lambda 风格)
synch gs bucket with s3 bucket (lambda style)
简单的问题,我有一个 google 桶,它每天从外部提供商那里获取内容 3 次。我想在它到达后立即获取此内容并将其推送到 S3 存储桶中。我已经能够通过 运行 我的 python 脚本作为 cron 作业来实现这一点。但是如果我遵循这条路线,我必须提供高可用性等。
我的想法是在 aws lambda 中进行设置,这样我就不必担心基础设施的限制。关于 gs 和 lambda 之间这种结合的任何指示。我不是 Node 母语人士,所以任何指点都会很有帮助。
GCS 可以在对象 created/updated 时发送对象通知。您可以通过托管在 GAE 上的简单 Web 应用程序捕获通知(这是 HTTP post 请求),然后处理到 S3 的文件传输。高度可用的事件驱动解决方案。
简单的问题,我有一个 google 桶,它每天从外部提供商那里获取内容 3 次。我想在它到达后立即获取此内容并将其推送到 S3 存储桶中。我已经能够通过 运行 我的 python 脚本作为 cron 作业来实现这一点。但是如果我遵循这条路线,我必须提供高可用性等。
我的想法是在 aws lambda 中进行设置,这样我就不必担心基础设施的限制。关于 gs 和 lambda 之间这种结合的任何指示。我不是 Node 母语人士,所以任何指点都会很有帮助。
GCS 可以在对象 created/updated 时发送对象通知。您可以通过托管在 GAE 上的简单 Web 应用程序捕获通知(这是 HTTP post 请求),然后处理到 S3 的文件传输。高度可用的事件驱动解决方案。