amazon-web-services相关内容

在Glue Python外壳作业中使用AWS X-Ray

是否可以在使用标准部署环境的Glue python外壳作业中使用x-ray patching for boto3? aws-xray-sdk库不在list of supported libraries中。但不包括支持的库列表中的boto3检测功能,似乎是一个明显的遗漏。 预先感谢您的考虑和回复。 推荐答案 您可以尝试Prabhakar建议的简单安装方法,在您的粘合作业中包含aw ..
发布时间:2022-08-16 19:06:37 Python

将拼图文件加载到RedShift中

我在S3上有一堆拼图文件,我想以最优的方式将它们加载到红移中。 每个文件被拆分成多个块……将数据从S3加载到RedShift的最佳方式是什么? 另外,如何在RedShift中创建目标表定义?有没有一种方法可以从Parquet中推断出模式并编程创建表?我相信有一种使用红移光谱的方法可以做到这一点,但我想知道这是否可以在脚本中完成。 感谢您的帮助! 我正在考虑所有AWS工具(如Gl ..

允许通过提交进行手动部署的AWS CI/CD管道

背景 我希望在AWS和Github中为使用Amplify的Reaction应用程序创建以下CI/CD流: 单个main分支,包含短暂的功能分支和PR进入main。 每个PR在Amplify中触发自己的测试环境,有自己的临时子域,在PR合并时会被拆除,如here所述。 合并到main不会自动触发部署到生产。 相反,有一个单独的机制(网页或Amplify命令,甚至基于Git标签的触发 ..
发布时间:2022-08-14 23:10:51 其他开发

由于需要后缀,设置从S3存储桶到FIFO SQS队列的通知时出错。

各位: 我相信我在最新的AWS FIFO SQS上遇到了一个小错误,有谁有解决我遇到的以下错误的解决方案? 我已在AWS SQS管理控制台(us-West-2区域)上创建了FIFO队列。要创建FIFO队列,SQS管理控制台要求在队列的名称上插入一个“.fio”后缀(这不常见--“。不推荐用于命名AWS上的任何内容)。 我已在此队列上设置了适当的权限,以便从我在同一区域拥有的存储桶接收通 ..
发布时间:2022-08-14 10:54:24 其他开发

如何阻止AWS CLI调用

大多数AWS CLI调用都是异步的。 因此,在您呼叫他们之后,您不知道最终产品是否成功。 除了创建定时轮询验证调用等之外,是否有简单的解决方案来检查环境是否创建成功。 很抱歉我之前没有提到,但我正在专门寻找PowerShell的解决方案 推荐答案 您可以check the Exit Status执行CLI命令。 bash外壳中的退出代码是什么? 由外壳脚本 ..
发布时间:2022-08-13 17:13:52 其他开发

禁用进度输出AWS S3同步,但不禁用所有输出

可能是一个愚蠢的问题,但有任何方法可以禁用 Completed 1 of 12 part(s) with 11 file(s) remaining... 使用aws s3 sync命令进行进度输出(从AWS CLI工具)。 我知道有--quiet选项,但我不想使用它,因为我仍然需要日志文件中的Upload...详细信息。 不是什么大问题,但会在日志文件中造成混乱,如: ..
发布时间:2022-08-13 16:57:00 其他开发

我是否可以定制通过Slack的AWS Chatbot集成接收到的消息?

目前,我们已经为Slack设置了AWS Chatbot集成,以接收有关CodePipeline的通知-CodeBuilds的结果和CodePipeline所有阶段的状态。我注意到开箱即用集成的消息并不像我希望的那样具有描述性。 例如:如果构建因单元测试失败而失败,那么聊天机器人将输出POST_BUILD: COMMAND_EXECUTION_ERROR: Error while execut ..
发布时间:2022-08-13 15:20:20 其他开发

了解KMS政策?

我有一个名为group-dev的IAM组,并有几个用户连接到此组,我有自定义的IAM策略(如下所示)。仅此IAM策略是否足以让该组中的用户加密并列出KMS密钥? 基本上我的目标是创建IAM组,将策略附加到几个用户,当添加新用户时,我不想做重复的工作,比如将他们添加到组中,然后将他们添加到KMS关键策略中。那么,它是否适用于以下政策? IAM组内联策略 { "Action" ..
发布时间:2022-08-11 14:22:13 其他开发

如何为AWS角色生成访问密钥和密钥

我希望使用PowerShell管理我的AWS环境。我们通过IAM角色获得访问权限。我在为我的IAM角色生成访问密钥和密钥时遇到了麻烦。有人能指导我如何生成这些密钥吗? 推荐答案 iam角色只能由iam用户使用。这是因为用户需要向AWS进行身份验证,以证明他们就是该用户。然后将提供IAM用户凭据。 如果您希望使用某个角色,您可以使用用户凭据调用Use-STSRole,它将承担该角色 ..
发布时间:2022-08-11 14:03:50 其他开发

如何判断我的AWS EC2实例是否由Amazon-EBS支持?

我有一个Amazon EC2实例(Ubuntu),我想将其调整为更大的大小,但我不想重建该实例。有人告诉我,如果它是EBS支持的,那么我不必重建,我只需停止实例并调整大小即可。 其他信息: 我已将S3中的IAM角色添加到此实例。 此实例正在使用t2.Micro “根设备类型”为EBS。 两个问题: 1)我是否可以在无需重新构建实例的情况下调整大小? 2)像T3 Me ..
发布时间:2022-08-09 17:40:02 Python

如何解决Amazon RDS PostgreSQL实例的DiskFull错误?

我们有一个非常小的数据库,用于在Amazon RDS实例中存储一些关系数据。PostgreSQL引擎的版本为12.7。 在同一区域的AWS中有许多lambda函数,它们访问此实例以插入记录。在此过程中,还使用了一些联接查询。我们使用心理Copg2 Python库与数据库进行交互。由于数据量非常小,所以我们使用了一个t2的小实例,存储空间为20 GB,CPU为1。然而,在生产中,使用了t2.Med ..
发布时间:2022-08-08 10:50:40 其他开发

在不同的AWS帐户中连接AWS Lambda和RDS

我们为各个部门提供了多个AWS帐户。我要授予一个帐户中的Lambda函数访问另一个帐户中的RDS实例的权限。 如果Lambda函数未分配给VPC,并且RDS是公开可访问的,是否有办法将RDS的访问权限限制为仅Lambda函数? 如果RDS实例是私有的,并且Lambda函数没有分配给私有网络,有什么方法可以做到这一点吗? 推荐答案 公共Amazon RDS数据库 如果没 ..
发布时间:2022-08-08 10:39:02 其他开发