
AWS
文章平均质量分 79
Norris Huang
这个作者很懒,什么都没留下…
展开
-
Amazon MSK 开启 Public 访问 SASL 配置的方法
而AmazonMSK默认allow.everyone.if.no.acl.found=true,所有用户都可以拥有权限,因为MSK没有superuser,但是当将MSK开启public之后,这个参数必须设置为false。因此,如果当集群还未配置任何用户权限的情况下,将allow.everyone.if.no.acl.found设置为false,会无法使用任何用户来访问MSK。没有包含消费者组权限,因此,还需要单独再给用户赋予组权限。原创 2025-01-19 09:25:09 · 1260 阅读 · 0 评论 -
通过 AWS Glue 同步 MaxCompute 数据到 S3
从上一步骤创建好 Connector 页面中,直接点击右上角的 Create connection,打开创建 Connection 的页面。,创建一个新的对象,在 Key/Value 中分别填写 accessId,accessKey 对应在阿里云实际的用户ID和key。(版本会影响方案的成功,4.x 以上版本验证是不可行的)在 Glue 创建 Connection 页面选中上一步骤创建好的 Secret 对象。点击 Create ,这样就创建好 MaxComputer 的连接。Name 自定义填写。原创 2024-05-15 16:24:44 · 710 阅读 · 0 评论 -
AWS-EMR & Airflow 调度hivesql 异常thrift.transport.TTransport.TTransportException: TSocket read 0 bytes
增加 hive.server2.authentication 设置为NOSASL。通过Airflow 调用 EMR 中的hive 执行sql,遇到错误异常。修改hive-site.xml。原创 2022-10-13 22:12:55 · 1386 阅读 · 1 评论