Телеграмм чат группы aws

Агент Печенька

В чате по авс само собой посоветуют динаму)
В динаме стримы есть, кстати говоря.

я изучил вопрос - мне подходит ток dynamodb, потому что есть batching, стримы

01:25пожаловаться #1

https://aws.amazon.com/blogs/database/stream-changes-from-amazon-rds-for-postgresql-using-amazon-kinesis-data-streams-and-aws-lambda/

я изучил вопрос - мне подходит ток dynamodb, потому что есть batching, стримы

Amazon Web Services

Stream changes from Amazon RDS for PostgreSQL using Amazon Kinesis Data Streams and AWS Lambda | Amazon Web Services

In this post, I discuss how to integrate a central Amazon Relational Database Service (Amazon RDS) for PostgreSQL database with other systems by streaming its modifications into Amazon Kinesis Data Streams. An earlier post, Streaming Changes in a Database with Amazon Kinesis, described how to integrate a central RDS for MySQL database with other systems […]

01:25пожаловаться #2

RDS тоже умеет стримы

Агент Печенька... in AWS_RU

01:25пожаловаться #3

АП

я изучил вопрос - мне подходит ток dynamodb, потому что есть batching, стримы

Средствами авс как я помню аналог стримов пожно получить и в рсубд.

Агент Печенька... in AWS_RU

01:25пожаловаться #4

АП

Victor

https://aws.amazon.com/blogs/database/stream-changes-from-amazon-rds-for-postgresql-using-amazon-kinesis-data-streams-and-aws-lambda/

Amazon Web Services

Stream changes from Amazon RDS for PostgreSQL using Amazon Kinesis Data Streams and AWS Lambda | Amazon Web Services

Во.

01:26пожаловаться #5

Причем если просто нужно дергать лямбду, то и is не нужен - WAL достаточно

01:26пожаловаться #6

S🕶

после сохранения информации в базу данных -> надо чтоб запустилась lambda, с сохраненными в ней данными.

01:29пожаловаться #7

S🕶

я посмотрел в настройках lambda, и нашел только dynamodb

01:29пожаловаться #8

S🕶

я правильно понял что через kinesis можно как-то сделать? но выглядит очень сложно.

S🕶

01:33пожаловаться #10

PostgreSQL Location Replication client - logical WAL replication streaming

я посмотрел в настройках lambda, и нашел только dynamodb

Пилишь лямбду с WAL (например https://www.npmjs.com/package/pg-logical-replication) и вешаешь ее на крон

npm

npm: pg-logical-replication

01:34пожаловаться #11

Using a PostgreSQL database as a source for
AWS DMS - AWS Database Migration Service

Еще один вариант: AWS DMS

https://docs.aws.amazon.com/dms/latest/userguide/CHAP_Source.PostgreSQL.html

Amazon

Use a PostgreSQL database as a source for AWS DMS.

01:37пожаловаться #12

https://docs.aws.amazon.com/dms/latest/userguide/CHAP_Target.Kinesis.html

Amazon

Using Amazon Kinesis Data Streams as a target for AWS Database Migration Service - AWS Database Migration Service

Use Amazon Kinesis Data Streams as a target for data migration using AWS Database Migration Service.

01:37пожаловаться #13

То есть

RDS -> DMS -> Kinesis -> ???

01:37пожаловаться #14

Или RDS -> DMS -> S3 -> Cloudwatch Event -> Lambda

01:37пожаловаться #15

S🕶

как-то все очень сложно =/

Агент Печенька... in AWS_RU

01:38пожаловаться #16

АП

как-то все очень сложно =/

Простоту никто не обещал. Плюс на самом деле ничего особо сложного.

01:38пожаловаться #17

S🕶

мне сложно - я делаю первый раз, еще софт надо чтоб работал совместно нормально без проблем

01:39пожаловаться #18

S🕶

оставлю пока как есть что попроще

01:39пожаловаться #19

S🕶

мне интересен момент, вот у меня есть aws lambda, которая должна принимать sqs:

const handler: SQSHandler = async (event, context) => {
  return main(event, context)
}

как мне запустить ее и посмотреть что пришло в event? или запустить тестовый sqs, с тестовыми данными.