1
ответ

Aws KInesis Terraform - Как подключить потоки данных к Data Firehose

Я хочу создать, используя terraform, поток данных Kinesis и данные, и соединить их (как конвейер). Когда я использую пользовательский интерфейс, когда я иду в пожарный шланг, я могу перейти к источнику-> поток Kinesis и выбрать ...
вопрос задан: 29 March 2019 16:45
1
ответ

aws kinesis analytics - как определить ключ раздела для потока назначения

При использовании кинезис-аналитики, как можно указать ключ разделения, когда выходные записи передаются по назначению?
вопрос задан: 29 March 2019 13:39
1
ответ

Выполнение контрактного тестирования с использованием Spring Cloud Contract на AWS API Gateway / Kinesis

Я хочу выполнить контрактное тестирование на REST API (с использованием AWS API Gateway), который передает события в Kinesis. Я искал Spring Cloud Contract, чтобы, возможно, выполнить этот тип тестирования контракта. ...
вопрос задан: 28 March 2019 05:21
1
ответ

Невозможно создать Kinesis Client в функции Lambda

Я создал лямбда-функцию, которая запускается потоком DynamoDB. Я пытаюсь обработать события Dynamodb и поместить их в поток Kinesis после некоторой трансформации. Лямбда имеет полный ...
вопрос задан: 19 March 2019 17:19
1
ответ

отправлять старые журналы лямбды aws в поток kinesis aws

Я только что создал новый поток кинесиса AWS и настроил его для получения данных, которые я извлекаю с помощью лямбда-функции. В журналах наблюдения за облаком есть некоторые данные, поступившие до того, как я настроил поток. Является ...
вопрос задан: 6 March 2019 20:29
1
ответ

Поместите данные из AWS Kinesis в разные группы в зависимости от типа данных

Я следовал настройке, описанной в этом руководстве, чтобы настроить конвейер данных от Авроры до красного смещения. У меня это отлично работает для одного стола, например, Продажи. Однако сейчас я хочу ...
вопрос задан: 27 February 2019 17:41
1
ответ

Как обрабатывать поток данных Kinesis без EC2

Я хочу обрабатывать потоковые данные Kinesis без использования экземпляра EC2? Есть ли возможность сделать это т.е. через лямбда-функции и т.д?
вопрос задан: 18 January 2019 10:50
1
ответ

Масштабирование потока AWS Kinesis и улучшение производительности на потребительском конце

Поток Kinesis используется для подачи сообщений от вызывающего приложения, и мы берем сообщение из потока и процесса Kinesis. KPL (Onpremise) используется для создания (подачи) данных в Kinesis и KCL (@ AWS ...
вопрос задан: 13 July 2018 09:00
1
ответ

Что такое ключ раздела в AWS Kinesis?

Я читал о AWS Kinesis. В следующей программе я записываю данные в поток с именем TestStream. Я запускал этот фрагмент кода 10 раз, вставляя 10 записей в поток. var params = {...
вопрос задан: 23 January 2018 10:52
0
ответов

ограничение скорости передачи видео от gstreamer к Kinesis

Я пытаюсь отправить файл mkv (см. Атрибуты ниже) в Kinesis Video Stream. Я хотел бы иметь FPS 10-15 кадров в секунду. > ffprobe testvideo02.mkv ... Ввод # 0, matroska, webm, из '...
вопрос задан: 22 April 2019 19:29
0
ответов

Несколько рабочих нитей на осколке в Kinesis

У меня есть скрипт Python, написанный на Boto-V2.x, работающий на экземпляре EC2, и он создает один рабочий поток. Поток извлекает данные из Kinesis, используя тип итератора LATEST. Я хочу иметь несколько ...
вопрос задан: 1 March 2019 07:27
0
ответов

EMR против KCL на AWS Lambda

Мы планируем использовать сообщения из потока Kinesis. Нам нужно обрабатывать данные событий по одному (без окон, без агрегации), и мы могли видеть несколько вариантов чтения данных из потока kinesis: ...
вопрос задан: 27 February 2019 06:06
0
ответов

Данные не вставляются из AWS Kinesis Data Stream Firehose в Elasticsearch

Я пытаюсь собрать журналы сервера из EC2 с агентом AWS Kinesis в Kinesis Data Stream и Firehose, и сохранение необработанных данных в S3 идет хорошо, но это не работает, так как отправка в Elasticsearch ...
вопрос задан: 17 January 2019 03:31
0
ответов

Как определить общее количество ключей раздела в потоке кинесиса AWS?

В веб-приложении «производитель-потребитель» должен быть продуман процесс создания ключа раздела для сегмента потока кинезиса. Предположим, у меня есть поток кинезиса с 16 осколками, сколько разделов ...
вопрос задан: 16 September 2016 09:38
0
ответов

Разница между потоками Kinesis Stream и DynamoDB

Кажется, они делают то же самое со мной. Кто-нибудь может объяснить мне разницу?
вопрос задан: 25 July 2016 15:33
0
ответов

Почему я должен использовать Amazon Kinesis, а не SNS-SQS?

У меня есть сценарий использования, при котором поступает поток данных, и я не могу использовать его с той же скоростью, и мне нужен буфер. Это можно решить с помощью очереди SNS-SQS. Я узнал, что Кинезис решает ...
вопрос задан: 29 October 2014 06:01