Вопросы по теме 'kafka-producer-api'
в чем разница между kafka ProducerRecord и KeyedMessage
Я измеряю производительность продюсера кафки. В настоящее время я встречал двух клиентов с немного разной конфигурацией и использованием:
Общий:
def buildKafkaConfig(hosts: String, port: Int): Properties = {
val props = new Properties()...
30.11.2023
kafka.common.FailedToSendMessageException: ошибка kafka
Я читаю файл json и пытаюсь создать его с помощью kafka. Вот мой код:
public class FlatFileDataProducer {
private String topic = "JsonTopic";
private Producer<String, String> producer = null;
KeyedMessage<String, String>...
07.12.2023
Flink kafka - работа Flink не отправляет сообщения в разные разделы
У меня следующая конфигурация:
Одна кафка-топик с 2-мя разделами
Один экземпляр zookeeper
Один экземпляр кафки
Два потребителя с одинаковым идентификатором группы
Фрагмент вакансии Flink:
speStream.addSink(new...
27.12.2023
Проверка работоспособности клиента: проверьте потребителя / производителя, если брокер не работает
У меня есть требование реализовать проверку работоспособности, и в рамках этого я должен выяснить, сможет ли производитель опубликовать сообщение, а потребитель сможет отправить сообщение потребителю, для этого я должен проверить, работает ли...
17.01.2024
Если производитель выполнит повторную попытку, будут ли два сообщения иметь одинаковую метку времени?
Семантика хотя бы один раз: если производитель получает подтверждение (ack) от брокера Kafka и acks = all, это означает, что сообщение было записано в тему Kafka ровно один раз. Однако, если время подтверждения истекает или появляется ошибка, он...
16.01.2024
Новые материалы
Кластеризация: более глубокий взгляд
Кластеризация — это метод обучения без учителя, в котором мы пытаемся найти группы в наборе данных на основе некоторых известных или неизвестных свойств, которые могут существовать. Независимо от..
Как написать эффективное резюме
Предложения по дизайну и макету, чтобы представить себя профессионально
Вам не позвонили на собеседование после того, как вы несколько раз подали заявку на работу своей мечты? У вас может..
Частный метод Python: улучшение инкапсуляции и безопасности
Введение
Python — универсальный и мощный язык программирования, известный своей простотой и удобством использования. Одной из ключевых особенностей, отличающих Python от других языков, является..
Как я автоматизирую тестирование с помощью Jest
Шутка для победы, когда дело касается автоматизации тестирования
Одной очень важной частью разработки программного обеспечения является автоматизация тестирования, поскольку она создает..
Работа с векторными символическими архитектурами, часть 4 (искусственный интеллект)
Hyperseed: неконтролируемое обучение с векторными символическими архитектурами (arXiv)
Автор: Евгений Осипов , Сачин Кахавала , Диланта Хапутантри , Тимал Кемпития , Дасвин Де Сильва ,..
Понимание расстояния Вассерштейна: мощная метрика в машинном обучении
В обширной области машинного обучения часто возникает необходимость сравнивать и измерять различия между распределениями вероятностей. Традиционные метрики расстояния, такие как евклидово..
Обеспечение масштабируемости LLM: облачный анализ с помощью AWS Fargate и Copilot
В динамичной области искусственного интеллекта все большее распространение получают модели больших языков (LLM). Они жизненно важны для различных приложений, таких как интеллектуальные..