Вопросы по теме 'apache-flink'
Apache Flink InvocationTargetException: не удалось выполнить задание. Время соединения истекло
Я создаю этот пример из краткое руководство по Apache Flink. Я всегда получаю сообщение об ошибке:
Failed to execute goal org.codehaus.mojo:exec-maven-plugin:1.4.0:java (default-cli) on project wiki-edits: An exception occured while executing...
04.12.2023
Правильная сигнатура метода для RichGroupReduceFunction?
Нижеприведенный расширенный класс RichGroupReduceFunction , не компилируется. Подпись вроде бы не соответствует интерфейсу. Я не вижу разницы.
class SPointReduce extends RichGroupReduceFunction[Int, Int] {
override def reduce (...
20.11.2023
Apache Flink: масштабируется ли состояние API таблиц?
Согласно таблице Флинка Концепции потоковой передачи API , запросы API таблиц и SQL могут завершиться ошибкой из-за увеличения размера состояния.
Размер состояния. Непрерывные запросы оцениваются в неограниченных потоках и часто должны...
13.11.2023
Flink kafka - работа Flink не отправляет сообщения в разные разделы
У меня следующая конфигурация:
Одна кафка-топик с 2-мя разделами
Один экземпляр zookeeper
Один экземпляр кафки
Два потребителя с одинаковым идентификатором группы
Фрагмент вакансии Flink:
speStream.addSink(new...
27.12.2023
Повторное использование объекта Flink: изменить объекты ввода?
У меня есть потоковое приложение Flink, которое тратит примерно 20% своего процессорного времени на Kyro.copy. Я могу избежать этого, включив режим повторного использования объектов, но у меня есть небольшая проблема: я хотел бы изменить объекты...
07.01.2024
Почему приемник Flink FileSystem разбивается на несколько файлов
Я хочу использовать Flink для чтения из входного файла, выполнения некоторой агрегации и записи результата в выходной файл. Работа находится в пакетном режиме. См. wordcount.py ниже:
from pyflink.table import EnvironmentSettings,...
23.12.2023
Потоковая передача данных с flink на S3
Я использую Flink на Amazon EMR и хочу передавать результаты моего конвейера в корзину s3.
Я использую версию Flink => 1.11.2
Это фрагмент кода, показывающий, как переменная кода выглядит прямо сейчас:
val outputPath = new...
21.12.2023
Новые материалы
Кластеризация: более глубокий взгляд
Кластеризация — это метод обучения без учителя, в котором мы пытаемся найти группы в наборе данных на основе некоторых известных или неизвестных свойств, которые могут существовать. Независимо от..
Как написать эффективное резюме
Предложения по дизайну и макету, чтобы представить себя профессионально
Вам не позвонили на собеседование после того, как вы несколько раз подали заявку на работу своей мечты? У вас может..
Частный метод Python: улучшение инкапсуляции и безопасности
Введение
Python — универсальный и мощный язык программирования, известный своей простотой и удобством использования. Одной из ключевых особенностей, отличающих Python от других языков, является..
Как я автоматизирую тестирование с помощью Jest
Шутка для победы, когда дело касается автоматизации тестирования
Одной очень важной частью разработки программного обеспечения является автоматизация тестирования, поскольку она создает..
Работа с векторными символическими архитектурами, часть 4 (искусственный интеллект)
Hyperseed: неконтролируемое обучение с векторными символическими архитектурами (arXiv)
Автор: Евгений Осипов , Сачин Кахавала , Диланта Хапутантри , Тимал Кемпития , Дасвин Де Сильва ,..
Понимание расстояния Вассерштейна: мощная метрика в машинном обучении
В обширной области машинного обучения часто возникает необходимость сравнивать и измерять различия между распределениями вероятностей. Традиционные метрики расстояния, такие как евклидово..
Обеспечение масштабируемости LLM: облачный анализ с помощью AWS Fargate и Copilot
В динамичной области искусственного интеллекта все большее распространение получают модели больших языков (LLM). Они жизненно важны для различных приложений, таких как интеллектуальные..