Публикации по теме 'apache-kafka'
Использование Materialize, dbt и Redpanda для построения современной каппа-архитектуры
Реализация более быстрой, удобной для разработчиков и более безопасной архитектуры Kappa.
С момента своего восхождения к господству в 80-х годах реляционные базы данных использовались в бизнес-приложениях для записи транзакций, хранения информации о бизнес-объектах (сущностях), а также для обработки и анализа исторических данных для обоснования бизнес-решений. В этом посте мы обсудим устоявшиеся шаблоны баз данных и то, как они преобразуются в новую потоковую архитектуру, которая..
Вопросы по теме 'apache-kafka'
Проблема с подключением кафки извне
Я использую песочницу hortonwork для сервера kafka, пытаясь подключить kafka из eclipse с кодом java. Используйте эту конфигурацию для подключения к производителю для отправки сообщения
metadata.broker.list=sandbox.hortonworks.com:45000...
24.03.2024
Кафка через CNAME/балансировщик нагрузки при использовании Kerberos?
В основном я ищу здесь советы по Kafka и отказоустойчивости при аварийном восстановлении. Есть ли способ использовать Kafka через CNAMEs/балансировщик нагрузки при использовании Kerberos ?
Когда я пытаюсь это сделать, я получаю следующую...
15.03.2024
Как написать набор данных в тему Kafka?
Я использую Spark 2.1.0 и Kafka 0.9.0.
Я пытаюсь передать результат пакетного задания искры в kafka. Предполагается, что задание выполняется каждый час, но не в потоковом режиме.
В поисках ответа в сети я смог найти только интеграцию kafka с...
01.05.2024
Сохранение смещения сообщения в Kafka с помощью KafkaUtils.createDirectStream
Как сохранить смещение сообщения в Kafka, если я использую KafkaUtils.createDirectStream для чтения сообщений. Kafka теряет значение смещения каждый раз, когда приложение выходит из строя. Затем оно считывает значение, указанное в auto.offset.reset...
17.03.2024
Как использовать сообщения от начала до определенного смещения
У меня есть карта между количеством разделов и количеством смещений данной темы в kafka. Я хотел бы получать все сообщения, начиная с самого начала и заканчивая конкретным сопоставлением разделов / смещений с использованием golang. Вкратце, я хотел...
01.04.2024
Новые материалы
Объяснение документов 02: BERT
BERT представил двухступенчатую структуру обучения: предварительное обучение и тонкая настройка.
Во время предварительного обучения модель обучается на неразмеченных данных с помощью..
Как проанализировать работу вашего классификатора?
Не всегда просто знать, какие показатели использовать
С развитием глубокого обучения все больше и больше людей учатся обучать свой первый классификатор. Но как только вы закончите..
Работа с цепями Маркова, часть 4 (Машинное обучение)
Нелинейные цепи Маркова с агрегатором и их приложения (arXiv)
Автор : Бар Лайт
Аннотация: Изучаются свойства подкласса случайных процессов, называемых дискретными нелинейными цепями Маркова..
Crazy Laravel Livewire упростил мне создание электронной коммерции (панель администратора и API) [Часть 3]
Как вы сегодня, ребята?
В этой части мы создадим CRUD для данных о продукте. Думаю, в этой части я не буду слишком много делиться теорией, но чаще буду делиться своим кодом. Потому что..
Использование машинного обучения и Python для классификации 1000 сезонов новичков MLB Hitter
Чему может научиться машина, глядя на сезоны новичков 1000 игроков MLB? Это то, что исследует это приложение.
В этом процессе мы будем использовать неконтролируемое обучение, чтобы..
Учебные заметки: создание моего первого пакета Node.js
Это мои обучающие заметки, когда я научился создавать свой самый первый пакет Node.js, распространяемый через npm.
Оглавление
Глоссарий
I. Новый пакет
1.1 советы по инициализации..
Забудьте о Matplotlib: улучшите визуализацию данных с помощью умопомрачительных функций Seaborn!
Примечание. Эта запись в блоге предполагает базовое знакомство с Python и концепциями анализа данных.
Привет, энтузиасты данных! Добро пожаловать в мой блог, где я расскажу о невероятных..