1. Пользовательские раковины HBase записи?
С помощью встроенного клиента Hbase, каждый из них может контролировать свои собственные, сколько записей будут обновлены. Мы встретились несколько результат ямы в записи данных HBase не идти внутрь:
- Кластер версия HBase и версия клиента не соответствует (версия 1 и версия 2 будет конфликт друг с другом)
- конфликты Jar пакет
Для примера Protobuf-версии Java конфликтов, общих для двух ключевых ошибок, java.io.IOException:. Java.lang.reflect InvocationTargetExceptio n- и Вызванный: java.lang.NoClassDefFoundError: Не удалось инициализировать класс org.apache.hadoop.hbase .protobuf.ProtobufUtil .
2. Flink
Flink читал Кафка, если используется Consumer08, то смещение будет представлен Zk, эта конфигурация может быть записана в следующем файле Conf, представленный на смещение гк может быть указана непосредственно. не Consumer09 позже представил Zk, Кафка мы будем участвовать в состоянии потребления Тема памяти в одиночку.
1 xxxx08 { 2 bootstrap.servers = "IP: 9092" 3 zookeeper.connect = "IP1: 2181, ф2 / ВИО" 4 group.id = "группа1" 5 auto.commit.enable = истинная 6 auto.commit.interval. MS = 30000 7 zookeeper.session.timeout.ms = 60000 8 zookeeper.connection.timeout.ms = 30000 9 }
. 1 Конечного кнопка Свойство consumerProps = configutil 2 . GetProperties (конфигурации, " xxxx08 "); // Используйте функцию Util выполненной с возможностью считывания их подготовки . 3 . 4 Заключительного FlinkKafkaConsumer08 <String> = Источник . 5 нового новый FlinkKafkaConsumer08 <String> (тема, новый новый SimpleStringSchema () , consumerProps);