Вопросы по теме 'google-cloud-bigtable'
Резервное копирование и резервирование больших таблиц
Google Cloud Bigtable выглядит фантастически, однако у меня есть несколько вопросов по резервному копированию и избыточности.
Есть ли варианты резервного копирования данных для защиты от человеческих ошибок?
В настоящее время кластеры работают в...
1147 просмотров
schedule
01.05.2023
Поддержка Cloud Bigtable в качестве приемника в облачном потоке данных
Планируется ли включить Cloud Dataflow для записи данных в Cloud Bigtable? Это вообще возможно?
Добавление пользовательского Sink для обработки ввода-вывода, вероятно, было бы правильным выбором.
В качестве обходного пути я попытался...
602 просмотров
schedule
05.06.2024
Подходит ли Bigtable (или BigQuery) для корреляционного анализа журналов?
Я столкнулся с проблемой анализа различных файлов системного журнала на основе следующих требований:
несколько сотен систем
миллионы журналов каждый день в разных форматах
Помимо многих других целей, моей самой большой проблемой является...
441 просмотров
schedule
21.06.2022
клиент hbase в изолированной среде GAE
Я пытаюсь заставить Java-клиент google bigtable работать в GAE, который является клиентом hbase. Я нашел пример, https://github.com/GoogleCloudPlatform/cloud-bigtable-examples/tree/master/java/managed-vm-gae , но это только для управляемой...
72 просмотров
schedule
17.01.2023
Как запустить пример кода управляемой vm-gae локально
Я следовал этому руководству , чтобы получить Клиент Bigtable запущен и работает на виртуальных машинах, управляемых Google. Но есть ли способ запустить это локально? Причина в том, что удаленное развертывание кода в процессе разработки — это...
90 просмотров
schedule
20.05.2023
ОШИБКА: (gcloud.preview.app) Неверный выбор: «запустить»
Я пытаюсь получить golang hello-world bigtable пример работает локально локально и сталкивается с этой проблемой. Когда я запускаю gcloud preview app run app.yaml из каталога bigtable-hello , я получаю следующую ошибку:
➜ bigtable-hello...
1882 просмотров
schedule
25.02.2023
Ошибка Google Cloud Dataflow: учетные данные приложения по умолчанию недоступны
У нас есть задание Google Cloud Dataflow, которое пишет в Bigtable (через HBase API). К сожалению, это не удается из-за:
java.io.IOException: The Application Default Credentials are not available. They are available if running in Google Compute...
1315 просмотров
schedule
09.07.2022
Как настроить плагин GeoMesa Bigtable в GeoServer
Я установил geoserver-2.10 на экземпляр Linux и создал geomesa-bigtable-gs-plugin_2.11-1.3.0-m3-SNAPSHOT.jar , используя исходный код, доступный на GitHub . Эта часть работала нормально, и Bigtable появился в источниках векторных данных. Но я...
206 просмотров
schedule
29.06.2022
RowFilter для Bigtable - нужны только квалификаторы столбцов, а НЕ значения ячеек
Я пытаюсь использовать библиотеку google-cloud-bigtable. Я намерен запросить bigtable, в котором ответ должен возвращать мне только имена / квалификаторы столбцов, НО без значений.
Я пробовал разные методы, такие как Cell_per_row_limit_filter и...
622 просмотров
schedule
23.10.2022
Поиск и обновление столбцов в Bigtable
Предположим, что у нас есть следующая структура Bigtable: Table1: cf1 [«col1», «col2»], cf2 [«colX», «colY»]
Запрос из клиентского API hbase:
Get getT = new Get(Bytes.toBytes(rowKey));
getT.addColumn(byteArray_cf1, byteArray_col1);
Result rt =...
712 просмотров
schedule
12.01.2023
Массовое обновление bigtable на основе динамического фильтра
Я ищу способ сканировать огромную Google BigTable с динамическим фильтром, основанным на событиях, и выполнять массовое обновление/удаление огромного количества строк.
На данный момент я пытаюсь объединить BigTable с потоком данных на основе Java...
259 просмотров
schedule
17.08.2022
TimestampRangeFilter - все ячейки возвращены для строки или только совпавшие ячейки?
Возвращает ли TimestampRangeFilter в Bigtable все ячейки для возвращенных строк, даже если не все ячейки соответствуют критериям фильтра?
Пример:
Скажем, у меня есть строка в Bigtable. Я 10 минут назад написал кучу ячеек в строку. 5 минут...
206 просмотров
schedule
29.05.2022
Модульные тесты для доступа к данным Cloud Bigtable
Как я могу получить макет Bigtable с некоторыми данными для использования в модульном тестировании (ScalaTest с MockitoSugar)? Я создаю API поверх java API Hbase, и доступ к данным включает формирование ключей строк с использованием настраиваемой...
1274 просмотров
schedule
04.04.2022
Клиент GCP Bigtable Python потерял соединение
У меня возникла проблема с клиентом GCP Bigtable Python: он иногда терял соединение с Bigtable и вызывал ошибку сервера.
Сообщение об ошибке прилагается ниже. Это случилось, когда я пытался писать в Bigtable. Я также заметил, что, когда сервер...
129 просмотров
schedule
14.04.2022
Укажите зону для гибкой среды Google Cloud App Engine
Вопрос: Есть ли способ указать зону, в которой будет находиться гибкая среда Google Cloud App Engine? Если нет, то каковы альтернативы?
Контекст. У меня есть конфигурация, в которой я использую App Engine для записи и чтения в Bigtable....
434 просмотров
schedule
20.06.2023
Почему в BigTable есть семейства столбцов?
Почему BigTable структурирован как двухуровневая иерархия «семейство: квалификатор»? В частности, почему это принудительно, а не просто наличие столбцов и, скажем, рекомендация пользователям называть свои квалификаторы «вертикаль: столбец»?
Меня...
3174 просмотров
schedule
28.11.2022
Как подключиться к эмулятору bigtable с помощью командной строки cbt
Я выполнил команду gcloud beta emulators bigtable start , но когда я выполнил команду cbt listinstances , я получил ошибку ниже
Getting list of instances: rpc error: code = Unimplemented desc = unknown service...
1740 просмотров
schedule
12.12.2022
Загрузите данные Google Cloud Storage в bigtable
Есть ли простой способ или пример для загрузки данных Google Cloud Storage в bigtable ?
У меня много json файлов, созданных pyspark, и я хочу загрузить данные в bigtable .
Но я не могу найти простого способа сделать это!
Я пробовал...
1516 просмотров
schedule
20.03.2024
Атомарность BigTable checkAndMutate
Каково поведение checkAndMutate ? Допустим, мне нужно получить содержимое строки перед применением checkAndMutate . Есть ли шанс получить устаревшие данные из BigTable? Если нет возможности получить устаревшие данные, хорошо ли я думаю:...
379 просмотров
schedule
20.11.2022
Горячие точки Bigtable - изменение наименее значимого ключа строки
У меня есть таблица, в которой я храню информацию о товарах. Формат ключа строки: UUID подразделения + идентификатор продукта + серийный номер продукта. Каждый из ключевых компонентов строки имеет фиксированную байтовую длину.
Запись в таблицу...
399 просмотров
schedule
26.01.2023
