Вопросы по теме 'azure-hdinsight'
Hadoop в Azure Создание нового кластера
Я могу создать новый кластер Hadoop через интерфейс, но мне нужно создать новый кластер по запросу. Кто-нибудь знает, существует ли API для создания нового кластера?
324 просмотров
schedule
18.03.2023
HDInsight — кластер не отвечает
Я только начал изучать HDInsight, но он не работает должным образом.
Когда я устанавливаю новый HDInsight, он работает хорошо, но если я перезагружаю или перезапускаю систему, сервер не может распознать кластер.
Сообщение выглядит так: «Ваш...
807 просмотров
schedule
25.09.2022
rdeskop в HDInsight
Как подключиться к виртуальной машине HDInsight из Linux? Попытка подключиться к rdesktop выдает следующую ошибку.
rdesktop -u admin myclustername.azurehdinsight.net:3389
ERROR: Connection closed
413 просмотров
schedule
27.06.2022
HDInsight и хранилище таблиц Azure
Мне интересно, можно ли использовать хранилище таблиц Azure в качестве источника данных для задач сопоставления / сокращения в кластере HDInsight.
Очевидно, что данные можно экспортировать из табличного хранилища в плоский файл, а затем...
868 просмотров
schedule
08.04.2024
Как настроить и перезагрузить кластер HDInsight, работающий в Azure?
В частности, я хочу изменить максимальное количество преобразователей и максимальное количество преобразователей для каждого узла в кластере HDInsight, работающем в Microsoft Azure.
Используя удаленный рабочий стол, я вошел в головной узел. Я...
2278 просмотров
schedule
27.03.2022
Можно ли удаленно запустить задание по сокращению потоковой карты в Azure?
Как удаленно запустить задание Streaming Map Reduce в кластере Azure с помощью C#? Мои мапперы и редукторы написаны либо на Java, либо на C++. Метод выполнения задания .Net C# SDK принимает на вход JobType, поэтому я не могу указать тип...
335 просмотров
schedule
13.05.2022
Локальная эмуляция для Azure + HDInsight
Задача состоит в том, чтобы реализовать часть T (преобразование) проекта ETL в облаке Azure. Я считаю, что HDInsight — правильный сервис для этого, но не уверен. Подтвердите или отклоните этот выбор.
Я совершенно новичок в этой области и был...
1410 просмотров
schedule
11.01.2024
Как настроить входные/выходные пути HDInsight так, чтобы они указывали на Azure Storage Vault (ASV) в эмуляторе локального хранилища?
Я пытаюсь создать простое задание map/reducer для hdinsight, но у меня возникают проблемы с подключением задания в локальном кластере hdinsight hadoop к локальному эмулятору хранилища Azure через ASV://
Пример такого кода:
var hadoop =...
810 просмотров
schedule
01.07.2023
Azure HDInsight: что такое головной узел в кластере hadoop?
Я только что настроил кластер Hadoop в HDInsight и пытаюсь начать работу с Hadoop. Я включил удаленный вход в кластер и вошел в него. Я скопировал данные для обработки в этот ящик со своего рабочего стола. В документации это поле называется...
6090 просмотров
schedule
14.12.2022
Hadoop HDInsight Developer Preview Hive Linked server
Здравствуйте, у меня Hive таблица настроена в HDInsight Developer Preview из файла журнала со следующей схемой:
drop table iislog;
create external table iislog (
sdate STRING,
stime STRING,
cip STRING,
csusername STRING,
sip...
359 просмотров
schedule
24.01.2023
Как я могу отправить задания HDInsight из nodejs/REST API
Я ищу способ отправлять задания Pig/Hive из моего приложения node.js. Для этого мне нужен какой-то node.js sdk или REST Api для службы. Что-то подобное существует.
Я провел некоторое исследование, и официальный пакет npm azure обрабатывает только...
860 просмотров
schedule
25.05.2022
Масштабируемость HDInsight при использовании службы хранилища Azure
Привет, я играю с HDInsight. Я помещаю файлы журналов в хранилище Azure, а затем использую внешние таблицы Hive для сопоставления с ними. Я считаю, что Microsoft рекомендует хранилище Azure для HDFS, чтобы вы могли удалять и воссоздавать кластеры...
153 просмотров
schedule
23.06.2022
Как программно отправлять запросы Hive с помощью C# в эмуляторе HDInsight?
Я установил один узел HDInsight Emulator в системе Windows 8. Я хочу программно отправлять запросы куста в эмуляторе HDInsight. Пожалуйста, предложите мне несколько способов отправки запросов Hive с помощью C# .
2656 просмотров
schedule
22.04.2023
Как отправлять рекомендации mahout Вакансии с помощью HDInsight .NET SDK
Я новичок в HDInsight. Я хочу изучать и практиковать машинное обучение, HDInsight — это как раз то, что мне нужно, но, похоже, прямого API для mahout нет. Поскольку рекомендация mahout по существу преобразуется в задание mapredure, поэтому я...
448 просмотров
schedule
28.03.2024
синтаксически неверная ошибка при отправке заданий Oozie в HDInsight с помощью Invoke-RestMethod
Invoke-RestMethod : Состояние HTTP 400 — тип Описание сообщения отчета о состоянии Запрос, отправленный клиентом, был синтаксически неправильным.
1566 просмотров
schedule
10.05.2023
Ошибка HDInsight
Я следую инструкциям по приведенной ниже ссылке, чтобы использовать кластеры Hadoop 2.2 с HDInsight. http://azure.microsoft.com/en-us/documentation/articles/hdinsight-get-started-30/
В разделе «Выполнить задание по сокращению количества слов» у...
177 просмотров
schedule
26.05.2023
HDInsight Oozie: параметры задания Hive
Я работаю над автоматизацией заданий Hive с помощью сценариев Oozie. В workflow.xml я могу получить значения из файла сценария powershell (скрипт задания Oozie). Где в файле hql я не могу получить значения, определенные в файле сценария powershell...
933 просмотров
schedule
23.06.2022
ParseExceptions при использовании файла HQL в HDInsight
Я следую этому руководству http://azure.microsoft.com/en-us/documentation/articles/hdinsight-use-hive/ , но застрял при изменении источника запроса для использования файла.
Все это работает успешно при использовании...
751 просмотров
schedule
19.04.2022
Подключить хауп в C#
Я хочу подключить hadoop в С# с помощью HDInsight. Я создал кластер в AZURE, и он был успешно создан. а также я включил в нем подключение к удаленному рабочему столу. Когда я ввожу учетные данные на С# и выполняю задание, я получаю сообщение об...
750 просмотров
schedule
06.04.2023
Включение доступа RDP к кластеру HDInsight через PowerShell
Я создал кластер HDInsight с помощью PowerShell и включил к нему RDP-доступ, войдя на портал управления Azure. Однако я хотел знать, можно ли включить RDP-доступ к кластеру HDInsight через PowerShell. Если да, дайте несколько указаний.
385 просмотров
schedule
05.06.2023
