Настройка встроенного моделирования Spark

Функции Spark позволяют запускать модели Automated Analytics на базе Hadoop для лучшей производительности и масштабирования, а также для сокращения объемов передачи данных. Для моделей, которые используют Hadoop в качестве источника данных, вычисления обучения модели по умолчанию делегируются механизму Spark на базе Hadoop, когда это возможно.

Для делегирования обучения должны быть выполнены указанные ниже условия. В случаях, когда делегирование невозможно или эта опция не выбрана, вычисления для обучения выполняются механизмом моделирования Automated Analytics.

  • Требуется установка SAP Predictive Analytics 2.5 или более поздней версии.
  • Необходима доступность среды "больших данных" для Hadoop.
  • Необходимо настроить соединение с Hadoop с помощью ODBC-драйвера Hive, как описано в руководствах Connecting to your Database Management System.
  • Должны быть установлены версии распределения Hadoop, Hive и Spark, указанные в матрице доступности продуктов (PAM).Информация, опубликованная на сайте SAP
  • JAR-файлы соединений Spark и файлы соединений, предоставленные в установке SAP Predictive Analytics, должны быть настроены, как описано в руководствах Connecting to your Database Management System.
Примечание

Дополнительную информацию о настройке соединений с Hive и встроенным моделированием Spark см. в руководствах по конфигурации Connecting to your Database Management System на портале SAP Help Portal по адресу http://help.sap.com/pa#section5

Ограничение

Automated Analytics поддерживает встроенное моделирование Spark только для обучения моделей классификации с одиночной целью и случайной стратегией разделения. Для прочих типов моделей и расширенных функций приложение применяет стандартный процесс моделирования.

Чтобы отменить выбор поведения по умолчанию:

  1. Нажмите Начальная точка навигации Файл Следующий шаг навигации Предпочтения Конечная точка навигации или кнопку F2.
  2. На панели Делегирование обучения модели отмените выбор опции Использовать встроенное моделирование Spark, когда возможно.
  3. Чтобы сохранить изменения, нажмите кнопку ОК.

    Во время изменения предпочтений вы можете восстановить исходные настройки, нажав кнопку Сбросить.