Написание эффективных запросов в SAS с использованием proc sql с Teradata

самое важное, что нужно понять при использовании SAS для доступа к данным в Teradata (или любой другой внешней базе данных), - это то, что программное обеспечение SAS готовит SQL и отправляет его в базу данных. Идея состоит в том, чтобы попытаться освободить вас (пользователя) от всех конкретных деталей базы данных. SAS делает это, используя концепцию под названием "implict pass-through", что просто означает, что SAS выполняет перевод из кода SAS в код СУБД. Среди многих вещей, которые происходят, это преобразование типа данных: SAS имеет только два (и только два) типа данных: числовой и символьный.

SAS занимается переводом вещей для вас, но это может быть запутанным. Например, я видел "ленивые" таблицы базы данных, определенные столбцами VARCHAR(400), имеющие значения, которые никогда не превышают некоторую меньшую длину (например, столбец для имени человека). В базе данных это не большая проблема, но поскольку SAS не имеет типа данных VARCHAR, он создает переменную шириной 400 символов для каждой строки. Даже с набором данных сжатие, это действительно может сделать результирующий набор данных SAS излишне большим.

альтернативный способ-использовать "явный сквозной", где вы пишете собственные запросы, используя фактический синтаксис рассматриваемой СУБД. Эти запросы выполняются полностью на СУБД и возвращают результаты обратно в SAS (который по-прежнему выполняет преобразование типов данных для вас. Например, вот" сквозной " запрос, который выполняет соединение с двумя таблицами и создает набор данных SAS как результат:

proc sql;
   connect to teradata (user=userid password=password mode=teradata);
   create table mydata as
   select * from connection to teradata (
      select a.customer_id
           , a.customer_name
           , b.last_payment_date
           , b.last_payment_amt
      from base.customers a
      join base.invoices b
      on a.customer_id=b.customer_id
      where b.bill_month = date '2013-07-01'
        and b.paid_flag = 'N'
      );
quit;

обратите внимание, что все внутри пары скобок является собственным Teradata SQL и что сама операция соединения выполняется внутри базы данных.

пример кода, который вы показали в вашем вопросе не полный, рабочий пример программы SAS/Teradata. Чтобы лучше помочь, вам нужно показать реальную программу, включая любые ссылки на библиотеку. Например, предположим, что ваша реальная программа выглядит так это:

proc sql;
   CREATE TABLE subset_data AS
   SELECT bigTable.id,
          SUM(bigTable.value) AS total
   FROM   TDATA.bigTable bigTable
   JOIN   TDATA.subset subset
   ON     subset.id = bigTable.id
   WHERE  bigTable.date BETWEEN a AND b
   GROUP BY bigTable.id
   ;

это указывает на ранее назначенный оператор LIBNAME, через который SAS подключался к Teradata. Синтаксис этого предложения WHERE будет очень важен, если SAS даже сможет передать полный запрос в Teradata. (В вашем примере не показано, что означают" a "и" b". Очень возможно, что единственный способ SAS выполнить соединение-перетащить обе таблицы обратно в локальный рабочий сеанс и выполнить соединение на сервере SAS.

одно Я настоятельно рекомендую вам попытаться убедить администраторов Teradata разрешить вам создавать таблицы "драйверов" в некоторой базе данных утилит. Идея заключается в том, что вы создадите относительно небольшую таблицу внутри Teradata, содержащую идентификаторы, которые вы хотите извлечь, а затем используйте эту таблицу для выполнения явных соединений. Я уверен, что для этого вам понадобится немного более формальная подготовка базы данных (например, как определить правильный индекс и как "собирать статистику"), но с этими знаниями и способностями ваша работа будет просто летать.

я мог бы продолжать и продолжать, но я остановлюсь здесь. Я использую SAS с Teradata экстенсивно каждый день против того, что мне говорят, является одной из крупнейших сред Teradata на планете. Мне нравится программирование в обоих.