Обработка нескольких таблиц фактов в Qlikview

видя популярность этого вопроса, я собираюсь добавить свое фактическое решение в микс, чтобы у людей был пример для работы, который по какой-то причине очень трудно найти для такой общей проблемы...

я приступил к созданию таблицы ссылок. Это решение по сей день кажется взломом, поскольку оно создает одну огромную таблицу, содержащую декартово произведение каждого из ваших ключей во всех ваших таблицах фактов... но это работает.

в проблема: у вас есть несколько таблиц фактов в базе данных; появление почти в каждой базе данных когда-либо. Некоторые (или все) из этих таблиц фактов имеют одни и те же ключевые поля; нет проблем, верно? Неправильный. К сожалению, из-за ассоциативной природы Qlik, вместо того, чтобы каждая из ваших таблиц фактов связывалась с их таблицами поиска, ваши таблицы фактов теперь связываются друг с другом и наносят ущерб вашей модели данных; создавая циклические ссылки и неисчислимое количество синтетических ключей.

Решение: создайте таблицу ссылок. Звучит просто, правда? Ну, это так, но это также очень плохо документировано и трудно понять без первоначального объяснения. Вам может быть интересно... что такое таблица? Это декартово произведение всех ключей из всех ваших таблиц фактов. Как это исправляет проблему? Он удаляет все нежелательные ассоциации между таблицами фактов, так как теперь каждая из них будет содержать только один уникальный объединенный ключ. Те уникальные ключи будут связаны только с таблицей ссылок, которая содержит все ваши уникальные объединенные ключи, а также все отдельные ключи. Таблица ссылок впоследствии будет ассоциироваться с вашими таблицами поиска, и все будет хорошо.

реализация:

эта реализация будет использовать две таблицы, содержащиеся в моем вопросе выше;test_scores_fact и enrollment_fact.

test_scores_fact     |    enrollment_fact      |    school            |    gender         |   ...
----------------     |    ---------------      |    ------            |    ------         |   ---
school_code (FK)     |    school_code (FK)     |    school_code (PK)  |    gender_id (PK) |
test_code (FK)       |    grade_id (FK)        |    school_name (FK)  |    gender_desc    |
grade_id (FK)        |    ethnicity_id (FK)    |    address           |    ...            |
gender_id (FK)       |    gender_id (FK)       |    ...               |
ethnicity_id (FK)    |    number_enrolled (F)  | 
subject_id (FK)      |
test_score (F)       |

FK = Foreign Key
PK = Primary Key
F = Fact

как вы можете видеть, две таблицы имеют перекрывающиеся ключи, school_code, grade_id, gender_id и ethnicity_id. В реляционной модели каждое ключевое поле имеет соответствующую таблицу с дополнительной информацией о ключе. Эта модель не совпадает с ассоциативной природой Qlikview, поскольку Qlikview связывает таблицы на основе имени Поля; даже если вы этого не хотите. Вы хотите, чтобы именованные поля связывались с их таблицами подстановки, однако вы не хотите, чтобы именованные поля в таблицах фактов связывались. К сожалению, вы не можете остановить это поведение. Необходимо реализовать ссылку Таблица...

1. в скрипте Qlikview создайте временную таблицу фактов, которая загружается во все поля из таблицы базы данных:

   [temp_test_scores]:
   LOAD school_code,
        test_code,
        grade_id,
        gender_id,
        ethnicity_id,
        subject_id,
        test_score;
   SQL SELECT * FROM <database connection>
   

2. объедините ключи и удалите все отдельные ключи:

   [test_scores]:
   LOAD school_code & '_' test_code & '_' grade_id & '_' gender_id & '_' ethnicity_id & '_' subject_id as test_key,
        test_score
   RESIDENT [temp_test_scores];
   

3. повторите шаги 1 и 2 для каждой таблицы фактов:

   [temp_enrollment]:
   LOAD school_code,
        grade_id,
        ethnicity_id,
        gender_id,
        number_enrolled;
   SQL SELECT * FROM <database connection>
   
   [enrollment]:
   LOAD school_code & '_' & grade_id & '_' & ethnicity_id & '_' & gender_id as enrollment_key,
        number_enrolled
   RESIDENT [temp_enrollment];
   

4. создайте таблицу ссылок, объединив отдельные ключи в один таблица:

   [temp_link_table]:
   LOAD DISTINCT
       school_code,
       test_code,
       grade_id,
       gender_id,
       ethnicity_id,
       subject_id
   RESIDENT [temp_test_scores];
   
   CONCATENATE ([temp_link_table])
   LOAD DISTINCT
       school_code,
       grade_id,
       ethnicity_id,
       gender_id,
       number_enrolled
   RESIDENT [temp_enrollment];
   
   /**
    * The final Link Table will contain all of the individual keys one time as well as your concatenated keys
    */
   [link_table]:
   LOAD DISTINCT
       school_code,
       test_code,
       grade_id,
       gender_id,
       ethnicity_id,
       subject_id,
       school_code & '_' test_code & '_' grade_id & '_' gender_id & '_' ethnicity_id & '_' subject_id as test_key,
       school_code & '_' & grade_id & '_' & ethnicity_id & '_' & gender_id as enrollment_key
   RESIDENT  [temp_link_table]
   

5. отбросьте временные таблицы, чтобы они не отображались в вашей модели данных:

   DROP TABLE [temp_test_scores];
   DROP TABLE [temp_enrollment];
   DROP TABLE [temp_link_table];
   

это удалит все ассоциации между вашими таблицами фактов, поскольку теперь между ними нет общих имен полей. Каждая таблица фактов будет ссылаться на таблицу ссылок с помощью созданного объединенного ключа. Затем таблица ссылок будет связываться с каждой отдельной таблицей подстановки. Модель данных Qlikview не будет содержать синтетических ключей или циклическая ссылка.

если вы создадите другую таблицу фактов в будущем, просто выполните шаги 1 и 2 еще раз и добавьте любые новые отдельные ключи в таблицу ссылок, а также добавьте новый объединенный ключ в таблицу ссылок. Он масштабируется без особых усилий.

Удачи!