Lua vs Embedded Lisp и потенциальные другие кандидаты. для обработки данных

Нынешний Выбор: в Lua-JIT-компилятором. Впечатляющие ориентиры, я привыкаю к синтаксису. Написание высокопроизводительного ABI потребует тщательного рассмотрения того, как я буду структурировать свой C++.

другие вопросы, представляющие интерес

1. Gambit-C и коварство как встраиваемые языки
2. Lua Советы По Производительности (есть возможность запуска с отключенным сборщиком и вызова сборщика на конец выполнения (ов) обработки всегда является опцией).

фон

Я работаю над высокообъемной (сложной) системой обработки событий в реальном времени. У меня есть DSL, который представляет схему структуры событий в источнике, формат хранения, определенные доменные конструкции, запуск внутренних событий (для структурирования и обработки общего назначения) и кодирование определенных шагов обработки, которые всегда происходят.

DSL выглядит очень похоже на SQL, infact я использую berkeley db (через интерфейс sqlite3) для долгосрочного хранения событий. важной частью здесь является то, что обработка событий выполняется на основе набора, например SQL. Однако я пришел к выводу, что я не должен добавлять логику обработки общего назначения в DSL, а скорее вставлять lua или lisp, чтобы позаботиться об этом.

обработка ядра строится вокруг буст::асио, это многопоточный, ЭКП осуществляется через буферы протокола событий кодируются с использованием библиотеки IO буфера протокола-т. е. события не структурированы с использованием объекта буфера протокола, они просто используют ту же библиотеку кодирования/декодирования. Я создам объект dataset, содержащий строки, очень похожие на то, как компонент database engine хранит в наборах памяти. этапы обработки в DSL будут сначала рассмотрены, а затем представлены логике обработки общего назначения.

независимо от того, какую встраиваемую среду сценариев я использую, каждый поток в моем ядро обработки, вероятно, нуждается в собственной среде embedded-language-environment (именно так lua требует, чтобы это было, по крайней мере, если вы выполняете многопоточную работу).

вопрос(ы)

на данный момент выбор между lisp ECL и lua. Имея в виду, что производительность и пропускная способность являются сильным требованием, это означает, что очень желательно минимизировать выделение памяти:

1. Если бы Вы были в моем положении, какой язык вы бы выбрал ?

2. есть ли какие-либо альтернативы, которые я должен рассмотреть (не предлагайте языки, которые не имеют встраиваемой реализации). Возможно, Javascript v8 ?

3. подходит ли lisp для домена лучше ? Я не думаю, что lua и lisp настолько отличаются с точки зрения того, что они предоставляют. Позовите меня: D

4. есть ли другие свойства (например, приведенные ниже), о которых я должен думать ?

5. I утверждайте, что любая форма встроенного ввода-вывода базы данных (см. Пример DSL ниже для контекста) затмевает вызов языка сценариев на порядки, и что выбор либо не добавит много накладных расходов к общей пропускной способности. Я на правильном пути ? : D

Нужные Свойства

1. Я хотел бы отобразить мой набор данных в список lisp или таблицу lua, и я хотел бы минимизировать избыточные копии данных. Например, добавление строки из одного набора данных в другой следует попытаться использовать ссылочную семантику, если обе таблицы имеют одинаковую форму.

2. Я могу гарантировать, что набор данных, переданный в качестве входных данных, не изменится, пока я сделал вызов lua/lisp. Я хочу, чтобы lua и lisp принудительно не изменяли набор данных, если это возможно.

3. после завершения встроенного вызова наборы данных должны быть уничтожены, любые созданные ссылки должны быть заменены копиями (я думаю).

DSL пример

я прикрепляю DSL для вашего удовольствия от просмотра, чтобы вы могли получить представление о том, чего я пытаюсь достичь. Примечание: DSL не показывает обработку общего назначения.

// Derived Events : NewSession EndSession
NAMESPACE WebEvents
{
  SYMBOLTABLE DomainName(TEXT) AS INT4;
  SYMBOLTABLE STPageHitId(GUID) AS INT8;
  SYMBOLTABLE UrlPair(TEXT hostname ,TEXT scriptname) AS INT4;
  SYMBOLTABLE UserAgent(TEXT UserAgent) AS INT4;  

  EVENT 3:PageInput
  {
    //------------------------------------------------------------//
    REQUIRED 1:PagehitId              GUID
    REQUIRED 2:Attribute              TEXT;
    REQUIRED 3:Value                  TEXT; 

    FABRRICATED 4:PagehitIdSymbol     INT8;
    //------------------------------------------------------------//

    PagehitIdSymbol AS PROVIDED(INT8 ph_symbol)
                    OR Symbolise(PagehitId) USING STPagehitId;
  }

  // Derived Event : Pagehit
  EVENT 2:PageHit
  {
    //------------------------------------------------------------//
    REQUIRED 1:PageHitId              GUID;
    REQUIRED 2:SessionId              GUID;
    REQUIRED 3:DateHit                DATETIME;
    REQUIRED 4:Hostname               TEXT;
    REQUIRED 5:ScriptName             TEXT;
    REQUIRED 6:HttpRefererDomain      TEXT;
    REQUIRED 7:HttpRefererPath        TEXT;
    REQUIRED 8:HttpRefererQuery       TEXT;
    REQUIRED 9:RequestMethod          TEXT; // or int4
    REQUIRED 10:Https                 BOOL;
    REQUIRED 11:Ipv4Client            IPV4;
    OPTIONAL 12:PageInput             EVENT(PageInput)[];

    FABRRICATED 13:PagehitIdSymbol    INT8;
    //------------------------------------------------------------//
    PagehitIdSymbol AS  PROVIDED(INT8 ph_symbol) 
                    OR  Symbolise(PagehitId) USING STPagehitId;

    FIRE INTERNAL EVENT PageInput PROVIDE(PageHitIdSymbol);
  }

  EVENT 1:SessionGeneration
  {
    //------------------------------------------------------------//
        REQUIRED    1:BinarySessionId   GUID;
    REQUIRED    2:Domain            STRING;
    REQUIRED    3:MachineId         GUID;
    REQUIRED    4:DateCreated       DATETIME;
    REQUIRED    5:Ipv4Client        IPV4;
    REQUIRED    6:UserAgent         STRING;
    REQUIRED    7:Pagehit           EVENT(pagehit);

    FABRICATED  8:DomainId          INT4;
    FABRICATED  9:PagehitId         INT8;
    //-------------------------------------------------------------//

    DomainId  AS SYMBOLISE(domain)            USING DomainName;
    PagehitId AS SYMBOLISE(pagehit:PagehitId) USING STPagehitId;

    FIRE INTERNAL EVENT pagehit PROVIDE (PagehitId);
  } 
}

этот проект является компонентом исследовательского проекта PH. D и является / будет свободным программным обеспечением. Если вы заинтересованы в работе со мной (или содействии) в этом проекте, пожалуйста, оставьте комментарий: D