Os pipelines são compostos a partir de componentes versionados e declarativos que viajam com as suas dependências.
Emmy
Um orquestrador de espaço de trabalho que executa pipelines de investigação reprodutíveis em domínios científicos.
Um orquestrador de espaço de trabalho que viaja com a investigação. Os pipelines executam-se, repetem-se e auditam-se de forma idêntica.
Orquestração que viaja com a investigação
O Emmy é a ferramenta de orquestração que usamos para manter a investigação científica reprodutível entre domínios. Compõe os nossos blocos de construção de investigação em pipelines que podem ser executados, repetidos e auditados, com o versionamento de dados e a gestão de dependências visíveis para os cientistas que o utilizam. É a camada que permite a um resultado passar de um notebook para um artefacto defensável.
Três propriedades
Os replays são deterministas. Reexecutar um pipeline produz os mesmos artefactos, exceto se as entradas mudaram — e essa alteração é visível.
O Emmy é usado em biologia, materiais e cognição sem se tornar um framework de domínio. É fluxo de trabalho, não modelação.
Cinco replays. Um hash.
O mesmo pipeline produz o mesmo artefacto sempre que as entradas coincidem. Quando as entradas mudam, a alteração é visível ao nível da linha.
Quatro tipos, compostos em qualquer coisa.
entrada versionada — dados, modelo ou artefacto fixado por hash.
transformação determinista de entradas em saídas.
classificada face a um conjunto fixo, a saída inclui o traço.
artefacto final fixado à execução, repetível de ponta a ponta.
Um orquestrador, três ciências.
biologia
pipelines de sequências, predição de estrutura, análises multietapa com referências versionadas.
materiais
execuções de fluxo de silício, varrimentos de blocos analógicos, pipelines de layout-para-LVS mantidos reprodutíveis entre processos.
cognição
pipelines de treino e avaliação para investigação do substrato cognitivo, incluindo execuções multissemente.
Porque o construímos
A velocidade da investigação está limitada pela infraestrutura de reprodutibilidade. O Emmy é a nossa resposta: um orquestrador de espaço de trabalho que permite a um cientista entregar um pipeline a um colaborador e receber de volta a mesma resposta.