Авторы

Масштабируемая система управления исследовательскими данными с определяемыми пользователем типами

Разработана система управления исследовательскими данными MatInf, ориентированная на поддержку групп исследователей, работающих с большими объемами данных, полученными в ходе высокопроизводительных экспериментов в области неорганического материаловедения. Одной из ключевых особенностей системы является ее архитектура, обеспечивающая полную поддержку пользовательских типов данных, определяемых после развертывания. Это достигается за счет гибкой конфигурации системы, позднего связывания типов данных с веб-сервисами и интеграции механизмов валидации, извлечения и визуализации данных. В рамках работы проведен детальный анализ требований к ­­RDMS, а также сформулированы ключевые задачи, возникшие при разработке. Для их решения применены методы, ранее не использовавшиеся в данном контексте, что составляет научную новизну работы. Для обеспечения гибкости и расширяемости система поддерживает интеграцию с внешними ­­API-сервисами (для пользовательских форматов данных) и предоставляет доступ к данным по ­­API, обеспечивая возможности для интеграции с другими системами, например инструментами машинного обучения. ­­RDMS разработана на основе ­­ASP.Net Core и реляционной ­­СУБД Microsoft ­­SQL Server, что гарантирует ее надежность, производительность и масштабируемость. Приведены примеры использования системы для накопления экспериментальных данных, документирования экспериментов и повышения воспроизводимости исследований. Открытая архитектура и свободное распространение системы делают ее достаточно универсальным инструментом для цифровизации исследований в области неорганического материаловедения, позволяя адаптировать платформу под различные задачи, включая поддержку новых типов данных и интеграцию с внешними аналитическими инструментами. Оригинальность разработки заключается в отсутствии свободно распространяемых альтернативных решений, способных осуществлять типизированное хранение материаловедческих данных (а значит, осуществлять поиск по количественному составу вещества), поддерживать расширяемую систему пользовательских типов и интегрироваться с произвольными форматами исследовательских документов без изменения ядра системы. Читать дальше...