Описание утилиты: Library Prep Batch
Library Prep Batch Checker — Контроль качества подготовки NGS-библиотек по батчам
ℹ️ Утилита выполняет комплексную оценку качества подготовки библиотек на уровне партии согласно CAP/CLIA, GATK Best Practices и ISO 15189:
ИНДИВИДУАЛЬНЫЕ СПЕЦИФИКАЦИИ:
• Concentration: Концентрация библиотеки в допустимом диапазоне для пулинга.
• Fragment Size: Средний размер фрагмента соответствует ожидаемому для типа библиотеки.
• Molarity: Молярность достаточна для кластеризации на flow cell.
• Adapter Dimers: Уровень димеров адаптеров ниже порога загрязнения.
• PCR Cycles: Число циклов амплификации не превышает лимит (избегание over-amplification).
• Input DNA: Количество входной ДНК соответствует минимуму протокола.
БАТЧ-УРОВЕНЬ МЕТРИКИ:
• Pass Rate: Доля образцов, прошедших все индивидуальные спецификации (≥90%).
• Concentration CV: Коэффициент вариации концентрации внутри батча (≤30%).
• Fragment Size CV: Коэффициент вариации размера фрагментов (≤15%).
• Outlier Detection: Образцы за пределами 2 SD от среднего батча.
• Historical Drift: Z-score среднего батча относительно исторической базовой линии.
• Max Adapter Dimer: Максимальный уровень димеров в любом образце батча.
⚠️ ВАЖНО:
• Подготовка библиотек — этап, где систематические ошибки затрагивают ВСЮ партию.
• Высокий CV концентрации (>30%) приводит к неравномерному представительству в пуле.
• Димеры адаптеров >5% конкурируют с библиотекой при кластеризации, снижая выход данных.
• Исторический дрейф (|Z| > 2) указывает на деградацию реагентов или изменение протокола.
• Over-amplification (>15 cycles) увеличивает дупликаты и bias покрытия.
Использование:
LibraryPrepBatchChecker.exe → демо-режим (вывод в консоль)
LibraryPrepBatchChecker.exe input.csv output.json → оценка ваших данных
📍 Область применения (Usage Where):
• NGS-лаборатории: Обязательный QC перед пулингом и секвенированием.
• Клиническая диагностика: Гарантия воспроизводимости между батчами.
• Разработка методов: Оптимизация протоколов подготовки библиотек.
• Аккредитация CAP/ISO: Документирование системы контроля качества пробоподготовки.
— ЗАЧЕМ ЭТО НУЖНО?
Некачественная библиотека не исправляется на этапе секвенирования.
Плохой батч расходует дорогостоящие ресурсы flow cell и задерживает выдачу результатов.
Систематические ошибки (старые реагенты, калибровка прибора) невидимы при проверке отдельных образцов.
Батч-уровневый анализ выявляет паттерны, недоступные при индивидуальном QC.
⚠️ КРИТИЧЕСКИ ВАЖНО:
• Pass Rate ≥ 90%: Ниже = системная проблема подготовки.
• Concentration CV ≤ 30%: Превышение = неравномерный пулинг = потеря данных.
• Fragment Size CV ≤ 15%: Высокий CV = проблема size selection или фрагментации.
• Adapter Dimers ≤ 5%: Выше = повторная очистка SPRI обязательна.
• Historical |Z| ≤ 2.0: Превышение = расследование причины дрейфа.
• Outliers ≤ 10%: Высокий % аутлайеров = нестабильный процесс.
• PCR Cycles ≤ Max: Over-amplification необратимо ухудшает качество.
Ключевые особенности утилиты:
• Двухуровневая проверка (индивидуальная + батч)
• Автоматический расчет CV, Z-score и аутлайеров
• Интеграция с историческими базовыми линиями
• Трёхуровневая классификация (Accepted / Review Required / Rejected)
• Детализация причин отказа для каждого образца
💡 Советы по использованию:
1. Baseline Establishment: Рассчитайте Historical Mean/SD из ≥20 валидированных батчей.
2. Trend Charts: Ведите контрольные карты Levey-Jennings для концентрации и размера.
3. Normalization: Используйте qPCR (не Qubit) для точной молярности перед пулингом.
4. SPRI Cleanup: При димерах >5% выполните двойную SPRI-очистку с соотношением 0.8×.
5. Root Cause: При REJECTED батче проводите расследование (реагенты, оператор, оборудование).
⚠️ Примечание: Данная утилита оценивает ФИЗИЧЕСКОЕ КАЧЕСТВО библиотек. Она не заменяет проверку содержания (on-target rate, coverage uniformity), которая выполняется после секвенирования (DepthUniformityChecker, LargePanelLiquidCgpRunChecker).
input.csv
BatchID,SampleID,LibraryType,PrepKit,Concentration_ng_uL,MinConcentration,MaxConcentration,MeanFragmentSize_bp,MinFragmentSize,MaxFragmentSize,Molarity_nM,MinMolarity,AdapterDimer_Percent,MaxAdapterDimer_Percent,PCRCycles,MaxPCRCycles,InputDNA_ng,MinInputDNA_ng,HistoricalMean_Concentration,HistoricalSD_Concentration
BATCH-2026-045,S001,WES,KAPA HyperPrep,28.5,2.0,100.0,380,200,700,12.5,2.0,0.8,5.0,8,15,50,10,27.0,7.0
BATCH-2026-045,S002,WES,KAPA HyperPrep,32.1,2.0,100.0,395,200,700,14.2,2.0,0.5,5.0,8,15,50,10,27.0,7.0
BATCH-2026-045,S003,WES,KAPA HyperPrep,25.8,2.0,100.0,370,200,700,11.8,2.0,1.2,5.0,8,15,50,10,27.0,7.0
BATCH-2026-045,S004,WES,KAPA HyperPrep,30.2,2.0,100.0,388,200,700,13.5,2.0,0.6,5.0,8,15,50,10,27.0,7.0
BATCH-2026-046,S005,Targeted,Agilent SureSelect,5.2,2.0,100.0,280,200,700,3.1,2.0,12.5,5.0,14,15,20,10,35.0,8.0
BATCH-2026-046,S006,Targeted,Agilent SureSelect,42.0,2.0,100.0,420,200,700,18.5,2.0,8.2,5.0,14,15,50,10,35.0,8.0
BATCH-2026-046,S007,Targeted,Agilent SureSelect,1.5,2.0,100.0,250,200,700,1.0,2.0,18.0,5.0,14,15,10,10,35.0,8.0
URS & FS — спецификация пользователя и функциональная спецификация
Документ описывает контролируемый интерфейс и поведение утилиты LibraryPrepBatchChecker для сценария Library Prep Batch Checker.
Предметные ограничения и критические параметры
Ниже приведены ключевые фрагменты исходного описания. Перед продуктивным применением пределы должны быть сверены с утверждённой спецификацией, регистрационным досье и локальными SOP.
- ℹ️ Утилита выполняет комплексную оценку качества подготовки библиотек на уровне партии согласно CAP/CLIA, GATK Best Practices и ISO 15189:
- • Pass Rate: Доля образцов, прошедших все индивидуальные спецификации (≥90%).
- • Concentration CV: Коэффициент вариации концентрации внутри батча (≤30%).
- • Fragment Size CV: Коэффициент вариации размера фрагментов (≤15%).
- • Outlier Detection: Образцы за пределами 2 SD от среднего батча.
- ⚠️ ВАЖНО:
- • Высокий CV концентрации (>30%) приводит к неравномерному представительству в пуле.
- • Димеры адаптеров >5% конкурируют с библиотекой при кластеризации, снижая выход данных.
- • Исторический дрейф (|Z| > 2) указывает на деградацию реагентов или изменение протокола.
- • Over-amplification (>15 cycles) увеличивает дупликаты и bias покрытия.
- • Аккредитация CAP/ISO: Документирование системы контроля качества пробоподготовки.
- ⚠️ КРИТИЧЕСКИ ВАЖНО:
- • Pass Rate ≥ 90%: Ниже = системная проблема подготовки.
- • Concentration CV ≤ 30%: Превышение = неравномерный пулинг = потеря данных.
- • Fragment Size CV ≤ 15%: Высокий CV = проблема size selection или фрагментации.
- • Adapter Dimers ≤ 5%: Выше = повторная очистка SPRI обязательна.
- • Historical |Z| ≤ 2.0: Превышение = расследование причины дрейфа.
- • Outliers ≤ 10%: Высокий % аутлайеров = нестабильный процесс.
URS — пользовательские требования
| ID | Требование | Критичность | Критерий приемки |
|---|
| URS-001 | Утилита должна принимать файл input.csv для Library Prep Batch Checker с заголовками, определёнными в контракте данных. | High | Файл обрабатывается без ручного изменения заголовков. |
| URS-002 | Утилита должна выполнять детерминированную оценку QC/ОКК без машинного обучения и без вероятностного принятия решения о соответствии. | High | При одинаковых входных данных, версии правил и конфигурации результат полностью воспроизводим. |
| URS-003 | Утилита должна валидировать обязательные поля, типы данных, диапазоны, единицы измерения и предметную правдоподобность значений. | High | Ошибки схемы, преобразования и диапазона явно отражаются в результате. |
| URS-004 | Утилита должна применять предметные пределы и правила из описания, утверждённой спецификации, регистрационного досье и локальных SOP. | High | Каждая проверка имеет результат PASS/WARNING/FAIL и понятное сообщение. |
| URS-005 | Утилита должна формировать output.json с машинно-читаемыми результатами, исходными значениями, предупреждениями, отказами и критическими находками. | High | JSON пригоден для LIMS/ELN/MES-интеграции и QA/QC review. |
| URS-006 | Утилита должна сохранять трассируемость между серией/образцом, входным файлом, применёнными правилами и итоговым статусом. | High | Выход содержит идентификаторы, список параметров и audit metadata. |
| URS-007 | Документация должна поддерживать подготовку IQ/OQ/PQ, CSV/CSA и обсуждение с инспекторами или внутренним QA. | Medium | URS, FS, контракт input/output и тестовые сценарии поставляются вместе с утилитой. |
| URS-008 | Утилита должна использоваться как decision-support инструмент QC, а не как замена утверждённым спецификациям и выпускному решению Qualified Person/QA. | Medium | В документации указан контроль change control и необходимость сверки пределов. |
Контракт input.csv
| # | Поле | Тип | Пример | Назначение |
|---|
| 1 | BatchID | string / controlled vocabulary | BATCH-2026-045 | Идентификатор серии/партии для трассируемости. |
| 2 | SampleID | string / controlled vocabulary | S001 | Идентификатор образца или лабораторной пробы. |
| 3 | LibraryType | string / controlled vocabulary | WES | Контролируемый входной параметр для детерминированных QC-правил. |
| 4 | PrepKit | string / controlled vocabulary | KAPA HyperPrep | Контролируемый входной параметр для детерминированных QC-правил. |
| 5 | Concentration_ng_uL | decimal | 28.5 | Отношение компонентов; структурный или рецептурный CQA. |
| 6 | MinConcentration | integer / decimal | 2.0 | Отношение компонентов; структурный или рецептурный CQA. |
| 7 | MaxConcentration | integer / decimal | 100.0 | Отношение компонентов; структурный или рецептурный CQA. |
| 8 | MeanFragmentSize_bp | decimal | 380 | Контролируемый входной параметр для детерминированных QC-правил. |
| 9 | MinFragmentSize | decimal | 200 | Контролируемый входной параметр для детерминированных QC-правил. |
| 10 | MaxFragmentSize | decimal | 700 | Контролируемый входной параметр для детерминированных QC-правил. |
| 11 | Molarity_nM | decimal | 12.5 | Контролируемый входной параметр для детерминированных QC-правил. |
| 12 | MinMolarity | decimal | 2.0 | Контролируемый входной параметр для детерминированных QC-правил. |
| 13 | AdapterDimer_Percent | decimal | 0.8 | Контролируемый входной параметр для детерминированных QC-правил. |
| 14 | MaxAdapterDimer_Percent | decimal | 5.0 | Контролируемый входной параметр для детерминированных QC-правил. |
| 15 | PCRCycles | integer / decimal | 8 | Контролируемый входной параметр для детерминированных QC-правил. |
| 16 | MaxPCRCycles | integer / decimal | 15 | Контролируемый входной параметр для детерминированных QC-правил. |
| 17 | InputDNA_ng | decimal | 50 | Биологический/молекулярный компонент, контролируемый как CQA. |
| 18 | MinInputDNA_ng | decimal | 10 | Биологический/молекулярный компонент, контролируемый как CQA. |
| 19 | HistoricalMean_Concentration | integer / decimal | 27.0 | Отношение компонентов; структурный или рецептурный CQA. |
| 20 | HistoricalSD_Concentration | integer / decimal | 7.0 | Отношение компонентов; структурный или рецептурный CQA. |
BatchID,SampleID,LibraryType,PrepKit,Concentration_ng_uL,MinConcentration,MaxConcentration,MeanFragmentSize_bp,MinFragmentSize,MaxFragmentSize,Molarity_nM,MinMolarity,AdapterDimer_Percent,MaxAdapterDimer_Percent,PCRCycles,MaxPCRCycles,InputDNA_ng,MinInputDNA_ng,HistoricalMean_Concentration,HistoricalSD_Concentration
BATCH-2026-045,S001,WES,KAPA HyperPrep,28.5,2.0,100.0,380,200,700,12.5,2.0,0.8,5.0,8,15,50,10,27.0,7.0
BATCH-2026-045,S002,WES,KAPA HyperPrep,32.1,2.0,100.0,395,200,700,14.2,2.0,0.5,5.0,8,15,50,10,27.0,7.0
BATCH-2026-045,S003,WES,KAPA HyperPrep,25.8,2.0,100.0,370,200,700,11.8,2.0,1.2,5.0,8,15,50,10,27.0,7.0
Правила валидации входных данных
| ID | Поле | Правило | Критичность |
|---|
| VR-001 | BatchID | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | High |
| VR-002 | SampleID | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | High |
| VR-003 | LibraryType | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | High |
| VR-004 | PrepKit | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-005 | Concentration_ng_uL | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-006 | MinConcentration | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-007 | MaxConcentration | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-008 | MeanFragmentSize_bp | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-009 | MinFragmentSize | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-010 | MaxFragmentSize | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-011 | Molarity_nM | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-012 | MinMolarity | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-013 | AdapterDimer_Percent | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-014 | MaxAdapterDimer_Percent | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-015 | PCRCycles | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-016 | MaxPCRCycles | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-017 | InputDNA_ng | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-018 | MinInputDNA_ng | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-019 | HistoricalMean_Concentration | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
| VR-020 | HistoricalSD_Concentration | Поле должно соответствовать утверждённому справочнику/словарю или допустимой строковой форме. | Medium |
FS — функциональная спецификация
| ID | Функция | Реализация |
|---|
| FS-001 | CLI execution | Поддержать режимы запуска: demo mode без аргументов и production mode input.csv output.json. |
| FS-002 | CSV import | Прочитать input.csv в UTF-8/CSV-совместимом формате, проверить наличие заголовка и ожидаемых колонок. |
| FS-003 | Schema validation | Проверить обязательные поля, количество колонок, неизвестные ключевые поля и пустые обязательные значения. |
| FS-004 | Type conversion | Преобразовать числовые, флаговые и текстовые значения; некорректный формат фиксировать как ошибку строки. |
| FS-005 | Domain rule engine | Применить правила для Library Prep Batch Checker, включая критические пределы из описания и утверждённой спецификации. |
| FS-006 | Status aggregation | Сформировать итоговый статус: FAIL при критическом отказе, WARNING при некритическом отклонении, PASS при соответствии. |
| FS-007 | JSON export | Записать output.json с детализацией проверок, исходными значениями, предупреждениями, отказами и critical findings. |
| FS-008 | Audit support | Сохранять структуру результата пригодной для review, расследования отклонений и воспроизведения расчёта. |
| FS-009 | Integration contract | Поддержать сценарий LIMS/ELN/MES → input.csv → utility → output.json → portal/admin review. |
| FS-010 | Error handling | Возвращать явные сообщения для отсутствующего файла, пустого CSV, неверной схемы, ошибки записи output.json и некорректного формата. |
Пример output.json
{
"utilityId": "libraryprepbatchchecker",
"utilityFolder": "LibraryPrepBatchChecker",
"package": "LiquidBiopsy",
"overallStatus": "PASS|WARNING|FAIL",
"sourceFile": "input.csv",
"processedAtUtc": "2026-06-10T00:00:00Z",
"checks": [
{
"parameter": "BatchID",
"value": "BATCH-2026-045",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-001"
},
{
"parameter": "SampleID",
"value": "S001",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-002"
},
{
"parameter": "LibraryType",
"value": "WES",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-003"
},
{
"parameter": "PrepKit",
"value": "KAPA HyperPrep",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-004"
},
{
"parameter": "Concentration_ng_uL",
"value": "28.5",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-005"
},
{
"parameter": "MinConcentration",
"value": "2.0",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-006"
},
{
"parameter": "MaxConcentration",
"value": "100.0",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-007"
},
{
"parameter": "MeanFragmentSize_bp",
"value": "380",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-008"
},
{
"parameter": "MinFragmentSize",
"value": "200",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-009"
},
{
"parameter": "MaxFragmentSize",
"value": "700",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-010"
},
{
"parameter": "Molarity_nM",
"value": "12.5",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-011"
},
{
"parameter": "MinMolarity",
"value": "2.0",
"status": "PASS|WARNING|FAIL",
"message": "Deterministic rule-based check result",
"ruleReference": "FS-RULE-012"
}
],
"criticalFindings": [],
"warnings": [],
"audit": {
"inputHash": "sha256:<calculated at runtime>",
"rulesVersion": "<utility executable version>",
"documentation": "LibraryPrepBatchChecker.documentation.html"
}
}
Матрица трассируемости
| URS | FS | Тест | Подтверждение |
|---|
| URS-001 | FS-001, FS-002 | OQ-001 | Проверить запуск и импорт валидного input.csv. |
| URS-002 | FS-005, FS-006 | OQ-004 | Повторить один и тот же набор данных и сравнить output.json. |
| URS-003 | FS-003, FS-004, FS-010 | OQ-002, OQ-003 | Проверить отсутствующие колонки и неверные типы. |
| URS-004 | FS-005, FS-006 | OQ-004, PQ-001 | Проверить критические отклонения по реальным/граничным данным. |
| URS-005 | FS-007, FS-009 | OQ-005 | Проверить JSON schema и пригодность для downstream-систем. |
| URS-006 | FS-008 | OQ-006 | Проверить наличие идентификаторов и audit metadata. |
| URS-007 | FS-008, FS-010 | IQ-001, OQ-007 | Проверить комплектность документации и control evidence. |
| URS-008 | FS-005, FS-008 | PQ-002 | Проверить review workflow и запрет автоматической замены QA-решения. |
IQ/OQ/PQ тестовые сценарии
| ID | Сценарий | Ожидаемый результат |
|---|
| IQ-001 | Проверить наличие executable, input.csv, документации и контрольной суммы. | Комплект поставки полон; версия зафиксирована. |
| OQ-001 | Валидная строка из примера input.csv. | PASS или допустимый WARNING согласно правилам. |
| OQ-002 | Удалить обязательную колонку из CSV. | Ошибка схемы или FAIL с указанием отсутствующей колонки. |
| OQ-003 | Внести нечисловое значение в числовое поле. | Ошибка преобразования типа с указанием строки/поля. |
| OQ-004 | Значение критического параметра вывести за предел. | FAIL и critical finding. |
| OQ-005 | Проверить структуру output.json. | Все обязательные секции присутствуют, JSON валиден. |
| OQ-006 | Проверить трассируемость серии/образца. | Идентификаторы входа и результатов совпадают. |
| PQ-001 | Проверить 3–5 реальных партий/образцов пользователя. | Результат подтверждён QC/QA review. |
| PQ-002 | Проверить workflow отклонения и ручного QA-решения. | Утилита поддерживает review, но не заменяет утверждённое решение. |
QA/QC и change control
- Не менять имена колонок без обновления валидатора, документации и тестового набора.
- Хранить
input.csv, output.json, версию исполняемого файла и контрольную сумму. - Перед продуктивным использованием провести IQ/OQ/PQ или эквивалентную CSV/CSA-проверку.
- Критические пределы должны быть сверены с утверждённой спецификацией, регистрационным досье и локальными SOP.
- Утилита предоставляет формализованный QC decision support, но окончательное решение выпуска остаётся за QA/QP и утверждёнными процедурами.