실패한 현장 시험이 애초에 유효했는지 어떻게 판단하나요?

이 점검은 세정제, 쿨런트, 윤활유, 수처리제 같은 산업용 화학제품의 현장 시험 가운데, 시험 전에 정한 기준으로 판정하는 경우에 적용합니다. 의약품, 식품, 임상 시험은 각자의 규정을 따릅니다. 여기서 인용하는 FDA 지침은 의약품 시험실에 적용되는 문서이며, 화학 공장의 규칙이 아니라 추론의 본보기로 씁니다.

실패한 현장 시험을 판단하기 전에 무엇이 필요한가요?

실패한 현장 시험을 판단하려면 기록 다섯 가지가 있어야 합니다. 성공 기준과 중단 기준을 담은 시험 계획서, 샘플 기록, 운전 일지, 대조군 또는 기준 데이터, 그리고 모든 원측정값입니다. 가장 중요한 것은 계획서입니다. NIST/SEMATECH e-Handbook은 실험 설계를 "실험을 하기 전에 상세한 실험 계획을 미리 세우는 것"으로 정의합니다(NIST/SEMATECH e-Handbook, section 5.1.1, accessed 2026). 결과를 안 뒤에 쓴 기준으로는 아무것도 판정할 수 없습니다. 결과에 맞게 바꿀 수 있기 때문입니다.

샘플 기록에는 제품명, 로트 또는 배치, 납품일, 시험성적서(CoA), 용기 보관 방법을 적습니다. 운전 일지에는 투입량이나 농도, 온도, 라인 속도, 라인과 근무조를 시각과 함께 적습니다. 기준 데이터는 시험 제품 없이 같은 라인에서 같은 방법으로 측정한 데이터입니다. 원측정값은 요약한 평균이 아니라 측정값 하나하나를 뜻합니다.

원인을 두고 논쟁이 시작되기 전에 이 자료부터 모읍니다. 의약품 시험실을 위한 FDA 지침은 평가를 "OOS 결과의 원인에 대한 선입견 없이" 시작하라고 하며(FDA, 2022), 같은 원칙이 현장 시험 검토도 지켜 줍니다. 제품과 공정 유체의 보관 샘플을 남겨 두고, 제품의 물질안전보건자료(SDS)가 정한 대로 보관하고 다룹니다. 그래야 샘플이 의심스러울 때 다시 시험할 수 있습니다.

실패한 현장 시험은 단계별로 어떻게 확인하나요?

실패한 현장 시험은 5단계로 확인하며, 결과는 앞의 네 단계를 통과한 뒤에만 읽습니다. 단계마다 기록 하나를 계획과 비교하고 그 결과를 적어 둡니다. 그래야 다른 사람도 같은 검토를 되풀이할 수 있습니다.

1. 샘플을 확인합니다. 용기 라벨, 시험성적서, 시험 기록의 로트 번호가 같은지 대조합니다. 보관 조건과 경과 기간을 기술자료(TDS)와 비교합니다. 결과표에 로트를 적습니다.

2. 투입량과 운전 조건을 확인합니다. 기록된 투입량, 농도, 온도, 라인 속도를 계획 범위와 비교하고, 범위를 벗어난 구간마다 시작, 끝, 벗어난 정도를 표시합니다.

3. 대조군 또는 기준 데이터를 확인합니다. 같은 라인, 같은 측정법, 비교할 만한 기간에서 나온 것이어야 합니다. 다른 라인이나 다른 계절의 기준 데이터는 인정하지 않습니다.

4. 데이터 완전성을 확인합니다. 계획한 운전 기간을 채웠는지, 계획한 측정값이 모두 있는지, 계기를 점검했는지 확인합니다. NIST/SEMATECH 점검 목록은 "계측기와 측정 장치의 성능부터 확인한다"를 맨 위에 둡니다(NIST/SEMATECH e-Handbook, section 5.1.3, accessed 2026).

5. 결과를 읽습니다. 계획서에 정한 기준을 바꾸지 않고, 그 기준과 비교합니다.

1, 2, 3, 4단계 중 하나를 통과하지 못하면 멈춥니다. 그 시험은 판정 불가입니다. 무엇을 기록하고 어떻게 재시험할지는 이어지는 절에서 설명합니다.

현장 시험이 실패가 아니라 무효가 되는 것은 어떤 경우인가요?

현장 시험이 무효가 되는 것은 제품이 아닌 다른 원인이 결과를 일으켰을 수 있는 사건이 문서로 남아 있거나, 설계상의 빈틈 때문에 제품의 효과를 읽을 수 없을 때입니다. 실패는 유효한 시험이 계획서에 정한 기준을 맞추지 못한 경우에만 해당합니다. 둘을 가르는 것은 근거이지, 결과가 얼마나 반갑지 않은지가 아닙니다. FDA 지침은 결과를 무효로 하는 일은 "OOS 결과를 일으켰다고 합리적으로 판단할 수 있는 시험상의 사건을 관찰하고 문서화한 경우에만 할 수 있다"고 밝힙니다(FDA, 2022). 조사에서 원인을 찾지 못하고 결과를 확인하지도 못했다면, 지침은 그 결과를 "충분히 고려해야 한다"고 말합니다(FDA, 2022). 현장 시험에서는 이로부터 간단한 규칙을 생각할 수 있습니다. 문서화된 사건이 없고 대조군 누락이나 짧은 운전 같은 설계상의 빈틈도 없으면 무효로 하지 않으며, 실패 판정은 그대로 남습니다.

아래 표를 보면 실패한 결과를 제품에 대한 판정으로 읽어도 되는지, 새 시험으로 넘겨야 하는지 정할 수 있습니다.

핵심은 대조군 행입니다. 같은 라인과 같은 방법으로 얻은 기준 데이터가 없으면, 깨끗하게 끝난 운전이라도 제품의 효과와 운전 간 변동을 구분할 수 없습니다. 그래서 이런 시험은 대조군을 두고 재시험합니다.

현장 시험에 맞는 제품 샘플을 썼는지 어떻게 확인하나요?

현장 시험 샘플을 확인하려면 용기 하나를 납품부터 라인까지 추적해, 로트, 상태, 사용 농도가 시험 기록과 맞는지 봅니다. 먼저 서류를 대조합니다. 드럼이나 토트에 인쇄된 로트 번호, 시험성적서의 로트, 시험 기록에 적힌 로트가 같아야 합니다. 일치하지 않으면 그 자체로 문서화된 사건이며, 검토를 멈추기에 충분합니다.

다음으로 상태를 확인합니다. 납품일과 개봉일, 보관 온도를 기술자료(TDS)의 유효 기간, 보관 한계와 비교합니다. 그런 다음 같은 용기에서 남겨 둔 보관 샘플로 시험성적서에 나온 물성 한두 가지를 시험성적서가 지정한 방법으로 시험합니다. 농도, 밀도, pH 같은 물성입니다. 결과가 시험성적서 값과 시험법이 밝힌 재현성(실험실 간 한계)보다 크게 차이 나면, 제품 설계가 아니라 샘플에 문제가 있다는 신호입니다.

마지막으로 실제로 공정에 들어간 것을 확인합니다. 현장에서 희석해 쓰는 제품이 많으므로, 실제 샘플은 사용액입니다. 시험 중에 조나 섬프에서 채취한 사용액을 적정이나 굴절계로 측정하면, 계획한 농도에 한 번이라도 도달했는지 알 수 있습니다. 측정할 때는 제품 SDS 8항에 적힌 보호구를 착용합니다. FDA 지침도 시험실에서 같은 논리를 설명합니다. 조사 결과 "원래 샘플이 부적절하게 조제되어 배치 품질을 대표하지 못했다"는 사실이 드러날 수 있다는 것입니다(FDA, 2022). 비교한 내용과 그 결과를 하나하나 시험 파일에 기록합니다.

현장 시험 조건이 시험 계획과 맞았는지 어떻게 확인하나요?

현장 시험 조건을 확인하려면 관리 요인마다 운전 일지를 계획 범위와 구간별로 비교하고, 이탈이 있을 때마다 시각, 크기, 지속 시간을 적습니다. 대표적인 요인은 투입량이나 농도, 온도, 라인 속도, 부하, 수질, 전단 공정입니다. 이탈이 문제가 되는 것은 결과를 움직인다고 알려진 요인에서 일어났을 때입니다.

어려운 부분은 어떤 요인이 결과를 움직이는지 아는 것입니다. 견고성 시험(ruggedness test)의 표준 실무인 ASTM E1169-21(2026)은 "측정값에 크게 영향을 주는 요인을 찾고" "그 요인을 얼마나 엄격하게 관리해야 하는지 추정하기" 위해 마련되었습니다(ASTM E1169-21(2026)). 이 표준은 시험법을 다루지만, 생산 라인에서도 질문은 같습니다. 시험 계획서에서 요인의 순위를 정해 두지 않았다면, 온도, 농도, 오염, 전단 공정에서 생긴 이탈은 모두 결정적일 수 있다고 보고 다룹니다.

서서히 변하는 드리프트와 함께 계획에 없던 변경도 찾아야 합니다. NIST/SEMATECH 점검 목록은 "운전 중 공정의 드리프트와 이동에 주의한다", "계획에 없는 변경을 피한다(예: 중간에 작업자 교대)"라고 경고합니다(NIST/SEMATECH e-Handbook, section 5.1.3, accessed 2026). 시험 기간 중 수리, 다른 약품 변경, 원료 로트 변경, 근무조 교대가 있었는지 정비 부서와 생산 부서에 물어봅니다. 대조 기간에도 일어난 이탈은 시험 기간에만 일어난 이탈보다 비교를 덜 흔듭니다.

판단할 수 없는 현장 시험은 어떻게 처리하나요?

판단할 수 없는 현장 시험은 판정 불가로 기록하고, 통과하지 못한 확인 항목, 그 근거, 재시험에서 바꿔야 할 점을 함께 적습니다. 제품 실패로 보고하지 않습니다. "판정 불가"라고 적으면 양쪽 모두 보호됩니다. 망가진 시험 때문에 제품이 불합격되지도 않고, 그런 시험으로 승인되지도 않습니다.

지름길 두 가지는 상황을 더 나쁘게 만듭니다. 원래 결과와 재시험 결과를 평균하면 문제가 가려집니다. FDA 지침은 이런 평균이 "개별 결과 사이의 변동을 가리기 때문에 적절하지 않다"고 말합니다(FDA, 2022). 한 번 합격할 때까지 재시험을 되풀이하는 것은 FDA가 "testing into compliance"라고 부르는 방식입니다(FDA, 2022). 회차마다 결과를 따로 보고하고, 계획서에서 재시험을 몇 번까지 허용할지 미리 정해 둡니다.

재시험은 빈틈을 메우는 데만 맞춰 설계합니다. 로트를 확인하고, 대조군을 추가하고, 조건을 기록하고, 전체 기간을 운전하되, 원래 기준은 바꾸지 않습니다. NIST/SEMATECH e-Handbook은 "큰 실험 하나로 모든 답을 얻으려 하기보다 작은 실험을 차례로 하도록 계획하는 편이 나은 경우가 많다"고 조언합니다(NIST/SEMATECH e-Handbook, section 5.1.3, accessed 2026). 특수화학 기술 추론을 위한 응용 AI 회사 루빈플라는 이런 케이스를 회사의 시험 문서와 현장 이력을 근거로 작업합니다. 개별 결과를 보기 전에 시험의 유효성부터 판단하고, 무효인 시험은 판정 불가로 남겨 새 시험으로 넘기며, 출처를 밝힌 문서 한 건으로 정리해 검토용으로 드립니다.