화학제품 데이터에 관한 AI 답변 검증 점검표

이 점검표는 이름이 특정된 화학제품에 대해 사실을 말하는 AI 답변을 다룹니다. 식별 정보, 물성값, 시험 방법, 그 근거 문서입니다. 배합 조언, 유해성 분류 작업, 규제 해석은 자격 있는 사람이 판단해야 하므로 다루지 않습니다. 어떤 1차 문서에도 기록되지 않은 값은 이 점검표로 확인할 수 없습니다.

AI가 답한 화학 정보는 언제 점검표로 검증해야 하나요?

AI 답변에서 나온 값, 식별 정보, 시험 방법이 고객, 규격, 안전 판단, 구매 주문서에 들어가기 전에 점검표로 검증합니다. 생성형 AI 도구는 틀린 값을 맞는 값만큼 자신 있게 말할 수 있습니다. NIST의 생성형 AI 프로파일은 "작화(Confabulation)"를 시스템이 "프롬프트에 대한 응답으로 오류이거나 거짓인 내용을 생성하고 자신 있게 제시하는" 현상으로 설명합니다. 또 출력에 "시스템의 답을 정당화하거나 설명한다고 내세우는, 지어낸 논리나 인용"이 포함될 수 있다고 적습니다(NIST AI 600-1, 2024).

이 점검표는 화학제품 제조사, 유통사, 사용 회사에서 어떤 도구로든 AI 답변을 받는 기술 지원, 품질, 규제, 구매 담당자를 위한 것입니다. 동료나 고객이 붙여 넣어 보낸 답변도 포함합니다. 쓰는 시점은 세 가지입니다. 답변을 회사 밖에 인용할 때, 답변에 따라 규격이나 주문을 바꿀 때, 두 답변이나 두 문서가 서로 다를 때입니다.

점검표는 16개 항목을 네 묶음으로 나눕니다. 식별 정보, 값과 단위, 시험 방법, 출처입니다. 항목마다 1차 문서로 검증하는 방법과 답변을 반려하는 조건을 적습니다. 결과는 답변마다 세 가지 판정 가운데 하나입니다. 사용, 수정 후 사용, 반려입니다. 빈 양식과 설명용 작성 예시를 담은 Word 점검표는 이 페이지 끝에 있습니다.

화학물질에 관한 AI 답변에서는 어떤 식별 정보를 확인해야 하나요?

화학물질에 관한 AI 답변에서는 식별 정보 네 가지를 확인합니다. 제품명과 등급, CAS 등록번호, CAS 번호와 해당 물질의 연결, 분자식입니다. 다른 물질이나 다른 등급에 관한 답변은 이후의 모든 점검에서 실패하므로, 식별 정보를 가장 먼저 확인합니다.

제품명과 등급은 라벨과 물질안전보건자료(SDS) 1번 섹션의 제품 식별자와 비교합니다. 미국 SDS에는 이 식별자가 들어가야 합니다(OSHA Appendix D, 2024). 제품군을 말하거나 다른 등급을 말하는 답변은 다른 제품에 관한 답변입니다.

CAS 등록번호의 형식을 확인합니다. CAS RN은 "하이픈으로 세 그룹으로 나뉜 최대 10자리 숫자"로 이루어지며, 마지막 부분은 한 자리 검증 숫자입니다(CAS, 2026). 검증 숫자를 계산하려면 검증 숫자 앞의 숫자에 오른쪽부터 차례로 1, 2, 3을 곱하고, 곱을 모두 더한 뒤 합의 끝자리를 취합니다. 계산이 맞지 않는 번호는 유효한 CAS RN이 아닙니다.

형식이 맞다고 해서 그 번호가 해당 물질의 번호라는 뜻은 아닙니다. CAS는 CAS RN을 "하나의 물질만을 지정하는" 식별자로 설명합니다(CAS, 2026). 따라서 CAS Common Chemistry나 SDS 3번 섹션에서 번호를 찾아봅니다. 분자식은 교차 확인에 유용합니다. 다만 미국화학회(ACS) 가이드가 경고하듯 "분자식 자체만으로는 물질을 고유하게 식별하기에 정보가 충분하지 않습니다"(ACS CINF, 1993).

AI가 답한 화학 정보의 단위와 값은 어떻게 확인하나요?

AI 답변의 단위와 값은 모든 숫자에 단위, 기준, 시험 조건, 상태(대표값, 규격 기준값, 로트 결과)가 붙어 있는지, 그 숫자가 인용된 문서에 있는지로 확인합니다. 이 중 하나라도 빠진 숫자는 규격과 비교할 수 없습니다.

단위가 먼저입니다. NIST의 SI 가이드는 "양의 값은 숫자와 단위의 곱으로 나타낸 크기"라고 밝힙니다(NIST SP 811, 2008). "점도 46"이나 "500 함유"처럼 답한 답변에는 확인할 값이 없습니다.

다음은 기준입니다. 백분율이나 ppm으로 적은 함량은 질량, 부피, 물질량 가운데 무엇을 기준으로 했는지 밝히기 전까지 모호합니다. NIST는 큰 수를 부르는 이름이 모호하다는 점이 "ppm, ppb, ppt 등의 사용을 권장하지 않는 이유 가운데 하나"라고 적습니다(NIST SP 811, 2008). 기준값은 같은 기준으로 적은 값과만 비교합니다.

그다음은 시험 조건입니다. 동점도는 온도가 없으면 거의 의미가 없습니다. ISO 3104:2023은 -20 °C부터 +150 °C에서 0.2 mm2/s부터 300 000 mm2/s까지의 범위를 다룹니다(ISO 3104:2023, 2023). 온도가 다른 두 값은 비교할 수 없습니다.

마지막은 상태입니다. 기술 데이터시트(TDS)의 값은 대표값입니다. 한 제조사는 자사 "값은 규격 작성에 쓰도록 만든 것이 아니다"라고 밝힙니다(Dow, 2025). 대표값을 보증된 기준값이나 로트 결과처럼 제시한 AI 답변은 수정해야 합니다.

AI 답변이 인용한 시험 방법은 어떻게 확인하나요?

AI 답변이 인용한 시험 방법은 네 가지로 확인합니다. 그 번호의 표준이 실재하는지, 판이 답변이나 규격에 적힌 판인지, 적용 범위가 해당 물질과 측정 범위를 포함하는지, 그 방법이 주장한 물성을 측정하는지입니다. 점검마다 발행 기관의 자체 페이지를 씁니다.

발행 기관 사이트에서 번호를 검색합니다. 검색 결과가 없거나 제목이 해당 물성과 맞지 않으면 그 인용은 반려합니다.

판을 확인합니다. 발행 기관은 옛 판을 표시합니다. astm.org에서 ASTM D445-06은 "Historical", ASTM D445-26은 "Active"로 표시되어 있습니다(ASTM, 2026). 국가 표준 판매처인 에스토니아의 EVS는 ISO 3104:2020이 2023년 11월 7일부터 폐지되었고, 이때 ISO 3104:2023이 유효해졌다고 표시합니다(EVS, 2023). 옛 판을 인용했다는 사실만으로 답변이 틀린 것은 아닙니다. 규격이 판을 고정해 둘 수 있기 때문입니다. 다만 그 판이 실재해야 하고, 비교에 필요한 판이어야 합니다.

적용 범위를 확인합니다. ISO 3104:2023은 전단 응력과 전단 속도가 주로 비례하는(뉴턴 유동 거동) 액체를 대상으로 합니다. 또 점도가 전단 속도에 따라 달라지면 점도계에 따라 결과가 다를 수 있다고 주석에서 밝힙니다(ISO 3104:2023, 2023). 전단 박화가 뚜렷한 제품의 결과는 이 적용 범위 밖입니다.

물성을 확인합니다. ISO 3104:2023은 동점도를 측정하며, 절대 점도는 동점도에 밀도를 곱해 구합니다(ISO 3104:2023, 2023). mPa s 단위의 절대 점도를 mm2/s 단위의 동점도로 인용한 답변은 두 물성을 섞은 것입니다.

AI 답변의 출처가 실재하고 답변 내용을 실제로 말하는지는 어떻게 확인하나요?

AI 답변의 출처가 실재하고 답변 내용을 말하는지 확인하려면, 출처를 모두 열어 값이 있는 문장이나 표의 칸을 찾고, 그 문서가 같은 제품과 등급의 최신 개정판인지 확인합니다. 완전해 보이는 인용도 지어낸 것일 수 있습니다.

지어낸 인용은 가정이 아니라 측정된 현상입니다. ChatGPT가 작성한 문헌 고찰을 다룬 2023년 연구에서 "GPT-3.5 인용의 55%가 지어낸 것인 반면 GPT-4 인용은 18%에 그쳤고", GPT-3.5가 인용한 실제 문헌의 43%에는 실질적인 인용 오류가 하나 이상 있었습니다(Walters and Wilder, 2023). 이 연구는 학술 인용을 다뤘고 제품 문서는 시험하지 않았습니다. 따라서 이 비율은 화학 답변에 대한 측정값이 아니라 경고로 받아들여야 합니다.

실재 여부가 첫 번째 시험입니다. 그 문서를 언급하는 페이지가 아니라 문서 자체를 찾아야 합니다. 두 번째 시험은 일치 여부입니다. 인용된 문서에 같은 단위, 기준, 조건의 값이 있어야 합니다. 실재하지만 그 주장에 대해 아무 말도 하지 않는 출처는 존재하지 않는 출처와 마찬가지로 실패입니다.

개정판이 세 번째 시험입니다. 미국 SDS는 16번 섹션에 작성일이나 최종 변경일을 적어야 하고(OSHA Appendix D, 2024), 중대한 유해성 정보가 새로 나오면 3개월 이내에 반영해야 합니다(OSHA 29 CFR 1910.1200(g)(5), 2024). 인용된 문서의 날짜를 가지고 있는 개정판과 비교하고, 제품 식별자와 등급을 해당 제품과 비교합니다.

AI 화학 답변 전체 점검표와 반려 조건

AI 화학 답변 전체 점검표는 16개 항목을 나열하며, 항목마다 검증 방법과 답변을 반려하거나 수정하는 조건을 적습니다. 목록은 순서대로 진행합니다. 식별 정보 항목에서 실패하면 이후 항목은 모두 의미가 없기 때문입니다. 항목마다 판정을 양식에 기록합니다.

실제로 가장 많은 답변을 반려하게 되는 행은 출처 행입니다. 인용한 문서를 찾을 수 없거나 그 문서에 값이 없는 AI 답변은 다른 장점이 무엇이든 반려합니다. 판이나 상태 항목에서 실패하면 대개 반려가 아니라 수정으로 이어집니다. 최신 문서에서 올바른 값을 읽을 수 있는 경우가 많기 때문입니다. 해당 없음으로 표시한 항목에는 "인용된 시험 방법 없음"처럼 양식에 이유를 적어야 합니다. 그래야 검토자가 건너뛴 점검과 통과한 점검을 구별할 수 있습니다.

점검표에 항목별 검증 방법과 답변을 반려하는 조건을 정리했습니다.

AI 화학 답변 점검표 양식은 어떻게 작성하나요?

AI 화학 답변 점검표 양식은 답변 한 건에 한 장씩 작성합니다. 답변과 그 맥락을 기록하고, 16개 항목에 통과, 실패, 해당 없음을 메모와 함께 표시한 다음, 판정과 판정한 사람을 기록합니다. 양식에 답변, 점검, 판정을 함께 남겨 두면 다른 사람이 같은 점검을 되풀이할 수 있습니다.

아래 표에서 Word 양식의 모든 섹션과 섹션별 설명용 예시 기재 내용을 미리 볼 수 있습니다.

실패한 항목 옆에는 AI 답변을 직접 고치지 말고, 수정한 값을 그 출처와 함께 적습니다. 그래야 무엇이 바뀌었는지 기록에 남습니다. 루빈플라가 내놓은 AI 답변이라면, 기록이나 웹 페이지를 근거로 한 문장에는 대개 원본 기록, 파일, 페이지를 여는 번호 붙은 출처가 달려 있습니다. 이 경우 14번부터 16번 항목은 그 출처에서 시작합니다. 작성한 양식은 점검한 답변과 함께 보관하고, 그 답변을 근거로 내린 결정의 기록과 같은 곳에 둡니다.

AI 화학 답변 점검의 가상 예시는 어떤 모습인가요?

AI 화학 답변 점검의 가상 예시를 보면, 점검표로 자신 있게 쓴 문단 하나를 어떻게 판정으로 바꾸는지 알 수 있습니다. 아래 답변, 제품, CAS 번호, 값, 문서는 이 예시를 위해 지어낸 것입니다.

가상의 AI 답변은 다음과 같습니다. "Product X(CAS 12345-67-8)의 동점도는 ASTM D445-06 기준 46 cSt이므로 최대 50 기준에 맞습니다. 출처: Product X TDS, 2019."

2번 항목이 먼저 실패합니다. 검증 숫자 앞의 숫자는 1234567이고, 오른쪽부터 차례로 1에서 7까지 곱하면 7, 12, 15, 16, 15, 12, 7이 되며 합은 84입니다. 따라서 검증 숫자는 8이 아니라 4여야 합니다. 이 CAS 번호는 유효하지 않으며, SDS 3번 섹션에서 실제 번호를 확인하기 전까지 식별 정보는 확인되지 않은 상태입니다.

다음으로 5번, 7번, 8번 항목이 실패하고, 함량 값이 없으므로 6번 항목은 해당 없음입니다. 값에 단위는 있지만 온도가 없고, "최대 50"에는 단위가 없으며, TDS 값은 로트 결과가 아니라 대표값입니다. 11번 항목도 실패합니다. D445-06은 실재하지만 Historical이므로, 쓸 수 있는지는 규격이 정한 판이 결정합니다. 마지막으로 16번 항목이 실패하고 14번과 15번 항목은 미결로 남습니다. 인용된 TDS는 2019년 판이므로, 값과 방법이 여전히 실려 있는지 보려면 독자가 가진 최신 개정판을 열어 봐야 합니다.

판정은 반려입니다. 식별 정보가 틀렸고, 출처가 확인되지 않았으며, 답변에 적힌 그대로는 기준값과 비교할 수 없습니다.

화학제품에 관한 AI 답변은 언제 반려해야 하나요?

식별 정보가 틀렸을 때, 인용한 출처가 실재하지 않거나 그 주장을 담고 있지 않을 때, 판단에 필요한 값에 단위, 기준, 조건이 없을 때 화학제품에 관한 AI 답변을 반려합니다. 이런 실패는 답변을 고쳐서 해결할 수 없습니다. 사실 자체가 확인되지 않았기 때문입니다.

사실은 확인되었지만 표현이 불완전할 때는 반려하지 않고 답변을 수정합니다. 대표적인 경우는 현행판이 같은 방법을 정하는데 옛 판을 적은 경우, 단위를 SI가 아닌 형식으로 쓴 경우, 대표값을 기준값으로 표시한 경우, 출처는 맞지만 옛 개정일로 인용한 경우입니다. 수정한 값에는 1차 문서를 출처로 적습니다.

16개 항목이 모두 통과하거나 이유를 적은 해당 없음일 때에만 답변을 씁니다. 답변을 쓴다고 해서 AI가 출처가 되는 것은 아닙니다. 기록에는 값마다 그 값을 찾은 SDS, TDS, 시험성적서(CoA) 또는 표준을 인용해야 합니다. 그래야 독자가 AI 없이도 확인할 수 있습니다.

점검표가 다루지 않는 판단이 필요한 질문은 직접 판정하지 않고 자격 있는 사람에게 넘깁니다. 유해성 분류, 특정 관할권의 규제 지위, 고객 소재와의 상용성, 두 1차 문서가 서로 다르게 적은 값이 그런 경우입니다. NIST 프로파일은 위험이 "결과가 중대한 의사 결정과 관련된 애플리케이션에 생성형 AI를 통합할 때 모니터링하는 것이 특히 중요할 수 있다"고 적으며(NIST AI 600-1, 2024), 이런 판단이 그런 의사 결정에 해당합니다.

AI 답변 점검표가 적용되지 않는 경우

AI 답변 점검표는 비교할 1차 문서가 없는 질문, 판단이 필요한 문제, AI 출력이 사실 진술이 아니라 자격 있는 사람이 검토할 초안인 작업에는 적용되지 않습니다. 이 점검표는 사실을 확인하는 데 쓰며, 조언을 승인하는 데 쓰지 않습니다.

문서가 없는 사실이 첫 번째입니다. 어떤 SDS, TDS, 시험성적서, 공개 표준에도 값이 기록되어 있지 않다면, 점검표로 답변에 근거가 없다는 것은 보일 수 있지만 답변을 확인할 수는 없습니다. 제조사에 데이터를 요청하거나 시험을 합니다.

판단이 두 번째 한계입니다. 유해성 분류, 특정 관할권에서 물질의 법적 지위, 공정에 맞는 제품 선정, 고장의 근본 원인은 모두 16개 항목을 넘어서는 추론에 달려 있습니다. 점검표는 이런 작업의 바탕이 되는 사실을 점검하며, 결정은 여전히 자격 있는 사람이 내립니다.

분야별 규정이 세 번째입니다. 의약품, 식품 접촉, 의료기기 분야에는 데이터 무결성과 문서 관리에 관한 자체 요구사항이 있으며, 이 요구사항이 이 점검표보다 우선합니다.

점검표는 AI 도구 자체를 평가하지도 않습니다. 답변 한 건의 결과가 깨끗하다고 해서 다음 답변에 대해 알 수 있는 것은 없습니다. 따라서 표본 몇 건이 아니라 사용할 모든 답변에 항목을 적용합니다.