AI가 틀리는 방식
처음 볼 때의 기준
답의 기세가 아니라 확인할 곳을 봅니다
AI의 답변은 문장 형태가 아주 자연스럽습니다. 그래서 처음 보면 "제대로 확인해서 답해줬구나" 하고 느끼기 쉽습니다. 하지만 읽기 쉬운 것과 맞는 것은 같은 뜻이 아닙니다. 먼저 봐야 할 것은, 어디를 확인하면 좋은 답인지 알 수 있는 형태로 되어 있는가입니다.
예를 들어 회사 일에서, 처음 온 사람이 아주 자신 있게 설명하더라도 그 자리에서는 고개를 끄덕이면서도 인수인계 문서나 원래 안내를 볼 것입니다. AI도 똑같습니다. 말하는 방식이 아니라, 확인할 수 있는 이름, 날짜, 원래 자료가 있는지를 보는 습관을 들이면 속기 어려워집니다.
먼저 의심할 곳
우선 여기만
자신감 있는 말일수록 멈춥니다
- 단정하는 말은, 맞다는 증거가 아닙니다
- 모르는 부분도, 문장을 그럴듯하게 다듬어 답할 때가 있습니다
- 안심하고 싶어질수록, 확인으로 바꿉니다
여기서 중요한 것은, "강하게 말하면 맞을 것이다"라고 생각하지 않는 것입니다. 사람도 분명하게 말한다고 해서 반드시 맞는 것은 아닙니다. AI는 특히, 모를 때에도 마치 알고 있는 것처럼 보이는 문장을 만들 때가 있습니다.
걸려들기 쉬운 때는 내가 바쁠 때입니다. 답장을 빨리 보내고 싶다, 문장을 바로 보내고 싶다, 상사에게 확인받고 싶지 않다. 그럴수록 강한 단정에 쉽게 끌립니다. 안심하고 싶어지면, 한 번 멈추세요. 그 한 번의 숨 고르기가 큰 실수를 막아줍니다.
답변을 보면 처음 할 일
짧게 확인
- 이름과 날짜를 봅니다
사람 이름, 회사 이름, 날짜는 나중에 확인하기 쉬워서 먼저 봅니다 - 강한 단정에서 멈춥니다
'반드시' '문제없다' 같은 말이 있으면, 그대로 쓰지 않습니다 - 부탁한 조건과 비교합니다
상대, 길이, 목적이 어긋나지 않았는지만 먼저 봅니다
이 세 가지는 내용을 전부 자세히 읽기 전에 할 수 있습니다. 처음부터 꼼꼼히 읽으면 문장의 흐름에 끌려갑니다. 먼저는, 틀린 부분을 찾기 쉬운 곳만 기계적으로 봅니다. 이름, 날짜, 단정, 조건. 이 순서로 보기만 해도 꽤 막기 쉬워집니다.
이름과 날짜가 도움이 되는 이유는, 밖에서 확인하러 가기 쉽기 때문입니다. 사내 연락, 이전 메일, 손에 있는 자료와 비교해 보면 어긋나는 점을 찾을 수 있습니다. 반대로, "설명이 참 자연스럽네"라고 느껴지는 부분은 나중에 차분히 봐도 충분합니다.
하면 안 되는 것은 문장 끝만 조금 고쳐서 그대로 보내는 것입니다. 표현만 다듬으면 원래의 틀린 점이 보이기 어려워집니다. 특히 회사 밖으로 보내는 안내나, 돈, 기한, 담당자가 들어가는 문장은 처음의 세 가지 확인을 빼먹지 않도록 합니다.
사실을 잘못 바꾸는 일
모르는 부분을 채울 때의 대처
AI는 비어 있는 부분을 채우는 데 능합니다. 하지만 그 "채우는 방식"이 맞는다고는 할 수 없습니다. 낯선 이름이나 제도가 나오면 비슷한 것들을 이어 붙여 그럴듯한 이야기로 만들 때가 있습니다. 읽는 쪽은 문장이 자연스러우면 눈치채기 어려우니 주의가 필요합니다.
여기서의 요령은, 모르는 이야기일수록 그대로 믿지 않는 것입니다. 나도 잘 모르는 분야에서는 "아마 이런 뜻이겠지" 하고 생각하며 계속 읽어버리기 쉽습니다. 모르는 말이 하나라도 나오면, 그 주변을 집중해서 다시 봅니다.
이렇게 나오면 멈춥니다
가려내는 신호
이름이 바뀝니다
비슷한 이름의 다른 사람이나 다른 제도로 바뀌는 일이 있습니다. 한 글자만 달라도 멈춥니다
업무에서는 담당자 이름, 부서 이름, 상품 이름, 신청 이름의 한 글자 차이가 큰 어긋남으로 이어집니다. 겉모습이 비슷할수록 놓치기 쉬우므로, "대충 맞다"고 넘기지 않는 것이 중요합니다.
이야기가 너무 말끔합니다
순서나 이유가 이상할 만큼 깔끔하면 정말 그런지 원래 자료로 확인합니다. 지어낸 이야기일 수 있습니다
실제 업무는 그렇게까지 깔끔하게 흘러가지 않는 경우가 많습니다. 그런데 이유도 흐름도 전부 딱 맞아떨어질 때는 나중에 붙여 만든 설명일 가능성이 있습니다. 읽기 쉽기 때문에 오히려 원래 안내나 메모로 돌아가 확인합니다.
근거가 보이지 않습니다
이유나 원문이 나오지 않는데도 단정하고 있다면 보류합니다. 그대로 보내지 않습니다
"왜 그렇게 말할 수 있는가"가 보이지 않는 답변은 초안으로만 둡니다. 특히 규칙, 절차, 기한처럼 나중에 책임이 따르는 이야기에서는 원문을 확인할 수 있을 때까지 밖으로 내보내지 않는 편이 안전합니다.
실수하기 쉬운 지점은 조금만 맞을 때입니다. 일부가 맞으면 전부 맞는 것처럼 느껴집니다. 그래서 이름, 순서, 근거 이 세 가지를 따로따로 봅니다. "한 군데 맞았으니 괜찮다"고 생각하지 않습니다.
빗나가기 어려운 부탁 방법
사실을 지킵니다
- 자료를 먼저 붙입니다
회의 메모나 사내 문서를 주고, 그 안에서만 써 달라고 합니다 - 모르면 모른 채로 둡니다
모르는 곳은 채우지 말고, '불명'이라고 쓰라고 먼저 전합니다 - 다시 보는 칸을 만들게 합니다
이름, 날짜, 금액을 마지막에 보는 칸을 붙여 달라고 합니다
실수를 줄이고 싶다면, 처음 부탁하는 방법을 바꾸는 것이 가장 빠릅니다. 아무것도 주지 않고 "잘 써줘"라고 부탁하면, 부족한 부분을 제멋대로 채우기 쉬워집니다. 바탕이 되는 회의 메모나 예전 안내문이 있다면, 먼저 주고 그 범위 안에서만 쓰게 합니다.
"모르면 모른 채로 둔다"는 것은 아주 중요합니다. 사람은 빈칸이 신경 쓰이지만, 모르는 것을 모르는 채로 남겨 두는 편이 더 안전한 때가 있습니다. 예를 들어 날짜나 금액이 애매한데 그럴듯한 숫자를 넣어 버리는 쪽이 더 위험합니다.
다시 보는 칸은 마지막 확인 누락을 막아줍니다. 어려운 방식이 아닙니다. 초안 끝에 "이름" "날짜" "금액" "담당" 확인 항목을 나열해 달라고 하는 것만으로도 충분합니다. 볼 곳이 정해지면 사람의 확인도 짧게 끝납니다.
- 자료가 있을 때는, 먼저 전부 붙여 넣은 뒤 부탁합니다
- 모르는 부분은 채우지 않도록, 처음에 전합니다
- 마지막에 볼 항목을, 문장과 따로 내달라고 합니다
정보가 오래되었습니다
오래된 채로 말할 때의 대처
AI는 그럴듯하게 답하더라도, 그 내용이 지금도 유효하다고는 할 수 없습니다. 특히 업무 안내는 바뀝니다. 요금, 신청 방법, 담당 부서, 접수 시간, 사내 절차는 예전에는 맞았어도 지금은 다를 수 있습니다.
여기서의 주의점은, "작년에도 이랬으니 올해도 같겠지"라고 생각하지 않는 것입니다. AI의 답변이 내 기억과 맞으면 옳은 것처럼 느껴집니다. 하지만 바뀌는 내용은 맞아 보이더라도 확인이 필요합니다.
오래됨을 알아차리는 순서
바뀌는 내용을 먼저 봅니다
- 바뀌기 쉬운 내용을 의심합니다
요금, 제도, 담당, 절차는 오래되기 쉬우므로 먼저 봅니다 - 언제의 정보인지 말하게 합니다
'지금 기준으로 답해줘'라고 부탁해, 시점을 흐리지 않게 합니다 - 원래 안내와 비교합니다
최신 사내 연락이나 안내문을, 마지막에 사람이 확인합니다
바뀌기 쉬운 내용을 먼저 보는 것은, 모든 것을 똑같은 무게로 보지 않기 위해서입니다. 인사말이나 일반적인 설명보다 제도나 담당 쪽이 더 쉽게 낡는 부분입니다. 다시 볼 시간이 적을 때는 먼저 거기에 씁니다.
"언제의 정보인지 말하게 한다"도 도움이 됩니다. 시점이 흐릿한 채로 두면, 오래된 내용도 자연스러운 얼굴로 섞여 들어옵니다. "지금 기준으로" "오늘의 안내로" "최신 사내 연락에 맞춰"라고 말해 두면, 적어도 어디를 확인해야 하는지는 분명해집니다.
마지막은 역시 원래 안내와 비교하는 것입니다. AI의 문장만 몇 번이고 다시 읽어도, 낡았다는 사실 자체는 알아차릴 수 없습니다. 최신 연락, 현재 절차서, 최근 메일처럼 사람이 가진 새로운 자료로 돌아갈 필요가 있습니다.
오래된 이야기 막는 법
부탁하는 방식을 바꿉니다
최신인지 알 수 없으면 초안으로 취급
- 그대로 보내지 말고, 마지막은 사람이 업데이트합니다
- 바뀌기 쉬운 항목은, 비워 둔 채 남겨 두는 방법도 있습니다
- 먼저 작게 시험해 보고, 빗나가기 쉬운 주제를 알아둡니다
오래된 정보를 완전히 없애기는 어려우므로, 처음부터 "초안으로 쓴다"고 정해 두는 편이 안전합니다. 특히 회사 밖으로 보내는 글이나, 사내의 공식 안내가 되는 글은 사람이 마지막에 새 정보로 고친다는 전제로 다룹니다.
바뀌기 쉬운 항목을 비워 두는 것도 실무에서 효과가 있습니다. 예를 들어 담당자 이름이나 기한은 빈칸으로 남겨 두고, 마지막에 직접 넣는 편이 더 안심될 때가 있습니다. 모든 것을 자동으로 채우려 하지 않는 편이 오히려 더 빠를 때도 있습니다.
또 처음부터 중요한 안내문으로 시험하지 않는 것도 중요합니다. 먼저 영향이 작은 초안이나, 나만 쓰는 정리 문장에서 써 보면 어디에서 오래된 정보가 나오기 쉬운지 알게 됩니다.
지시를 놓치는 일
부탁한 조건이 빠질 때의 대처
AI는 긴 부탁도 읽을 수 있지만, 조건이 많을수록 일부가 빠지거나 약해집니다. 특히 "누구를 위한 것인지" "넣으면 안 되는 내용" "문장의 형태" 같은 조건은 놓치기 쉬운 부분입니다.
사람에게 부탁할 때도, 말로 한 번에 많이 말하면 빠집니다. 마찬가지로 AI에게도 한 문장에 전부 밀어 넣으면, 겉으로는 깔끔해 보여도 중요한 조건이 빠집니다. 돌아온 문장의 좋고 나쁨뿐 아니라, 조건이 지켜졌는지도 볼 필요가 있습니다.
빠진 것을 찾는 방법
보는 순서를 고정합니다
- 누구 대상인지 사라지지 않았는지
상대가 빠지면, 말하는 방식도 전제도 어긋나기 쉽습니다 - 겉모양을 먼저 봅니다
제목, 글머리표, 높임말처럼 눈으로 알 수 있는 조건부터 확인합니다 - 언급하지 않을 내용이 지켜졌는지
'쓰지 않을 것'은 빠지기 쉬우므로, 마지막에 반드시 봅니다
보는 순서를 고정하는 것은, 매번 놓치는 일을 줄이기 위해서입니다. 읽다가 눈에 띄는 곳부터 고치기 시작하면 문장의 자연스러움에 끌려 정말 중요한 조건을 놓칩니다. 순서를 정해 두면 익숙하지 않은 사람도 확인하기 쉬워집니다.
먼저 상대입니다. 사내용인지, 고객용인지, 새로 들어온 사람용인지에 따라 말의 전제가 크게 달라집니다. 다음은 겉모양입니다. 제목이 필요한지, 글머리표인지, 공손한 말투인지. 마지막으로, 쓰지 않기로 한 약속이 지켜졌는지를 봅니다.
"언급하지 않을 내용"은 특히 주의가 필요합니다. 넣는 내용보다 빼야 할 내용이 더 잊히기 쉽기 때문입니다. 개인 이름, 아직 확정되지 않은 일정, 회사 밖으로 낼 수 없는 사정 등은 마지막에 한 번에 확인합니다.
빠짐을 줄이는 부탁 방법
한 문장에 몰아넣지 않습니다
- 조건을 짧게 나눠 적습니다
목적, 상대, 넣을 것, 뺄 것, 문장 형태 순서로 씁니다 - 먼저 조건을 되풀이하게 합니다
답변 전에 '지킬 조건을 적어줘'라고 부탁하면 빠진 것을 알아차릴 수 있습니다 - 한 번에 끝내지 않습니다
먼저 초안, 다음에 수정, 마지막에 확인 순서로 진행합니다
조건을 짧게 나누면 읽는 나 자신도 확인하기 쉬워집니다. 예를 들어 "고객용" "부드러운 말투" "날짜는 빈칸" "요금은 쓰지 않기" "글머리표로"처럼 짧게 나열합니다. 한 문장으로 길게 쓰는 것보다 훨씬 빠진 것을 알아차리기 쉽습니다.
먼저 조건을 되풀이하게 하는 것도 쉽고 효과가 있습니다. 갑자기 본문을 쓰게 하는 것이 아니라, "이제부터 지킬 조건을 먼저 적어줘"라고 부탁하는 것입니다. 여기서 빠진 것이 보이면 본문을 쓰기 전에 고칠 수 있습니다. 사람에게 일을 부탁하는 방법과 같습니다.
그리고 한 번에 끝내지 않는 것. 첫 답변을 완성품으로 보지 말고, 먼저 초안, 다음에 수정, 마지막에 확인으로 나눕니다. 바쁠수록 이 세 단계로 하는 편이 결국 다시 손보는 일을 줄여줍니다.
- 조건은 짧게 끊어서 씁니다
- 본문 전에, 지킬 조건을 다시 말해 달라고 합니다
- 초안, 수정, 확인을 나눕니다
오늘 가져갈 핵심
실수는 알아볼 수 있고, 줄일 수 있습니다
- 자신감 있는 문장일수록, 이름과 날짜에서 멈춥니다
- 원래 자료를 주면, 사실과 다른 내용을 줄일 수 있습니다
- 바뀌는 내용은, 최신 확인을 빼먹지 않습니다
- 조건은 짧게 나누고, 되풀이하게 한 뒤 쓰게 합니다
- 보내기 전 마지막 판단은 사람이 합니다
AI의 실수는 특별한 지식이 있어야만 알아볼 수 있는 것만은 아닙니다. 오히려 매일의 업무에서 하는 확인과 비슷한 것이 많습니다. 이름 보기, 날짜 보기, 원래 안내로 돌아가기, 부탁한 조건과 비교하기. 이것만으로도 꽤 막을 수 있습니다.
중요한 것은 AI를 "전부 맡길 상대"로 두지 않는 것입니다. 밑그림이나 초안을 빨리 만드는 상대로는 편리합니다. 하지만 공식 안내로 만들기 전 마지막으로 지켜보는 역할은 사람이 맡습니다. 그 역할만 놓치지 않으면, 쓰면서 익숙해질 수 있습니다.
마지막으로
AI 도서관
팔로우와 좋아요 부탁드립니다
- AI를 일에서 쓰는 이야기를, 쉽게 한 편씩 올리고 있습니다
- 다음 편도 여기서 만나요
처음에는 모든 것을 완벽하게 하려고 하지 않아도 괜찮습니다. 먼저, 자신감 있는 단정에서 멈추는 것. 다음으로, 이름과 날짜를 보는 것. 이 두 가지부터 시작하면 내일부터 바로 쓸 수 있습니다.
익숙해지면, 자료를 먼저 주기, 모르면 모른 채로 남기기, 조건을 되풀이하게 하기 같은 부탁 방법도 해보세요. 쓰는 방법을 조금만 바꿔도 빗나가기 어려움은 높일 수 있습니다.
정리
AI는 모르는 일도 자연스러운 문장으로 답할 때가 있습니다. 그래서 글을 잘 썼는지보다, 확인할 수 있는 형태로 되어 있는지를 보는 것이 중요합니다. 특히 이름, 날짜, 바뀌기 쉬운 정보, 쓰지 않기로 한 약속은 먼저 확인합니다.
또한 실수를 줄이려면 다시 보기뿐 아니라 부탁하는 방식도 중요합니다. 원래 자료를 주는 것, 모르는 것은 채우지 않는 것, 조건을 짧게 나누는 것. 이것만으로도 나중 수정이 훨씬 쉬워집니다.
- 답변을 보면, 먼저 이름과 날짜를 확인합니다
- '반드시' '문제없다' 같은 강한 단정에서 멈춥니다
- 회의 메모나 안내문을 먼저 주고, 그 안에서만 쓰게 합니다
- 바뀌기 쉬운 내용은, 마지막에 최신 안내와 비교합니다
- 보내기 전에는, 사람이 최종 확인한 뒤 보냅니다
댓글
- 아직 댓글이 없습니다. 첫 댓글을 남겨보세요.
