골프 규칙 질문에 정확하고 권위 있게 답하는 AI

2022년, 상대적으로 원시적인 시대에 USGA 규칙 전문가인 Craig Winter는 워싱턴 주 자택 거실에서 아내의 친구와 함께 시간을 보내고 있었습니다. 그 지인은 코딩 기술이 없는 사용자도 간단한 대화형 텍스트 상자를 통해 인공지능과 상호 작용할 수 있게 해주는 ChatGPT라는 새로운 앱을 컴퓨터로 가지고 놀고 있었습니다.

Winter가 마침내 아내의 친구를 설득하여 Superbot에게 질문할 수 있게 되었을 때, 주제는 놀랍지 않았습니다. 바로 골프 규칙, 특히 카트 경로 구제에 관한 문의였습니다. 질문을 입력하자 답변이 나왔고, USGA의 골프 규칙 및 아마추어 지위 담당 수석 이사가 그 가치를 평가했습니다.

“솔직히 답변이 얼마나 좋은지에 정말 놀랐습니다.” Winter는 화요일 기자들과의 통화에서 회상했습니다.

ChatGPT로 더 많은 실험을 한 후, Winter와 그의 동료들은 아이디어를 떠올리기 시작했습니다. USGA는 규칙 분야의 전문성을 바탕으로 기술 솔루션 회사와 협력하여 다른 어떤 제공업체보다 뛰어난 AI 기반 규칙 엔진을 만들 수 있을까요?

이 조직은 여러 잠재적 협력업체의 제안을 검토한 후, USGA의 기업 파트너 중 하나인 전문 서비스 회사 Deloitte의 제안을 채택했습니다. Winter는 이 제안이 “우리가 가진 것보다 훨씬 더 많은 잠재력을 보여주었다”고 말했습니다.

이것은 2023년 4월이었습니다.

수요일, USGA는 그 파트너십의 결실을 발표했습니다. 바로 GHIN 앱에 탑재될 Rules AI의 파일럿 단계 출시였습니다. USGA에 따르면 이 도구는 골퍼들에게 규칙 질문에 대한 “정확하고 간소화된 방법”으로 답변을 찾을 수 있도록 제공할 것입니다.

노란색 말뚝과 빨간색 말뚝의 차이점은 무엇인가요? 클럽 15개를 휴대했을 때의 벌칙은 무엇인가요? 다람쥐가 공을 훔쳐갔을 때 어떻게 해야 하나요? 등 질문을 입력하면, 골프 규칙, 골프 규칙에 대한 결정, 그리고 USGA가 매일 전화, 이메일, 규칙 앱을 통해 답변하는 방대한 규칙 질문 모음에서 발췌한 권위 있는 언어로 절차를 안내하는 답변을 제공합니다. (매년 2만 건 이상의 이러한 문의가 들어옵니다.) 총체적으로, 이는 Rules AI가 학습한 방대한 규칙 지식의 자원입니다.

현재 이 앱은 일부 선정된 USGA 회원 클럽에만 베타 모드로 제공되지만, 협회는 이달 말까지 뉴욕 수도권 지역 클럽 회원 약 8만~9만 명으로 테스트 그룹을 확대할 계획입니다. 이 앱은 내년 봄까지 모든 GHIN 회원에게 제공될 예정입니다.

USGA에 대해 조금이라도 아는 사람이라면, USGA가 규칙 관리를 핵물리학자가 플루토늄-239를 다루는 것만큼이나 신중하게 처리한다는 것을 알 것입니다. 모든 단어는 면밀히 검토되고, 모든 조정과 수정은 고뇌 끝에 이루어집니다. 따라서 USGA가 게임의 계명을 놀랍도록 강력하지만 잘못된 정보를 제공하거나 완전히 환각을 일으킬 수도 있는 기술에 맡겼다는 사실은 다소 놀라울 수 있습니다.

이것이 지난 2년이 중요한 이유입니다.

“처음부터 우리의 접근 방식은 정확한 답변을 제공해야 한다는 것이었습니다.”라고 화요일 Winter와 함께 통화에 참여한 USGA의 IT 담당 전무이사 Anthony Santora는 말했습니다. “인터넷에는 잘못된 정보가 너무 많습니다.” Santora는 Rules AI가 잘못된 정보를 제공할 가능성은 “협상 불가”라고 덧붙였습니다. “그래서 우리는 모든 것에 대해 이러한 가드레일 단계적 접근 방식을 취해 왔습니다.”

처음에는 규칙 책의 25가지 기본 규칙과 해당 규칙의 여러 하위 섹션을 학습시키는 것이었습니다. 그런 다음 USGA의 규칙 문의 데이터베이스에서 35,000개의 질문과 답변을 통해 더 미묘한 교육이 이루어졌습니다. 그 후, 골퍼들이 USGA에 이메일로 보낸 실시간 규칙 질문을 봇에 제공했으며, USGA 규칙 부서에서 봇이 얼마나 효과적으로 답변하는지 검토했습니다. 이것은 앱의 지능을 다듬는 데 필수적인 단계였습니다. USGA의 규칙 전문가들이 Rules AI가 부정확하거나 불완전한 답변을 제공한다고 지적함에 따라, 그들은 봇이 같은 실수를 반복하지 않도록 선제적으로 훈련할 수 있었습니다. 이러한 노력은 경쟁업체가 빠르게 똑같이 신뢰할 수 있는 규칙 도구를 만드는 것을 어렵게 만들 것입니다.

“우리는 계속해서 이것을 개선하고 가르칠 수 있습니다. 왜냐하면 우리는 직접 참여하여 그것을 보고, 들어오는 질문을 보고, 나오는 답변을 보기 때문입니다.”라고 Santora는 말했습니다.

주마다, 달마다 앱은 더 똑똑하고 정교해졌습니다.

“이것이 실제로 작동할 가능성에 대해 많은 시간을 꿈꿨지만, 실제로 그 지점에 도달하기까지는 거의 16~18개월이 걸렸습니다.”라고 Winter는 말했습니다.

모든 잠재적 질문은 500가지의 다른 규칙 주제 중 하나로 연결됩니다. 예를 들어 “아웃 오브 바운즈”, “카트 경로 구제” 등입니다. Winter는 “질문이 들어오면 궁극적으로 이 사람이 묻는 것과 가장 유사한 주제에 해당될 것입니다.”라고 말했습니다. “따라서 이러한 모든 뉘앙스는 시스템이 정확한 정보의 이 폐쇄된 집합을 사용하여 답변을 찾을 수 있도록 사용할 수 있습니다.”

이는 Rules AI가 완벽하다는 것을 의미하지는 않습니다. 아무리 철저하게 훈련된 기계라도 전지전능할 수는 없습니다. 특히 골프 규칙의 경우, 전례 없는 시나리오가 갑자기 나타날 수 있습니다. 앱이 답변할 자격이 없다고 느끼는 질문을 받으면 (그리고 의심할 여지 없이 앱이 더 널리 사용됨에 따라 빠르게 타이핑하는 규칙 전문가 군단이 봇을 좌절시키려고 즐거워할 것입니다), 추가 상담을 위해 USGA에 문의하도록 설정되어 있습니다.

복잡한 질문은 Rules AI가 답변하는 데 10초 이상 걸릴 수 있지만, 더 자주 묻는 질문에는 USGA가 “황금 답변”이라고 부르는 것이 있으며, 앱은 거의 즉시 제공할 것입니다.

Winter는 Rules AI가 토너먼트 또는 클럽 위원회의 전문 지식이나 판결을 대체하는 데 사용되어서는 안 된다고 강조했습니다. 오히려 플레이어가 규칙 지침에 더 쉽고 빠르게 접근할 수 있도록 하는 참조 도구이며, 이는 USGA가 구식 방식으로 처리하는 규칙 문의의 양을 줄일 가능성이 높습니다.

“우리는 규칙 심판을 골퍼의 주머니에 넣으려고 하는 것이 아닙니다.”라고 Winter는 말했습니다. “이것은 우리의 규칙 직원, 규칙 전문가의 전문 지식을 전 세계 골프에 확장하는 것에 관한 것입니다.”