Challenges in methods and data accessThe risks of harm created by AI systems are often difficult to identify, and their likelihood and severity cannot be easily estimated without extensive access to production systems and considerable resources [138, 139, 140]. Adoption of generative AI tools has been rapid but recent and, in part due to the novelty of these systems, we are unaware of longitudinal, quantitative and representative studies on how AI interactions lead to harm as of this writing. However, there is a growing body of evidence relating to individual incidents of harm that are associated with AI systems. Examples include giving potentially harmful diet advice to people at risk of eating disorders;26 inventing non-existing case law when asked to help draft legal briefs;27 and causing financial harm through overcharging customers.28 Some organizations have also released data from 'the wild' that provide insight into hazards created by real-world interactions with models [69, 70, 141]. However, accessing such data can be difficult for safety research given its sensitivity and the fact that it is mostly held by private companies.
방법 및 데이터 접근의 도전 과제
AI 시스템이 초래하는 피해의 위험은 종종 식별하기 어렵고, 생산 시스템에 대한 광범위한 접근과 상당한 자원이 없이는 그 가능성과 심각성을 쉽게 추정할 수 없습니다 [138, 139, 140]. 생성형 AI 도구의 채택은 빠르게 이루어졌지만 최근의 일이며, 이러한 시스템의 참신함 때문에 AI 상호작용이 어떻게 피해를 초래하는지에 대한 장기적이고 정량적이며 대표적인 연구는 현재로서는 알려져 있지 않습니다. 그러나 AI 시스템과 관련된 개별 사건의 피해에 대한 증거는 점점 늘어나고 있습니다. 예를 들어, 섭식 장애 위험이 있는 사람들에게 잠재적으로 해로운 다이어트 조언을 제공하는 것,26 법률 문서를 작성하는 데 도움을 요청받았을 때 존재하지 않는 판례를 발명하는 것,27 고객에게 과도한 요금을 부과하여 재정적 피해를 초래하는 것 등이 있습니다.28 일부 조직은 모델과의 실제 상호작용에서 발생하는 위험에 대한 통찰력을 제공하는 '야생' 데이터도 공개했습니다 [69, 70, 141]. 그러나 이러한 데이터는 민감하고 대부분이 민간 기업에 의해 보유되고 있기 때문에 안전 연구를 위해 접근하기 어려울 수 있습니다.
방법 및 데이터 액세스의 어려움AI 시스템으로 인해 발생하는 위해성은 종종 식별하기 어렵고, 생산 시스템에 대한 광범위한 액세스와 상당한 리소스 없이는 그 가능성과 심각성을 쉽게 추정할 수 없습니다[138, 139, 140]. 생성형 AI 도구의 도입은 빠르지만 최근의 일이었으며, 이러한 시스템의 새로움으로 인해 이 글을 쓰는 현재로서는 AI 상호 작용이 어떻게 위해를 초래하는지에 대한 종단적이고 정량적이며 대표성 있는 연구가 부족합니다. 그러나 AI 시스템과 관련된 개별적인 위해 사례와 관련된 증거는 점점 늘어나고 있습니다. 예를 들어, 섭식 장애 위험에 처한 사람들에게 잠재적으로 해로운 식이 요법 조언을 제공하는 경우,26 법률 브리프 초안 작성을 도와달라는 요청에 기존에 없는 판례를 발명하는 경우,27 고객에게 과다 청구하여 금전적 피해를 입히는 경우 등이 있습니다.28 일부 조직에서는 모델과의 실제 상호 작용으로 인해 발생하는 위험에 대한 인사이트를 제공하는 '실제' 데이터를 공개하기도 했습니다[69, 70, 141]. 그러나 이러한 데이터는 민감한 정보이고 대부분 민간 기업이 보유하고 있다는 점을 고려할 때 안전 연구에 액세스하기 어려울 수 있습니다.