1

Khả năng phát hiện watermark của OpenAI tại EU giảm còn 17% sau khi chỉnh sửa từ ngữ

marketbrief.now

Quyền truy cập công cụ nhận diện nội dung do AI tạo ra sẽ bị giới hạn ở các nhà nghiên cứu được sàng lọc kỹ càng và các tổ chức chuyên môn. OpenAI đang hạn chế bộ dò này vì các dấu ẩn mới của họ thường không thể phát hiện ở những đoạn văn ngắn, trong khi việc sắp xếp lại từ ngữ hoặc dịch văn bản có thể xóa sạch tín hiệu hoàn toàn. Trong các bài kiểm tra nội bộ hướng tới tỷ lệ dương tính giả 1%, hệ thống đã bắt được 95% các đoạn văn tâm lý học dài 400 token nhưng chỉ phát hiện được 80% đối với văn bản có 200 token.

Hệ thống textGrain sẽ được triển khai cho người dùng ChatGPT và Codex tại Liên minh Châu Âu trong những tuần tới nhằm tuân thủ Điều 50 của đạo luật EU AI Act, đồng thời cung cấp tùy chọn bật tính năng trên toàn cầu cho khách hàng API từ hôm nay. Mặc dù công ty báo cáo không có sự sụt giảm chất lượng đáng kể nào ở phần đầu ra, các watermark này vẫn dễ bị qua mặt bằng các thao tác đơn giản. Việc thay thế 10% từ ngữ bằng từ đồng nghĩa làm giảm tỷ lệ phát hiện từ 92% xuống 66%, và thay thế 25% số từ sẽ kéo tỷ lệ phát hiện xuống còn 17%.

Đăng nhập để góp ý, chỉnh sửa

Nguồn chính

  1. SOURCE@openai“In the EU, we’ll start watermarking eligible text from ChatGPT and Codex over the coming weeks to comply with the EU AI Act.”x.com
  2. SOURCE@openai“Rewriting or translating text can completely remove the watermark.”x.com
  3. SUPPORT@hesamation“we’re getting ChatGPT watermarks in EU only.”x.com
  4. SUPPORT@andrewcurran_“OpenAI (for now) is launching their watermarking - textGrain - 𝘰𝘯𝘭𝘺 in the EU, not globally.”x.com
  5. SUPPORT@kimmonismus“replacing 25% of words with synonyms cut watermark detection from about 92% to 17%.”x.com
  6. SUPPORT@rohanpaul_ai“swapping 10% of words for synonyms in 400-token passages cut detection from about 92% to 66%, and swapping 25% cut it to 17%.”x.com
  7. SUPPORT@kunchenguid“a human producing a piece of complete slop using LLM alone, vs a human spending hours and hours crafting their idea but let LLM handle some of the final touch, will both be labeled as "AI-generated"”x.com
  8. SUPPORT@max_spero_“they evaluate it at a target false positive rate of ~1%!”x.com
Bản Markdown