سیستمهای هوش مصنوعی توسعهیافته میتوانند موجودیت بشریت را تهدید کنند و قدرتمندترین مدلها میتوانند به ساخت سلاحهای کشتار جمعی کمک کنند. کلود آنتروپیک، توسعهدهنده، در بروشور IPO خود که در وبسایت کمیسیون بورس و اوراق بهادار ایالات متحده (SEC) منتشر شده است، در مورد این هشدار داده است. این سند بیان میکند که خطرات جدی به ویژه زمانی به وجود میآیند که هوش مصنوعی به طور مخرب مورد استفاده قرار گیرد، به سلاح تبدیل شود یا زمانی که سیستمها به میزان بالایی از استقلال دست یابند. آنتروپیک اذعان میکند که مدلهای پیشرفتهاش در حال حاضر قابلیتهایی دارند که میتوانند به مهاجمان در توسعه سلاحهای شیمیایی و بیولوژیکی کمک کنند. این شرکت از مکانیسم های حفاظتی استفاده می کند، اما هشدار می دهد که می توان آنها را دور زد.