Pengguna yang menjalin ikatan emosional dengan AI mirip manusia berisiko mengalami over-reliance (ketergantungan berlebihan) serta pelanggaran privasi dan otonomi . Riset menunjukkan bahwa orang cenderung lebih mau membagikan informasi pribadi kepada chatbot yang dimanusiakan dibandingkan antarmuka mekanis yang jelas
. Dinamika "inferensi antropomorfis" membuat pengguna menetapkan peran sosial pada sistem ramalan teks, mengubah keluaran statistik menjadi respons yang terasa sosial seperti nasihat atau persahabatan
.
Antropomorfisme berfungsi sebagai kesesatan logika yang mendistorsi penilaian moral tentang AI. Pengguna mungkin secara keliru memberikan karakter moral, status, atau tanggung jawab pada mesin . Ketika chatbot tampak memiliki fitur mirip manusia, orang menggunakan apa yang oleh psikolog disebut "pemrosesan heuristik"—pemikiran pintas yang mengajak mereka memperlakukan alat itu sebagai sosok yang layak dipuji, disalahkan, atau dipercaya, padahal algoritma biasa tidak bisa menopang hal itu
. Kebingungan ini merusak wacana publik yang bermakna dan akuntabilitas
.
Dari perspektif keamanan informasi, AI yang dimanusiakan menghadirkan risiko keamanan siber serius. "Ini bukan hanya masalah etika; ini juga masalah keamanan karena apa pun yang dirancang untuk membujuk bisa membuat kita lebih rentan terhadap manipulasi," demikian peringatan analisis keamanan IBM . Ketika sulit membedakan manusia dari mesin, orang cenderung lebih memercayai AI saat mengambil keputusan sensitif, menjadikan mereka lebih rentan terhadap penipu social engineering yang mengeksploitasi heuristik kepercayaan manusia
.
Majalah Nature telah menulis editorial eksplisit tentang hal ini: "Kami akan berusaha menghindari sama sekali penggunaan 'AI' karena sugesti agensi yang tidak tepat. Sebagai gantinya, kami akan mengubahnya menjadi 'sistem AI' atau menjelaskan dengan jelas apa yang kami bicarakan" . Memperlakukan "AI" sebagai kata benda yang dapat dihitung (misalnya, "AI itu memutuskan," "AI yang berpikir") secara halus menyiratkan entitas tunggal yang mandiri dan memiliki keadaan mental internal. Mengubah "AI" menjadi kata sifat yang menerangkan "sistem" (atau "model," "alat," "algoritma") secara konstan mengingatkan audiens bahwa yang dirujuk adalah artefak rekayasa—bukan pikiran
.
Disiplin linguistik ini secara langsung melawan apa yang oleh para peneliti disebut dimensi "terminologis" dari hype antropomorfis: ketika kita mengatakan "AI," bentuk kata benda itu sendiri menjadi wahana untuk memberikan kesadaran, niat, dan pemahaman yang tidak dimiliki teknologi .
Memanusiakan AI bukanlah metafora yang tak berbahaya. Ini mendorong penipuan, kepercayaan berlebihan, manipulasi, dan distorsi akuntabilitas. Sebuah disiplin linguistik sederhana—menggunakan "sistem AI" alih-alih "AI" , dan menghindari kata kerja mental seperti "berpikir," "tahu," dan "memahami" untuk menggambarkan apa yang sebenarnya adalah algoritma pencocokan pola —berfungsi sebagai koreksi konstan. Ini menjaga sifat alat dari teknologi tetap di garis depan, melindungi pengguna dari desain manipulatif, dan memperkuat kemampuan publik untuk memahami apa yang bisa dan tidak bisa dilakukan oleh sistem ini.