Setiap anak (atau pasangan) yang telah dimarahi karena nada suaranya - seperti berteriak atau bersikap sarkastik - tahu bahwa cara Anda berbicara dengan seseorang bisa sama pentingnya dengan kata yang Anda gunakan Seniman dan aktor suara memanfaatkannya dengan baik - mereka terampil menyampaikan makna dengan cara mereka berbicara, terkadang lebih dari sekadar kata-kata yang bisa dipuji.

Tapi seberapa banyak informasi yang dibawa dalam nada suara dan pola percakapan kita dan bagaimana hal itu mempengaruhi hubungan kita dengan orang lain? Sistem komputasional sudah bisa terbentuk siapa orang dari suara mereka, bisakah mereka juga menceritakan sesuatu tentang kehidupan cinta kita? Hebatnya, sepertinya seperti itu.

Penelitian baru, baru diterbitkan di jurnal PLOS-ONE, telah dianalisis karakteristik vokal pasangan 134 yang menjalani terapi. Peneliti dari University of Southern California menggunakan komputer untuk mengekstrak fitur analisis ucapan standar dari rekaman sesi sesi terapi selama dua tahun. Fitur - termasuk nada, variasi pitch dan intonasi - semuanya berhubungan dengan aspek suara seperti nada dan intensitas.

Algoritma pembelajaran mesin kemudian dilatih untuk mempelajari hubungan antara fitur vokal tersebut dan hasil akhir terapi. Ini tidak sesederhana mendeteksi suara berteriak atau terangkat - termasuk interaksi percakapan, yang berbicara kapan dan untuk berapa lama dan juga suara suara tersebut. Ternyata mengabaikan apa yang dikatakan dan mengingat hanya pola bicara ini saja yang cukup untuk memprediksi apakah pasangan akan tetap bersama atau tidak. Ini murni data driven, jadi tidak menghubungkan hasil dengan atribut suara tertentu.

Bagaimana nada suara bisa mengubah arti beberapa kata.

{youtube}https://youtu.be/GVqJtvRjuns{/youtube}

Yang menarik, rekaman video lengkap dari sesi terapi kemudian diberikan kepada para ahli untuk mengklasifikasikan. Berbeda dengan AI, mereka membuat prediksi menggunakan penilaian psikologis berdasarkan atribut vokal (dan lainnya) - termasuk kata-kata bahasa lisan dan bahasa. Anehnya, prediksi mereka tentang hasil akhir (mereka benar dalam 75.6% dari kasus) lebih rendah daripada prediksi yang dibuat oleh AI berdasarkan karakteristik vokal (79.3%). Jelas ada unsur-unsur yang dikodekan dalam cara kita berbicara bahwa bahkan para ahli pun tidak sadar. Tapi hasil terbaiknya adalah menggabungkan penilaian otomatis dengan penilaian ahli (79.6% benar).

Pentingnya ini bukan tentang melibatkan AI dalam konseling perkawinan atau membuat pasangan berbicara lebih baik satu sama lain (betapapun berjasa). Arti penting adalah mengungkapkan berapa banyak informasi tentang perasaan mendasar kita yang dikodekan dalam cara kita berbicara - beberapa di antaranya sama sekali tidak kita ketahui.

Kata-kata yang tertulis di halaman atau layar memiliki makna leksikal yang berasal dari definisi kamus mereka. Ini dimodifikasi dengan konteks kata-kata di sekitarnya. Ada banyak kompleksitas dalam menulis. Tapi ketika kata-kata dibaca dengan suara keras, memang benar bahwa mereka mengambil makna tambahan yang disampaikan oleh kata stres, volume, tingkat bicara dan nada suara. Dalam percakapan biasa, ada juga makna dalam berapa lama setiap pembicara berbicara, dan seberapa cepat satu atau mungkin orang lain menyisipkannya.

Pertimbangkan pertanyaan sederhana "Who are you?". Cobalah berbicara dengan menekankan kata-kata yang berbeda; "Siapa kamu?", "Siapa adalah Anda dan "Siapa Apakah kamu?". Dengarkan ini - makna semantik bisa berubah dengan bagaimana kita membaca bahkan ketika kata-kata tetap sama.

Komputer membaca 'bocor indera'?

Tidak mengherankan bila kata-kata menyampaikan arti yang berbeda tergantung pada bagaimana mereka berbicara. Hal ini juga mengejutkan bahwa komputer dapat menafsirkan beberapa makna di balik bagaimana kita memilih untuk berbicara (mungkin suatu hari mereka bahkan bisa mengerti ironi).

Tapi penelitian ini lebih penting daripada sekedar melihat makna yang disampaikan dengan sebuah kalimat. Tampaknya mengungkapkan sikap dan pemikiran mendasar yang ada di balik kalimat tersebut. Ini adalah tingkat pemahaman yang jauh lebih dalam.

Peserta terapi tidak membaca kata-kata seperti aktor. Mereka hanya berbicara secara alami - atau sealami mereka di kantor terapis. Namun analisis tersebut mengungkapkan informasi tentang perasaan bersama mereka bahwa mereka "bocor" secara tidak sengaja ke dalam pidato mereka. Ini mungkin salah satu langkah pertama dalam menggunakan komputer untuk menentukan apa yang sebenarnya sedang kita pikirkan atau rasakan. Bayangkan sejenak bercakap-cakap dengan smartphone masa depan - akankah kita "membocorkan" informasi yang bisa mereka ambil? Bagaimana tanggapan mereka?

Bisakah mereka memberi tahu kami tentang calon mitra dengan mendengarkan kami berbicara bersama? Bisakah mereka mendeteksi kecenderungan terhadap perilaku antisosial, kekerasan, depresi atau kondisi lainnya? Tidak akan ada lompatan imajinasi untuk membayangkannya Perangkat itu sendiri sebagai terapis masa depan - berinteraksi dengan kami dalam berbagai cara untuk melacak keefektifan intervensi yang mereka sampaikan.

Jangan khawatir dulu karena kita bertahun-tahun jauh dari masa depan seperti itu, tapi itu meningkat masalah privasi, terutama saat kita berinteraksi lebih dalam dengan komputer pada saat bersamaan karena mereka menjadi lebih kuat dalam menganalisis dunia di sekitar mereka.

Saat kita jeda juga untuk mempertimbangkan indera manusia lain selain suara (ucapan); Mungkin kita juga membocorkan informasi melalui penglihatan (seperti bahasa tubuh, tersipu), sentuhan (suhu dan gerakan) atau bahkan bau (feromon). Jika perangkat pintar bisa belajar banyak dengan mendengarkan bagaimana kita berbicara, seseorang bertanya-tanya berapa banyak lagi yang bisa mereka pungut dari indera lainnya.

Tentang Penulis

Ian McLoughlin, Guru Besar Komputasi, Kepala Sekolah (Medway), University of Kent

Artikel ini awalnya diterbitkan pada Percakapan. Membaca Artikel asli.

Buku terkait:

at Pasar InnerSelf dan Amazon