{"id":3243,"date":"2024-07-12T15:53:19","date_gmt":"2024-07-12T15:53:19","guid":{"rendered":"https:\/\/aifuturize.com\/?p=3243"},"modified":"2024-07-12T15:54:52","modified_gmt":"2024-07-12T15:54:52","slug":"harvards-ai-chatbot-outperforms-gpt-4v-with-90-tumor-detection","status":"publish","type":"post","link":"https:\/\/aifuturize.com\/id\/ai-news\/harvards-ai-chatbot-outperforms-gpt-4v-with-90-tumor-detection\/","title":{"rendered":"Chatbot AI Harvard Mengungguli GPT-4V dengan Deteksi Tumor 90%"},"content":{"rendered":"
\"Obrolan<\/span><\/div>

Melampaui GPT-4V! Chatbot AI Harvard Medical School Ditampilkan di Alam dengan Akurasi Deteksi Tumor Hampir 90%<\/h2>\n

Saat ini, kanker telah menjadi salah satu penyebab utama kematian di seluruh dunia, dengan jutaan orang meninggal setiap tahunnya. Organisasi Kesehatan Dunia telah menyatakan bahwa sepertiga penyakit kanker dapat disembuhkan melalui deteksi dini dan pengobatan dini.<\/p>\n

Namun, skrining kanker selalu menjadi tantangan besar dalam bidang medis. Secara khusus, identifikasi dan diagnosis tumor yang tepat sangat penting untuk perawatan pasien dalam analisis patologis. Pemeriksaan patologi tradisional sangat bergantung pada keahlian dan pengetahuan profesional para spesialis.<\/p>\n

Dengan berkembangnya model besar seperti GPT-4, penelitian tentang penggunaan kecerdasan buatan (AI)<\/a> untuk membantu diagnosis patologis secara bertahap muncul. Namun, banyak sistem AI yang masih menghadapi kekurangan kinerja dan interaktivitas yang buruk dalam aplikasi praktis.<\/p>\n

Baru-baru ini, tim peneliti dari Harvard Medical School dan kolaboratornya mengembangkan asisten AI umum bahasa visual untuk patologi manusia yang disebut PathChat. Sistem ini dapat mengidentifikasi penyakit dengan tepat dari slide biopsi pada hampir 90% kasus, mengungguli model AI umum seperti GPT-4V dan model medis profesional yang saat ini tersedia di pasar.<\/p>\n

Makalah penelitian terkait, berjudul \u201cCopilot AI Generatif Multimodal untuk Patologi Manusia,\u201d<\/a> telah dipublikasikan di jurnal ilmiah Nature.<\/p>\n

\"Kopilot

Kopilot AI Generatif Multimodal untuk Patologi Manusia<\/p><\/div>\n

\n
\n
\n
\n

Perlu dicatat bahwa teknologi terobosan ini tidak hanya dapat mengidentifikasi tumor tetapi juga berinteraksi dengan pengguna, menyediakan alat dan perspektif baru untuk diagnosis dan penelitian di bidang patologi.<\/p>\n

PathChat: Asisten AI Deteksi Patologi Multimodal<\/h3>\n

Selama bertahun-tahun, patologi komputasi telah membuat kemajuan signifikan dalam menganalisis data morfologi patologis dan data deteksi molekuler. Bidang penelitian khusus ini, yang dibentuk oleh persilangan antara patologi dengan AI dan teknologi visi komputer, secara bertahap menjadi pusat penelitian dalam analisis citra medis.<\/p>\n

Patologi komputasi melibatkan penggunaan pemrosesan gambar dan teknologi AI untuk membangun model patologi komputasi AI. Model ini memperoleh gambar histopatologis dan melakukan evaluasi awal terhadap tampilan morfologi gambar tersebut untuk membantu diagnosis, penilaian kuantitatif, dan pengambilan keputusan melalui teknik analisis gambar otomatis.<\/p>\n

Saat ini, dengan pesatnya pertumbuhan teknologi AI generatif yang diwakili oleh ChatGPT, model bahasa besar multimodal (MLLM) semakin banyak diterapkan dalam penelitian patologi komputasi dan praktik klinis di bidang patologi. Namun, dalam subbidang patologi anatomi yang sangat terspesialisasi, penelitian untuk membangun asisten AI multimodal umum untuk patologi masih dalam tahap awal.<\/p>\n

Dalam karya ini, tim peneliti merancang asisten AI generatif multimodal khusus untuk penelitian patologi manusia\u2014PathChat. Mereka melatih sistem tersebut melalui pembelajaran mandiri pada lebih dari 100 juta fragmen gambar jaringan sel dari lebih dari 1 juta slide. Dengan menggabungkan ini dengan encoder visual murni yang canggih, UNI, mereka menghasilkan MLLM yang mampu mempertimbangkan masukan bahasa visual dan alami. Setelah menyempurnakan kumpulan data lebih dari 450.000 titik data instruksi, PathChat dibuat.<\/p>\n

Penelitian tersebut menemukan bahwa PathChat tidak hanya dapat menangani masukan multimoda tetapi juga secara akurat menanggapi pertanyaan terkait patologi yang kompleks, mengidentifikasi penyakit dengan tepat dari slide biopsi pada hampir 90% kasus.<\/p>\n

\"JalurCaht\"

JalurCaht<\/p><\/div>\n

Melampaui GPT-4V dengan Akurasi Hampir 90%<\/h3>\n

Untuk menguji kinerja deteksi PathChat, tim peneliti membandingkan PathChat dengan model sumber terbuka LLaVA, LLaVA-Med khusus biomedis, dan GPT-4V.<\/p>\n

Mereka merancang eksperimen perbandingan PathQABench, menganalisis kasus patologis dari berbagai organ dan praktik untuk membandingkan kinerja deteksi PathChat dengan LLaVA, LLaVA-Med, dan GPT-4V.<\/p>\n<\/div>\n

Hasilnya menunjukkan bahwa tanpa memberikan konteks klinis, akurasi diagnostik PathChat secara signifikan lebih tinggi dibandingkan LLaVA 1.5 dan LLaVA-Med. Saat mengevaluasi gambar saja, PathChat mencapai akurasi 78.1% di semua tolok ukur gabungan, yaitu 52.4% lebih tinggi dari LLaVA 1.5 dan 63.8% lebih tinggi dari LLaVA-Med.<\/p>\n

Dengan dimasukkannya konteks klinis, akurasi PathChat semakin meningkat menjadi 89.5%, yaitu 39.0% lebih tinggi dari LLaVA 1.5 dan 60.9% lebih tinggi dari LLaVA-Med.<\/p>\n

Eksperimen komparatif mengungkapkan bahwa PathChat dapat memperoleh kemampuan prediktif yang substansial hanya dari fitur visual gambar, dibandingkan hanya mengandalkan konteks klinis. Ia dapat secara efektif dan fleksibel memanfaatkan informasi multimodal untuk mendiagnosis gambar histologis secara akurat dengan menggabungkan informasi non-visual yang disediakan melalui bahasa alami biasa.<\/p>\n

Untuk mengevaluasi secara obyektif keakuratan respons masing-masing model terhadap pertanyaan terbuka, tim peneliti merekrut tujuh ahli patologi untuk membentuk panel penilaian. Dengan membandingkan respons keempat model terhadap 260 pertanyaan terbuka, keakuratan deteksi model dianalisis.<\/p>\n

Terakhir, pada pertanyaan terbuka di mana tujuh ahli dapat mencapai konsensus, akurasi keseluruhan PathChat adalah 78.7%, yaitu 26.4%, 48.9%, dan 48.1% lebih tinggi masing-masing dari GPT-4V, LLaVA 1.5, dan LLaVA-Med. Secara keseluruhan, PathChat menunjukkan kinerja yang unggul dibandingkan tiga model lainnya.<\/p>\n

Para peneliti menunjukkan bahwa PathChat dapat menganalisis dan mendeskripsikan detail morfologi halus dalam gambar jaringan patologis. Selain masukan gambar, alat ini juga dapat menjawab pertanyaan yang memerlukan pengetahuan latar belakang patologi dan biomedis umum, menjadikannya alat yang menjanjikan untuk membantu ahli patologi dan peneliti.<\/p>\n

Meskipun kinerja PathChat luar biasa dalam eksperimen, PathChat masih menghadapi beberapa tantangan dalam penerapan praktis. Hal ini termasuk memastikan model dapat mengidentifikasi kueri yang tidak valid dan menghindari keluaran yang salah, menjaga sinkronisasi dengan pengetahuan medis terkini, dan mengatasi fakta bahwa data pelatihan PathChat sebagian besar berasal dari data historis, yang mungkin mencerminkan \u201ckonsensus ilmiah masa lalu\u201d dan bukan informasi terbaru.<\/p>\n

Para peneliti menyatakan bahwa penelitian di masa depan mungkin lebih meningkatkan kemampuan PathChat, termasuk mendukung seluruh WSI gigapixel atau beberapa input WSI dan mengintegrasikan lebih banyak dukungan tugas spesifik, seperti penghitungan yang tepat atau lokalisasi objek. Selain itu, mengintegrasikan PathChat dengan penampil slide digital atau rekam medis elektronik mungkin lebih meningkatkan kepraktisannya dalam praktik klinis.<\/p>\n

Baru-baru ini, model AI generatif multimodal PathChat 2 dirilis. Ini dapat mempertimbangkan gambar dan teks patologi, menerima masukan bergantian dari beberapa gambar dan teks beresolusi tinggi dalam penampil slide interaktif, sehingga memberikan evaluasi yang lebih komprehensif untuk setiap kasus konsultasi.<\/p>\n

Dibandingkan dengan PathChat 1, ini telah meningkatkan kinerja secara signifikan dalam diagnosis banding dan deskripsi morfologi. Ini juga telah meningkatkan kemampuan dalam tugas-tugas seperti mengikuti instruksi, menjawab pertanyaan terbuka, dan meringkas laporan.<\/p>\n