VisualGPT Microsoft mengeluarkan teknologi baharu ' VisualGPT ” iaitu kemajuan AI dan membuka kemungkinan untuk pengalaman AI yang lebih menarik dan interaktif dengan merapatkan jurang antara visual dan bahasa.
Apakah VisualGPT?
VisualGPT ialah versi lanjutan ChatGPT yang berdasarkan model NLP (Natural Language Processing), tetapi dalam VisualGPT, VFMS digunakan yang boleh menukar pertanyaan teks kepada bentuk imej. Ia sedemikian rupa sehingga ia merupakan gabungan/integrasi pertanyaan teks dan imej.
Tujuan VisualGPT
Selepas pelancaran ChatGPT ke pasaran yang mengusahakan format teks sebagai satu-satunya, untuk mencapai tahap kemajuan seterusnya terdapat alat yang sempurna yang akan berfungsi pada format teks ke grafik, mengikut semua sebab ini dan dalam perlumbaan untuk AI kemajuan Microsoft mengeluarkan VisualGPT tujuan utama VisualGPT adalah untuk mencipta imej AI atas permintaan pengguna atau menganalisis imej tersebut
Seni bina VisualGPT
VisualGPT mengandungi Pertanyaan Pengguna, Pengurus Gesaan, Model Asas Visual(VFM), Prinsip Sistem, Sejarah Dialog, Sejarah Penaakulan dan Jawapan Pertengahan.
Jika kita bercakap secara khusus tentang modelnya iaitu, ' VFM (Model Asas Visual) ”, hampir 22 VFM digunakan, seperti BLIP (Pra-latihan Bahasa-Imej Bootstrapping), dan Stable Diffusion.
Bagaimana untuk Menjalankan Visual ChatGPT?
Untuk menjalankan Visual ChatGPT, pertimbangkan langkah berikut:
Langkah 1: Cipta Persekitaran
Pertama, anda perlu mencipta persekitaran Python versi 3.8:
import sys
sys.path.append ( '/usr/local/lib/python3.8/site-packages' )
Langkah 2: Klonkan Fail Visual ChatGPT
Sekarang, klon fail ChatGPT visual dari GitHub menggunakan arahan berikut:
! git klon https: // github.com / deepanshu88 / visual-chatgpt.git 
Langkah 3: Sediakan Direktori Baharu
Selepas itu, sediakan direktori baharu melalui arahan yang dinyatakan di bawah:
% cd visual-chatgptLangkah 4: Pasang Pakej yang Diperlukan
Sekarang, pasang pakej yang diperlukan menggunakan ' pip ” cmdlet:
! keriting https: // bootstrap.pypa.io / get-pip.py -O get-pip.py! python3.8 get-pip.py
! python3.8 -m pip pasang -r keperluan.txt
Langkah 5: Akses OpenAI API
Selepas memasang pakej awal, akses OpenAI API dengan mendapatkan kunci API daripada 'platform.openai.com' dan membuat panggilan API yang disahkan:
% env OPENAI_API_KEY =sk-xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxLangkah 6: Pilih Model
Terakhir, selepas mengakses Openai pilih Model, terdapat lebih daripada 20 model yang digunakan dalam visualGPT yang anda boleh pilih mengikut keperluan anda:
! python3.8 . / visual_chatgpt.py --muat Text2Image_cuda: 0Dalam perintah di atas, ' Teks2Imej ” sepadan dengan model yang akan digunakan. Untuk butiran lanjut, semak Google Colab ini buku nota .
Kesimpulan
ChatGPT diperkenalkan untuk mendapatkan jawapan khusus tentang sebarang pertanyaan dan kini Microsoft telah melancarkan VisualGPT yang mampu menangani data teks dan juga bergambar. Oleh itu, pengguna hanya boleh menambah keperluannya dalam bentuk teks dan mendapatkan output grafiknya.