Ini adalah aplikasi Linux bernama xFormers yang rilis terbarunya dapat diunduh sebagai v0.0.33.post1sourcecode.tar.gz. Aplikasi ini dapat dijalankan secara daring di penyedia hosting gratis OnWorks untuk workstation.
Unduh dan jalankan aplikasi ini secara online bernama xFormers dengan OnWorks secara gratis.
Ikuti petunjuk ini untuk menjalankan aplikasi ini:
- 1. Download aplikasi ini di PC Anda.
- 2. Masuk ke file manager kami https://www.onworks.net/myfiles.php?username=XXXXX dengan username yang anda inginkan.
- 3. Upload aplikasi ini di filemanager tersebut.
- 4. Jalankan emulator online OnWorks Linux atau Windows online atau emulator online MACOS dari situs web ini.
- 5. Dari OS Linux OnWorks yang baru saja Anda mulai, buka file manager kami https://www.onworks.net/myfiles.php?username=XXXXX dengan nama pengguna yang Anda inginkan.
- 6. Download aplikasinya, install dan jalankan.
Tangkapan layar
Ad
xFormer
DESKRIPSI
xformers adalah pustaka blok penyusun transformator yang modular dan berorientasi kinerja, dirancang untuk memungkinkan para peneliti dan insinyur menyusun, bereksperimen, dan mengoptimalkan arsitektur transformator secara lebih fleksibel daripada kerangka kerja monolitik. Pustaka ini mengabstraksi komponen-komponen seperti lapisan atensi, modul umpan maju, normalisasi, dan pengodean posisi, sehingga Anda dapat dengan mudah menggabungkan dan mencocokkan atau menukar kernel yang dioptimalkan. Salah satu tujuan utamanya adalah atensi yang efisien: pustaka ini mendukung mekanisme atensi padat, jarang, peringkat rendah, dan perkiraan (misalnya FlashAttention, Linformer, Performer) melalui modul yang dapat dipertukarkan. Pustaka ini mencakup implementasi operator yang hemat memori baik dalam Python maupun C++/CUDA yang dioptimalkan, memastikan bahwa kinerja tidak dikorbankan demi modularitas. Pustaka ini juga terintegrasi dengan PyTorch secara mulus sehingga Anda dapat menambahkan blok-bloknya ke model yang ada, mengganti lapisan atensi default, atau membangun arsitektur baru dari awal. xformers mencakup alat pelatihan, penerapan, dan pembuatan profil memori.
Fitur
- Blok bangunan transformator modular (perhatian, FFN, norma, pengkodean posisi)
- Dukungan untuk berbagai jenis perhatian efisien (jarang, perkiraan, lokalitas)
- Kernel GPU yang dioptimalkan dan implementasi Python fallback
- Integrasi yang mulus dengan model PyTorch dan loop pelatihan
- Alat profil dan pembandingan untuk membandingkan throughput, memori, dan latensi
- Dukungan untuk mencampur jenis perhatian dalam satu model (arsitektur hibrida)
Bahasa Pemrograman
Ular sanca
KATEGORI
Ini adalah aplikasi yang juga dapat diunduh dari https://sourceforge.net/projects/xformers.mirror/. Aplikasi ini dihosting di OnWorks agar dapat dijalankan secara daring dengan cara termudah dari salah satu Sistem Operasi gratis kami.
