Tes keterampilan AI untuk software engineer, pada pekerjaan engineering nyata.
Engineer yang baik dengan AI tetap memiliki pekerjaannya. Mereka menemukan penyebabnya sebelum membiarkan AI menulis kode, dan membuktikan perubahannya berjalan dengan tes.
Orang yang membangun dan merawat layanan di balik produk perangkat lunak: API, pembayaran, integrasi. Mereka membangun fitur, memperbaiki bug di kode yang bukan mereka tulis, dan merilis perubahan yang bisa ditinjau orang lain.
Contoh tugas keterampilan AI untuk software engineer
Salah satu tugas engineering kami. Dasbor Anda memuat sisanya, dan Anda bisa membawa tugas sendiri.
LemonsignalTugas AndaMerekamTenggatJum 24 Okt
Brief
Perbaiki tagihan ganda
Pelanggan ditagih dua kali. Cari tahu penyebabnya di layanan pembayaran dan perbaiki, tanpa merusak yang lain.
Lalu perbaiki masalah yang sama di layanan refund.
File
Kode layanan pembayaran
Log dari tiga tagihan ganda
Pengaturan percobaan ulang
Waktu
Tenggat Jum 24 Okt
Bekerja di
Claude Code
Codex
Mulai di komputer sayaMulai di browser
Di mana AI salahSetiap tugas punya beberapa titik di mana AI biasanya keliru. Dari situ Anda melihat siapa yang memeriksa hasilnya.
Bagian yang berulangSetelah layanan pembayaran, mereka memperbaiki bug yang sama di layanan refund. Anda melihat apakah mereka memakai ulang apa yang dibuat pertama kali, atau mulai lagi secara manual.
WaktuAnda yang menentukan: tenggat, batas waktu, atau keduanya. Kami menyarankan tenggat tanpa batas waktu, agar mereka bekerja seperti di pekerjaan sebenarnya.
Tempat mereka bekerjaClaude Code atau Codex, di komputer mereka sendiri atau di browser.
Pertanyaan tentang menguji keterampilan AI software engineer
Bisakah engineer memakai Claude Code atau Codex di pengaturan mereka sendiri?
Bisa. Mereka bekerja di komputer sendiri dengan pengaturan, skill, dan prompt tersimpan milik mereka, atau di sandbox browser kami jika tidak ingin memasang apa pun.
Apakah ini tes coding?
Bukan. Ini bug nyata di codebase nyata, dan mereka memang diharapkan memakai AI untuk memperbaikinya. Kami menilai cara mereka bekerja dengan AI sekaligus perbaikannya.
Bahasa pemrograman apa yang didukung?
Tugas yang kami punya saat ini adalah layanan pembayaran. Jika Anda butuh stack lain, bawa tugas Anda sendiri dan kami menyiapkannya bersama Anda.