Databricks'in Milyonlarca Satırlık Kod Tabanında Kodlama Aracılarının Kıyaslanması

Özgün başlık: Benchmarking Coding Agents on Databricks’ Multi-Million Line Codebase
Yazan: Vinay Gaba, Ankit Mathur, Rishabh Singh, Patrick Wendell ve Matei Zaharia Databricks'te, mühendislik için yapay zekayı agresif bir şekilde benimsedikçe yazılım oluşturma şeklimiz hızla değişiyor. Kod yazmaya yönelik model ve donanım yelpazesi geçtiğimiz yıl hızla genişleyerek geliştiricilere her zamankinden daha fazla seçenek sundu. Daha fazla seçenekle birlikte, gerçek dünyadaki kodlama görevlerinde hangi kodlama aracılarının en iyi performansı sunduğunu anlamak ve görev performansının fiyata göre nasıl değiştiğini anlamak giderek daha önemli hale geldi. Bu makale, mühendislerimizin Databricks kod tabanında gerçekleştirdiği gerçek kodlama görevlerine ilişkin araçları değerlendiren, Databricks'te oluşturduğumuz dahili kodlama kıyaslamasının sonuçlarını ve metodolojisini paylaşmaktadır.