openpilot 0.11.1

LM GT3 modeli (#37425) telefon algılamayı geliştirir ve yerel olarak barındırılan büyük bir Görüş Dili Modeli (VLM) tarafından oluşturulan etiketler kullanılarak eğitilen ilk açık pilot DM modelidir. Bu modelde, sürücünün telefon kullanımına ilişkin temel gerçek, bir VLM'ye bir EVET/HAYIR sorusu sorarak ve YES tokeninin çıkış olasılığını kullanarak üretilir. Dil modeli yalnızca bir jetonu tahmin edecek şekilde ayarlanmıştır. Önceki yaklaşım, bir dizi elle etiketlenmiş sürücü görüntüsü üzerinde eğitilmiş özel bir sınıflandırıcı ağına dayanıyordu. Bu yeni hattı değerlendirmek için, telefon kullanan veya kullanmayan sürücülerle birlikte, telefon_using seti adı verilen 1k sürücü görüntüleri doğrulama setini elle etiketledik. Ayrıca, ön panele monte edilmiş ancak kullanımda olmayan bir telefonun yer aldığı 80 sürücü resminden oluşan,phone_mounted adında daha küçük bir set hazırladık. Phone_mounted kümesi zor negatif örnekleri temsil eder. VLM, Yanlış Pozitifleri önemli ölçüde azaltır ve aktif el tipi telefon kullanımının Gerçek Pozitifler olarak algılanmasını iyileştirirken, tüm takılı telefonları Gerçek Negatifler olarak tutar. 1k doğrulama setindephone_using için ROC eğrileri. hepsi negatif örnekler olduğundan, telefon_mounted gösterilmemiştir; bunların yanlış pozitifleri, telefon_kullanımı gerçek pozitif oranı ~%50 olduğunda 0'a düşer. Sahada konuşlandırılan modelle, açık pilot kullanıldığında güvenli sürüş alışkanlıklarına olumlu etkilerini de görme fırsatı bulduk. Geliştirilen model tarafından tespit edilen telefon kullanım sürelerini, bu model değişikliğinden önce ve sonra aynı cihaz grubunda karşılaştırdık.

Openpilot etkinleştirildiğinde önemli bir düşüş gördük ve hatta etkinleştirilmediğinde küçük bir düşüş gözlemledik; bu da sürücülerin genel olarak telefon kullanımlarını azalttığını gösteriyor. Ana/gecelik/aşamalama çalıştıran 71 cihazdan oluşan aynı örnek grupta telefon kullanım davranışı ilerlemesi: yeni DM modelinden önceki 60 günlük pencereden örneklenen segmentlerden önce; 20 günlük pencereden sonraki segmentlerden sonra. Tüm veriler aynı model kullanılarak çevrimdışı olarak yeniden değerlendirildi. İki yol kamerası, ISP'de sürücü kamerasından farklı bir görüntü işleme yolu kullanıyor ve sürücü kamerası işleme tarafındaki bazı eksik parçalar nedeniyle daha iyi görüntü kalitesine sahip. Artık eşdeğer ton eşleme bloklarını etkinleştirdik (#37873) ve ayrıca sensör üzeri gruplamadan demozaik sonrası ölçek küçültmeye (#37876) geçtik.