Wyniki po 3 miesiącach z GitHub Copilot – dzielę się liczbami
389 wyświetleń
4 odpowiedzi
E
Wdrożyłem Copilota dla 5 programistów (plan Business, ~100 USD/mc). Po 3 miesiącach mamy 18% szybsze code review, mniej więcej 2x szybsze pisanie testów jednostkowych i jeden poważny bug wciśnięty przez AI którego nie złapaliśmy przed deployem. Netto oceniam wdrożenie jako pozytywne ale wymaga dyscypliny w review. Jeśli ktoś ma pytania to chętnie odpiszę.
I
Podobne liczby u nas po 4 miesiącach, choć mamy 12 deweloperów. Największa zmiana to właśnie testy – junior devs piszą je teraz bez marudzenia, bo Copilot generuje 80% boilerplate'u. Bug przed deployem też nam się zdarzył, od tamtej pory mamy obowiązkowy drugi pair review dla kodu gdzie Copilot miał wysoki udział.
F
Jak mierzysz te 18% przy code review? Liczysz czas od otwarcia PR do merge'a, czy faktyczny czas spędzony przez reviewera na komentarzach? Pytam bo zależy mi na metodologii zanim zacznę podobne testy u siebie.
A
Ciekawe wyniki, ale 100 USD miesięcznie to nie jedyny koszt – ten jeden bug produkcyjny to ile Was kosztował realnie w godzinach debugowania i potencjalnych stratach? Ja po podobnym incydencie zrezygnowałem z Copilota na rzecz Cursor z lokalnym modelem, więcej kontroli nad tym co trafia do review.
D
A macie jakieś dane o tym ile sugestii Copilota devsi w ogóle przyjmują? W moim zespole acceptance rate wyszedł nam poniżej 25% i zaczęliśmy kwestionować czy koszt narzędzia się broni przy takim poziomie odrzuceń.
Zaloguj się, aby brać udział w dyskusji.