Wie Entwickler ChatGPT auf GitHub nutzen

ChatGPT ist ein wichtiges Tool für Softwareentwickler geworden, das ihnen bei verschiedenen Aufgaben wie Programmierung, Testen und Debuggen hilft. Trotz seiner Beliebtheit bleibt weitgehend unbekannt, wie Entwickler ChatGPT in einer kollaborativen Umgebung, insbesondere auf Plattformen wie GitHub, nutzen. Dieser Artikel untersucht die Gespräche, die Entwickler mit ChatGPT in GitHub-Pull-Requests (PRs) und Issues teilen, und gibt Einblicke, wie sie mit diesem KI-Assistenten interagieren.

#Verständnis des Datensatzes

Um die Gespräche der Entwickler mit ChatGPT zu verstehen, haben wir einen grossen Datensatz von 580 geteilten Gesprächen von GitHub untersucht. Davon stammen 210 aus Pull-Requests und 370 aus Issues. Wir haben diese Gespräche manuell analysiert, um zu sehen, welche Art von Hilfe die Entwickler suchten und wie sie diese Informationen miteinander teilten.

#Arten von Fragen, die Entwickler stellen

Entwickler nutzen ChatGPT für eine Reihe von Software Engineering-Fragen. Wir haben 16 verschiedene Arten von Anfragen identifiziert, die Entwickler stellen, wenn sie Gespräche mit ChatGPT teilen. Die häufigsten Kategorien sind:

1. Code-Generierung: Entwickler bitten ChatGPT oft, Code-Snippets zu erstellen oder vollständige Programmieraufgaben zu erledigen.
2. Konzeptionelle Fragen: Viele Anfragen drehen sich um das Verständnis technischer Konzepte oder theoretischer Prinzipien.
3. How-to-Anleitungen: Entwickler suchen häufig nach Schritt-für-Schritt-Anleitungen, um bestimmte Aufgaben zu erledigen.
4. Problemlösung: Entwickler suchen Hilfe bei der Behebung von Bugs und anderen Problemen in ihrem Code.
5. Code-Überprüfung: Entwickler bitten um Vorschläge und Feedback zu ihrem Code von ChatGPT.

Durch die Kategorisierung dieser Anfragen können wir die gemeinsamen Bedürfnisse der Entwickler erkennen, wenn sie sich an ChatGPT wenden.

#Mehrere Interaktionen

Ein erheblicher Teil der Gespräche zwischen Entwicklern und ChatGPT besteht aus mehreren Austauschrunden. Wir haben herausgefunden, dass mehr als ein Drittel der Gespräche in Pull-Requests und Issues Mehrfachinteraktionen waren. Das bedeutet, dass Entwickler oft im Austausch mit ChatGPT stehen, ihre Fragen verfeinern oder zusätzlichen Kontext nach einer Antwort bereitstellen.

Während dieser Mehrfachinteraktionen nutzen Entwickler verschiedene Strategien, wie zum Beispiel:

• Iterative Folgefragen: Anpassung und Verbesserung ihrer Anfragen basierend auf den vorherigen Antworten von ChatGPT.
• Prompt-Verfeinerung: Bereitstellung von mehr Kontext oder Einschränkungen, um ChatGPT zu helfen, bessere Antworten zu geben.
• Nach Klarstellung fragen: Weitere Erklärungen zu den Antworten von ChatGPT anfordern.

Diese Strategien zeigen, dass Entwickler aktiv mit ChatGPT interagieren und die Qualität der KI-Antworten verbessern wollen.

#Rollen der Entwickler und Teilverhalten

In kollaborativen Umgebungen nehmen Entwickler je nach ihren Verantwortlichkeiten im Projekt unterschiedliche Rollen ein. Unsere Untersuchung hat gezeigt, dass Entwickler Gespräche mit ChatGPT unterschiedlich teilen, je nach ihren Rollen. Zum Beispiel verweisen Autoren von Pull-Requests oft auf ChatGPT als Quelle ihrer Lösungen, während Code-Reviewer die Gespräche nutzen, um neue Ideen oder Vorschläge einzubringen.

Wir haben die Gründe für das Teilen von Gesprächen in mehrere zentrale Punkte kategorisiert:

1. Verweis auf eine Quelle der Lösung: Entwickler zitieren häufig ChatGPT, um zu zeigen, woher ihre Lösungen stammen.
2. Potenzielle Lösungen: Viele Entwickler beziehen sich auf die Antworten von ChatGPT als mögliche Lösungen für Probleme.
3. Unterstützung von Behauptungen: Einige Entwickler nutzen geteilte Gespräche, um ihre Argumente oder Vorschläge während Diskussionen zu untermauern.

#Orte der geteilten Gespräche

Der Ort, an dem Entwickler diese Gespräche auf GitHub teilen, variiert ebenfalls. In Pull-Requests findet man Links zu ChatGPT-Gesprächen in der Beschreibung, in Kommentaren oder im Code-Überprüfungsbereich. In Issues werden Links hauptsächlich in Kommentaren und Beschreibungen geteilt. Diese Verteilung hebt die Bedeutung des Kontexts hervor, wie Entwickler ihre Fragen und Lösungen kommunizieren.

#Auswirkungen auf Software-Entwicklungstools

Die Ergebnisse dieser Studie haben wichtige Auswirkungen auf das Design und die Entwicklung von Tools, die KI wie ChatGPT integrieren. Zu verstehen, wie Entwickler mit ChatGPT interagieren, kann die Effektivität dieser Tools in kollaborativen Umgebungen verbessern.

1. Verbesserung der Tools: Zu wissen, welche häufigen Anfragen Entwickler machen, kann helfen, KI-Tools zu verfeinern, um besser auf diese Bedürfnisse einzugehen.
2. Unterstützung der Zusammenarbeit: Einblicke in das Teilverhalten können zur Entwicklung von Funktionen führen, die eine bessere Zusammenarbeit unter Entwicklern fördern.
3. Benchmarking der KI-Leistung: Die Arten von Anfragen und Interaktionen zeigen, dass bestehende Benchmarks möglicherweise nicht das gesamte Spektrum der Eingaben erfassen, die Entwickler bei der Arbeit mit KI verwenden.

Indem wir uns auf die spezifischen Weise konzentrieren, wie Entwickler ChatGPT nutzen, können wir zukünftige Forschungen und Entwicklungen informieren, die darauf abzielen, die Rolle der KI im Softwareentwicklungsprozess zu verbessern.

#Zukünftige Forschungsrichtungen

Es gibt mehrere Ansätze für zukünftige Forschungen, basierend auf den Ergebnissen dieser Studie:

1. Grössere Datensätze: Den Datensatz erweitern, um Gespräche von anderen Plattformen oder zusätzlichen Zeiträumen einzubeziehen, kann umfassendere Einblicke bieten.
2. Untersuchung der Prompt-Entwicklung: Zu untersuchen, wie Entwickler ihre Aufforderungen formulieren, kann zu einem besseren Verständnis der effektiven Kommunikation mit KI führen.
3. Rollenspezifische Tools: Die Entwicklung spezialisierter Tools, die sich an den unterschiedlichen Rollen orientieren, die Entwickler im kollaborativen Coding spielen, kann die Produktivität steigern.

Durch die Erkundung dieser Bereiche können Forscher und Entwickler besser verstehen, wie KI zunehmend Einfluss auf die Softwareentwicklung nimmt und wie sie die Zusammenarbeit unter Entwicklern verbessern kann.

#Fazit

ChatGPT erweist sich als wertvolle Hilfe in Gesprächen zur Softwareentwicklung, insbesondere auf kollaborativen Plattformen wie GitHub. Durch die Analyse geteilter Gespräche haben wir Einblicke in die Arten von Anfragen gewonnen, die Entwickler stellen, wie sie mit ChatGPT interagieren und die Gründe für das Teilen dieser Gespräche. Die Ergebnisse betonen die Bedeutung des Kontextverständnisses und massgeschneiderter Tools, um effektive Interaktionen zwischen Entwicklern und KI zu unterstützen und Innovationen sowie Effizienz im Softwareentwicklungsprozess voranzutreiben.