76
1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

Embed Size (px)

Citation preview

Page 1: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

1

PSPExperiment über den Nutzen von Kursen über den

“persönlichen Softwareprozess”

Page 2: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

2

Inhalt

• Über PSP?

• Experiment

• Motivation

• Beschreibung

• Auswertung

• Bewertung des Experiments

Page 3: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

3

Über PSPÜber den

“persönlichen Softwareprozess”

Page 4: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

4

Was ist PSP?

• Verfahren, um die eigenen “Fähigkeiten”zu verbessern

• Terminplanung

• Fehlervermeidung

Page 5: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

5

Watts Humphrey

Page 6: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

6

Arbeitsweise ohne PSP

• Termine werden nicht eingehalten

• Übliche Schätzungen zu optimistisch

• Fehler werden bei Planung nicht berücksichtigt

• Fastregeln helfen auch nicht weiter (”Schätzen, Zeit verdoppeln”)

Page 7: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

7

Arbeitsweise ohne PSP

• Fehler werden erst sehr spät erkannt

• Je später Fehler erkannt, desto schwieriger zu korrigieren

• Gut zu wissen: Wo macht man häufig Fehler?

• Fehler häufig erst bei Auslieferung erkannt

• Zeitdruck: geringere Sorgfalt

Page 8: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

8

Arbeitsweise ohne PSP

• Fazit

• Intuitiv sammelt man zu wenige Informationen, um Dauer künftiger Projekte gut schätzen zu können

• Man versäumt, sich häufige Fehlerquellen bewusst zu machen

Page 9: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

9

Arbeitsweise mit PSP

• Idee von PSP

• Das geht aber besser!

• Daten über seinen Arbeitsstil sammeln

• Daten regelmäßig auswerten

• historische Daten

Page 10: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

10

Arbeitsweise mit PSP

• “Logbuch” erstellen:

• Erfasse minutengenau, was du wann gemacht hast• Arbeitsphasen angeben• Beginn und Ende einer Programmeinheit (mit LOC)• Nebenbei ausgeführte Tätigkeiten• Fehler gefunden• Fehler beseitigt

• Individuelle Schwerpunkte

Page 11: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

11

Beispiel für “Logbuch”

1998-08-11 09:49:53 ecd

1998-08-11 09:49:54 bcd

1998-08-11 09:59:04 ecd

Kaffee holen gewesen

1998-08-11 10:14:32 bte

Page 12: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

12

Beispiel für “Logbuch”

1998-08-11 10:17:05 be

1998-08-11 10:22:19 ee cd 1 F

read_input.c:112

Zweiter Index von substring() zeigt hinter letzten Buchstaben!

Page 13: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

13

Arbeitsweise mit PSP

• Auswerten des “Logbuchs”

• Programmeinheiten nach Typ kategorisieren

• Dauer für Programmeinheit nach Typ und Größe bestimmen

• Häufige Fehler bestimmen• Fehler mit zeitaufwendigem Debugging

bestimmen• Arbeitsphasen der Fehler bestimmen

Page 14: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

14

Beispiel für Auswertung

Klasse Zahl % Dauer ø

A 21 81 132 6,3

F 4 15 71 17,8

W 1 4 18 18,1

26 100 221 8,5

Page 15: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

15

Arbeitsweise mit PSP

• Werkzeuge

• Editor mit Zeitstempelfunktionalität

• z.B. UltraEdit (F7), Emacs

• Skripte zur Auswertung

Page 16: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

16

Arbeitsweise mit PSP

• Terminplanung für künftige Projekte

• Größe des Projektes schätzen und grob einteilen

• Größe der Programmeinheiten schätzen

• Benötigte Zeit aus der Auswertung des “Logbuchs” folgern

Page 17: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

17

Arbeitsweise mit PSP

• Fehlervermeidung

• Durch Einsichten aus der Analyse

• Intensivere Reflexion der eigenen Tätigkeit

• Checklisten für künftige Codedurchsicht

Page 18: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

Fragen?

Page 19: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

19

ExperimentExperiment über den Nutzen von Kursen über den

“persönlichen Softwareprozess”

Page 20: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

20

Motivation

• Was will man untersuchen?

• Werden Erkenntnisse aus den PSP-Kursen in der Praxis genutzt?

• Arbeitsweise der Versuchspersonen:

• Zuverlässigkeit• Zeitschätzung• Produktivität (Randbetrachtung)

Page 21: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

21

Motivation

• Frühere Untersuchungen:

• Watts Humphrey

• mehrere Untersuchungen (pro PSP)

• Industrie

• Ansätze, die für PSP sprechen

Page 22: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

22

Motivation

• Nachteile früherer Untersuchungen:

• Hawthorne-Effekt

• einfache Aufgaben (Humphrey)

• unüberschaubares Umfeld (Industrie)

• keine Kontrollgruppen

Page 23: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

23

Beschreibung

• Überblick

• Durchführung zwischenFebruar 1997 und Oktober 1998

• Experimententwurf• Zwei Gruppen• Extra-Subjekt-Design• Programm entwickeln

(mit und ohne PSP-Vorkenntnisse)• Ist die Zuverlässigkeit, Zeitschätzung und

Produktivität der Gruppe mit PSP besser?

Page 24: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

24

Lutz PrecheltBarbara Unger

Page 25: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

25

Beschreibung

• Aufgabe

• Programm entwickeln: “phoneword”

• Telefonnummern zu einer Menge von Wortfolgen zuordnen

• Beliebige Programmiersprache

• Hauptkriterium: Zuverlässigkeit

Page 26: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

26

Beschreibung

• Aufgabe

• Keine einfache Zahl, sondern /, -, 0, ... 9

• Maximale Länge der Telefonnummern: 50

• Wörterbuch: maximal 75.000 Einträge

• Wörterbuch mit 73.113 Einträgen stand als Textdatei zur Verfügung

Page 27: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

27

0 E1 J N Q2 R W X3 D S Y4 F T5 A M6 C I V7 B K U8 L O P9 G H Z

3586-75: Dali um3586-75: Sao 6 um3586-75: da Pik 5

Page 28: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

28

Beschreibung

• Versuchspersonen

• 48 männliche Informatik-Studenten

• 600h Programmiererfahrung

• 20.000 Zeilen Quellcode (außer Uni)

Page 29: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

29

Beschreibung

• Versuchgruppe

• 29 Personen zu Beginn• 5 Personen haben abgebrochen• 15-wöchiger PSP-Kurs als Vorbereitung

• Kontrollgruppe

• 19 Personen zu Beginn• 3 Personen abgebrochen• 6-wöchiger kompakter KOJAK-Kurs

Page 30: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

30

Beschreibung

• Durchführung

• Beide Gruppen wurden genau gleich behandelt

• keine spezielle Aufforderung PSP zu nutzen

• Unterlagen in Papierform

Page 31: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

31

Beschreibung

• Durchführung

• Persönlicher Fragebogen

• Aufgabenbeschreibung

• Befragung nach Aufwandsschätzung

• Lösen der Aufgabe an speziellenUNIX-Rechnern mit präparierter Arbeitsumgebeung

Page 32: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

32

Beschreibung

• Durchführung

• Versuchspersonen wurden im Hintergrund “ausspioniert”

• Protokollierung aller kompilierten Versionen mit Zeitstempel sowie Gesamtarbeitszeit

Page 33: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

33

Beschreibung

• Durchführung

• Versuchspersonen konnten Akzeptanztest beantragen

Page 34: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

34

Beschreibung

• Akzeptanztest

• Vergleich einer zufälligen Auswahlvon 500 Nummern mit Referenzimplementierung

• Anderes Wörterbuch

Page 35: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

35

Beschreibung

• Akzeptanztest

• Definition der Zuverlässigkeit:• Anzahl der richtigen Lösungen durch Anzahl aller

Lösungen (richtige und falsche)

• Bestanden: 95%

• 50 DM für erfolgreiche Teilnahmejeweils 10 DM weniger für jeden nicht erfolgreichen Akzeptanztest

Page 36: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

36

Beschreibung

• Referenzimplementierung

• Entwickelt von Prechelt und Unger

• Stufenweise Verfeinerung mit halbformaler Verifikation

• Niemals Fehler gefunden

Page 37: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

Fragen?

Page 38: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

38

Gültigkeit

• Innere Gültigkeit

• Einteilung in die Gruppen nicht zufällig

• Teilnehmer haben sich indirekt selbst eingeteilt

• Wahl der Programmiersprache

• Weder Objektorientierung noch Speicherverwaltung waren für die Aufgaben besonders wichtig

Page 39: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

39

Gültigkeit

• Äußere Gültigkeit

• Unterschiedliche Arbeitsbedingungen

• Zeitspanne zwischen PSP-Kurs und Experiment sehr gering

• Zu “verschulte” Aufgabenstellungen

• Teilnehmer mit wenig praktischer Erfahrung

Page 40: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

40

Auswertung

• Hypothese

• Teilnehmer, die den PSP-Kurs besucht haben, ...

1. erstellen zuverlässigere Programme.

2. schätzen die benötigte Arbeitszeit realistischer.

3. arbeiten schneller (Randbetrachtung).

Page 41: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

41

Auswertung

• Zuverlässigkeit:

• Messung härter als Akzepttanztest

• Generierung von Mengen von Telefonnummern mit /, -, 0, 1, ... 9

• Jede Menge hatte 100, 1.000, 10.000 oder 100.000 Telefonnummern

• kritische Längen von Telefonnummern (1 und 50) gleich wahrscheinlich

Page 42: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

42

Zuverlässigkeit

Page 43: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

43

Auswertung

• Zuverlässigkeit:

• “überraschende” Telefonnummern:

• nur / und -, aber keine Ziffern

Page 44: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

44

“überraschende” TelefonnummernZuverlässigkeit

Page 45: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

45

Auswertung

• Zuverlässigkeit:

• Schlussfolgerung:

• Im Allgemeinen nicht zuverlässiger, aber bei den Spezialfällen schon.

• Hypothese wird unterstützt, aber nicht bewiesen.

Page 46: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

46

Auswertung

• Zeitschätzung:

• Abweichung von tatsächlicher Arbeitzeit durch geschätzte Arbeitszeit

• Median nahezu identisch

• Teilnehmer ohne PSP haben stärkere Abweichler

Page 47: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

47

Auswertung

• Zeitschätzung:

• PSP-Gruppe hat die Größe des Programms besser geschätzt, aber dadurch keine bessere Zeitschätzung erhalten

Page 48: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

48

Zeitschätzung

Page 49: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

49

Größenschätzung

Page 50: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

50

Auswertung

• Zeitschätzung:

• Schlussfolgerung:

• Hypothese wird nicht unterstützt.

Page 51: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

51

Auswertung

• Produktivität (Randbetrachtung):

• Anzahl der gelösten Aufgaben pro Zeiteinheit:

• Produktivität der PSP-Gruppe ist etwas geringer

• PSP-Gruppe schreibt längere Programme (mehr Fehlerbehandlung)

Page 52: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

52

ProduktivitätAufgaben pro Zeiteinheit

Page 53: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

53

Auswertung

• Produktivität (Randbetrachtung):

• LOC pro Zeiteinheit:

• deutlich geringere Unterschiede

Page 54: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

54

ProduktivitätLOC pro Zeiteinheit

Page 55: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

55

Auswertung

• Produktivität (Randbetrachtung):

• Gesamtarbeitszeit:

• PSP-Gruppe hat höheren Median

• PSP-Gruppe hat deutlichen niedrigeren Durchschnitt

Page 56: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

56

ProduktivitätGesamtarbeitszeit

Page 57: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

57

Auswertung

• Produktivität (Randbetrachtung):

• Schlussfolgerung:

• Hypothese wird nicht unterstützt.

Page 58: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

58

Auswertung

• Varianz:

• Zusätzliches Ergebnis

• Alle Auswertungen liegen bei der PSP-Gruppe näher beieinander

• Geringere Varianz kann bei Teamwork von Vorteil sein

Page 59: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

59

Auswertung

• Nutzung von PSP:

• Nur bei 6 Teilnehmern der PSP-Gruppe konnten Beweise gefunden werden, dass sie PSP genutzt haben

• Unterschiede: Grad von PSP-Nutzung, nicht Nützlichkeit von PSP

Page 60: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

60

Auswertung

• Nutzung von PSP:

• Quote der “Abbrecher” beiPSP-Nutzern hoch

• Schwächere Teilnehmer benutzen wahrscheinlich PSP, weil sie der Meinung sind, dass PSP ihnen hilft.

Page 61: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

61

Auswertung

• Weitere Ergebnisse:

• PSP-Gruppe benötigte weniger Zeit um Fehler zu beseitigen.

• PSP-Gruppe machte weniger triviale Fehler (Compilerfehler).

• PSP-Gruppe hat mehr kommentiert.

Page 62: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

62

Auswertung

• Schlussfolgerung

• Enttäuschend

• Gründe:

• Verbesserung durch PSP überschätzt(Hawthorne)

• PSP wurde nicht genutzt

Page 63: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

63

Auswertung

• Schlussfolgerung

• Gründe, wieso PSP so wenig genutzt worden ist:

• unterschiedlicher Charakter

• Projekt zu klein

• keine Aufforderung PSP zu nutzen

Page 64: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

64

Auswertung

• Schlussfolgerung

• PSP ist trotzdem erstrebenswert.

• PSP-Kurse allein reichen nicht aus.

• Experiment unterstützt diese Hypothese.

Page 65: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

65

Auswertung

• Schlussfolgerung

• Man muss besser verstehen, wie man die Leute dazu kriegen kann, auch wirklich PSP zu nutzen.

Page 66: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

Fragen?

Page 67: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

67

BewertungBewertung des Experiements

Page 68: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

68

Innere Gültigkeit

• Diskussionswürdig:

• “Einteilung” der Teilnehmerdurch Kurswahl

• unterschiedliche Programmiersprachen

• einerseits: PSP unabhängig von Sprachen

• andererseits: Vergleichbarkeit

Page 69: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

69

Äußere Gültigkeit

• PSP-Gruppe hatte zu wenig Erfahrungmit PSP:

• positive Ergebnisse sprechen um so mehr für PSP-Kurse

• negative Ergebnisse lassen keine sinnvolle Interpretation zu

Page 70: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

70

Äußere Gültigkeit

• Aufforderung PSP zu nutzen oder nicht?

• einerseits: wesentlicher Bestandteil

• andererseits: Ungleichbehandlung

Page 71: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

71

Glaubwürdigkeit

• Zuverlässigkeit:

• künstliche und sehr spezielle Messung für die Zuverlässigkeit

• PSP-Kurs schärfte Blick für Ausnahmen

• bessere Ergebnisse nichtaufgrund von PSP

• Kritik am PSP-Kurs lassen Autoren nicht gelten

Page 72: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

72

Vorschlag

• Teilung der Hypothesen:

• Führen PSP-Kurse dazu, dass PSP genutzt wird?

• Entwickeln PSP-Programmierer zuverlässigere Software und schätzen die Zeit besser?

Page 73: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

73

Vorschlag

• Nutzung von PSP:

• Umfrage: “Nutzt du PSP?”

• ca. 1 Jahr nach PSP-Kurs

Page 74: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

74

Vorschlag

• Nützlichkeit von PSP:

• Experiment

• Problem: Versuchs- und Kontrollgruppezu bilden

Page 75: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

75

thanXX ;-)

Page 76: PSP - inf.fu-berlin.de file1 PSP Experiment über den Nutzen von Kursen über den “persönlichen Softwareprozess”

Diskussion