/ en / Traditional / help

Beats Biblionetz - Texte

Navigating the Jagged Technological Frontier

Field Experimental Evidence of the Effects of AI on KnowledgeWorker Productivity and Quality
Fabrizio Dell'Acqua, Saran Rajendran, Edward McFowland III, Lisa Krayer, Ethan Mollick, François Candelon, Hila Lifshitz-Assaf, Karim R. Lakhani, Katherine C. Kellogg
Erstpublikation in: Harvard Business School Technology & Operations Mgt. Unit Working Paper No. 24-013
Publikationsdatum:
Erste Seite des Textes (PDF-Thumbnail)

iconZusammenfassungen

The public release of Large Language Models (LLMs) has sparked tremendous interest in how humans will use Artificial Intelligence (AI) to accomplish a variety of tasks. In our study conducted with Boston Consulting Group, a global management consulting firm, we examine the performance implications of AI on realistic, complex, and knowledge-intensive tasks. The pre-registered experiment involved 758 consultants comprising about 7% of the individual contributor-level consultants at the company. After establishing a performance baseline on a similar task, subjects were randomly assigned to one of three conditions: no AI access, GPT-4 AI access, or GPT-4 AI access with a prompt engineering overview. We suggest that the capabilities of AI create a “jagged technological frontier” where some tasks are easily done by AI, while others, though seemingly similar in difficulty level, are outside the current capability of AI. For each one of a set of 18 realistic consulting tasks within the frontier of AI capabilities, consultants using AI were significantly more productive (they completed 12.2% more tasks on average, and completed task 25.1% more quickly), and produced significantly higher quality results (more than 40% higher quality compared to a control group). Consultants across the skills distribution benefited significantly from having AI augmentation, with those below the average performance threshold increasing by 43% and those above increasing by 17% compared to their own scores. For a task selected to be outside the frontier, however, consultants using AI were 19 percentage points less likely to produce correct solutions compared to those without AI. Further, our analysis shows the emergence of two distinctive patterns of successful AI use by humans along a spectrum of human-AI integration. One set of consultants acted as “Centaurs,” like the mythical halfhorse/half-human creature, dividing and delegating their solution-creation activities to the AI or to themselves. Another set of consultants acted more like “Cyborgs,” completely integrating their task flow with the AI and continually interacting with the technology.
Von Fabrizio Dell'Acqua, Saran Rajendran, Edward McFowland III, Lisa Krayer, Ethan Mollick, François Candelon, Hila Lifshitz-Assaf, Karim R. Lakhani, Katherine C. Kellogg im Text Navigating the Jagged Technological Frontier (2023)

iconDieser Text erwähnt ...


Personen
KB IB clear
Ajay Agrawal , Erik Brynjolfsson , Joshua Gans , Avi Goldfarb , Danielle Li , Shakked Noy , OpenAI , Scott E. Page , Lindsey R. Raymond , Whitney Zhang

Aussagen
KB IB clear
Generative Machine-Learning-Systeme bestehen immer mehr Abschlussprüfungen
Generative Machine-Learning-Systeme erhöhen die Produktivität
Machine Learning senkt den Wert von Erfahrungswissen

Begriffe
KB IB clear
Generative Machine-Learning-Systeme (GMLS)computer-generated text , Generative Pretrained Transformer 4 (GPT-4) , Kreativitätcreativity , Künstliche Intelligenz (KI / AI)artificial intelligence , Managementmanagement , Produktivitätproductivity , prompt engineering
icon
Bücher
Jahr  Umschlag Titel Abrufe IBOBKBLB
2017 local  The Diversity Bonus (Scott E. Page) 1, 4, 3, 3, 10, 7, 1, 4, 2, 2, 4, 4 2 11 4 338
2022 local  Prediction Machines (Ajay Agrawal, Joshua Gans, Avi Goldfarb) 9 33 0 0
icon
Texte
Jahr  Umschlag Titel Abrufe IBOBKBLB
2023 local web  Experimental Evidence on the Productivity Effects of Generative Artificial Intelligence (Shakked Noy, Whitney Zhang) 9 12 0 0
2023 local web  GPT-4 Technical Report (OpenAI) 24 17 0 0
2023 local web  Generative AI at Work (Erik Brynjolfsson, Danielle Li, Lindsey R. Raymond) 7 13 0 0

iconDieser Text erwähnt vermutlich nicht ... Eine statistisch erstelle Liste von nicht erwähnten (oder zumindest nicht erfassten) Begriffen, die aufgrund der erwähnten Begriffe eine hohe Wahrscheinlichkeit aufweisen, erwähnt zu werden.

iconTagcloud

iconZitationsgraph

Diese Grafik ist nur im SVG-Format verfügbar. Dieses Format wird vom verwendeteten Browser offenbar nicht unterstützt.

Diese SVG-Grafik fensterfüllend anzeigen

iconZitationsgraph (Beta-Test mit vis.js)

iconErwähnungen  Dies ist eine nach Erscheinungsjahr geordnete Liste aller im Biblionetz vorhandenen Werke, die das ausgewählte Thema behandeln.

iconAnderswo finden

icon

iconVolltext dieses Dokuments

Auf dem WWW Navigating the Jagged Technological Frontier: Artikel als Volltext (lokal: PDF, 3134 kByte; WWW: Link OK )

iconAnderswo suchen  Auch im Biblionetz finden Sie nicht alles. Aus diesem Grund bietet das Biblionetz bereits ausgefüllte Suchformulare für verschiedene Suchdienste an. Biblionetztreffer werden dabei ausgeschlossen.

iconBeat und dieser Text

Beat hat Dieser Text während seiner Zeit am Institut für Medien und Schule (IMS) ins Biblionetz aufgenommen. Beat besitzt kein physisches, aber ein digitales Exemplar. Eine digitale Version ist auf dem Internet verfügbar (s.o.). Es gibt bisher nur wenige Objekte im Biblionetz, die dieses Werk zitieren.

iconBiblionetz-History Dies ist eine graphische Darstellung, wann wie viele Verweise von und zu diesem Objekt ins Biblionetz eingetragen wurden und wie oft die Seite abgerufen wurde.