„Ich habe Ihre Eingabe leider nicht verstanden“ — Qualitätskriterien für Online-Tests von Bots

Zusammenfassung

Ist die Rede von Verfahren zur Bewertung von Bots, fällt üblicherweise im gleichen Atemzug der Name Alan Turing. Der britische Mathematiker A.M.Turing hatte im Jahr 1950 in seinem Aufsatz Computing machinery and intelligence1 die Frage gestellt, ob eine Maschine das Verhalten eines menschlichen Gesprächspartners in einem Dialog derart simulieren könne, dass ein menschlicher Tester darauf hereinfällt und sie für einen Menschen hält. Dies ist das so genannte „Imitationsspiel“, das heute unter der Bezeichnung „Turing-Test“ geläufig ist. Dabei führt ein Tester mit einem für ihn unsichtbaren Partner ein Gespräch (bei Turing z. B. per Fernschreiber) mit dem Ziel herauszufinden, ob sein Gegenüber ein Mensch oder eine Maschine sei. Jeder Maschine, die ein solches „Imitationsspiel“ gewinnen kann, billigt Turing zu, denken zu können.