JustLayMe

Grey Mirror von JustLayMe

Wendepunkt-Erkennung: Wie oft sie eine Veränderung findet, die nicht da ist

Völlig kostenlose Analyse. Keine Kreditkarte erforderlich. Vollständige Berichte sind optional.

Meine kostenlose Analyse starten

Grey Mirror erkennt den Punkt, an dem sich eine Beziehung messbar verändert hat. Das Schwierige ist nicht, Veränderungen zu finden; es ist, sie nicht zu finden, wenn nichts passiert ist. Diese Seite veröffentlicht die Falsch-Positiv-Rate, die Erkennungsrate, den Lokalisierungsfehler und die dahinterstehende Methode, damit die Zahlen überprüft werden können statt ihnen vertraut werden muss.

Von Layne Weant

Aktualisiert

Falsch-Positiv-Rate über 40 stabile Chatverläufe ohne echte Veränderung.
0%
Erkennungsrate über 40 Chatverläufe mit einer bekannten Veränderung.
100%
Medianfehler bei der Datierung der Veränderung, sobald erkannt.
0 Tage

Wie genau ist die Grey Mirror Wendepunkt-Erkennung?

Über 40 synthetische Chatverläufe ohne echte Veränderung meldete Grey Mirror in 0% von ihnen einen Wendepunkt. Über 40 Chatverläufe mit einer bekannten eingepflanzten Veränderung erkannte es die Veränderung in 100%, identifizierte die korrekte Richtung in 100% und datierte sie mit einem Medianfehler von 0 Tagen. Ein Chatverlauf über 730 Tage und 10.283 Nachrichten wird in etwa 4 Sekunden verarbeitet. Dies sind Ergebnisse auf synthetischen Daten, bei denen die Grundwahrheit bekannt ist, was die einzige Umgebung ist, in der eine Falsch-Positiv-Rate überhaupt gemessen werden kann.

Warum diese Zahl und nicht eine andere

Die Falsch-Positiv-Rate ist die Zahl, die zählt, und fast niemand veröffentlicht sie.

Jeder Changepoint-Algorithmus kann so abgestimmt werden, dass er in jeder Konversation etwas findet. Diese Version macht eine gute Demo und ist wertlos: Wenn das Tool immer einen Wendepunkt findet, sagt das Finden eines solchen nichts aus. Also ist das Erste, was sich zu messen lohnt, wie oft es eine Veränderung in einer Beziehung behauptet, die sich nie verändert hat.

Ein Detektor, der immer auslöst, trägt keine Information

Wenn jeder Chatverlauf einen Wendepunkt erzeugt, ist die Ausgabe kein Ergebnis, sondern eine Formsache. Die Behauptung ist nur dann etwas wert, wenn das Tool fähig ist zu sagen, dass nichts passiert ist.

Gewöhnliche Höhen und Tiefen sind keine Wendepunkte

Nachrichtenaktivität ist unregelmäßig: Auf ruhige Wochen folgen ruhige Wochen. Ein naiver Detektor zerlegt diese gewöhnliche Schwankung in Phasen und meldet einen Wendepunkt, der nur in der Arithmetik existiert.

Also muss jeder Kandidat einen Signifikanztest bestehen

Grey Mirror meldet einen Wendepunkt nur, wenn sich die Veränderung vom eigenen normalen Rhythmus des Chatverlaufs abhebt. Andernfalls sagt es, dass nichts passiert ist.

Methode

Wie die Messung funktioniert, in ausreichendem Detail, um darüber zu streiten.

Die Auswertung führt 40 Versuche pro Arm durch. Ein Arm enthält Chatverläufe ohne Veränderung; der andere enthält Chatverläufe mit einer eingepflanzten Veränderung von bekanntem Datum und bekannter Richtung. Die Grundwahrheit ist konstruktionsbedingt bekannt, weshalb hier genau synthetische Daten statt echter Konversationen verwendet werden.

Viele Verhaltensweisen, zusammen gelesen

Wärme, Neugier, Gegenseitigkeit, Reaktionsfähigkeit, Reparatur, Konflikt, Investition und Initiative werden über die Chronologie hinweg zusammen gelesen, damit eine einzelne laute Woche das Ergebnis nicht dominieren kann.

Eine Veränderung muss sich über Verhaltensweisen hinweg zeigen

Ein Wendepunkt muss gleichzeitig über mehrere Verhaltensweisen auftreten, nicht in einem einzigen verrauschten Kanal.

Sehr kurze Verläufe werden abgelehnt

Ohne ein aussagekräftiges Davor gibt es keinen Wendepunkt zu finden. Statt aus einzelnen Nachrichten Phasen zu konstruieren, lehnt Grey Mirror die Antwort ab.

Deterministisch, also sind Ergebnisse reproduzierbar

Derselbe Chatverlauf erzeugt jedes Mal dieselbe Antwort, sodass ein Ergebnis überprüft werden kann statt ihm vertrauen zu müssen.

Grenzen

Was diese Zahlen nicht behaupten.

Veröffentlichte Genauigkeitszahlen werden leicht überinterpretiert, daher lohnt es sich, die Grenzen klar zu benennen.

Synthetische Daten sind keine menschlichen Daten

Eine Falsch-Positiv-Rate von 0% bei generierten Chatverläufen zeigt, dass das Signifikanz-Gate seine Aufgabe erfüllt. Es verspricht nicht dieselbe Rate für jede echte Konversation, und kein Benchmark auf synthetischen Daten kann das.

Eine Veränderung zu erkennen heißt nicht, sie zu erklären

Der Analyzer datiert eine Verschiebung und benennt, welche Verhaltensweisen sich bewegt haben. Er kann nicht sagen, warum sie sich bewegt haben. Ein Jobwechsel, ein Trauerfall und ein Verlust des Interesses sind allein anhand des Nachrichtenzeitpunkts nicht unterscheidbar.

Zur Erstellung dieser Zahlen wurden keine Nutzerkonversationen verwendet

Die Auswertung läuft vollständig auf generierten Chatverläufen mit bekannter Grundwahrheit. Nichts auf dieser Seite stammt aus einem hochgeladenen Nachrichtenverlauf.

Häufig gestellte Fragen

Wie genau ist die Erkennung von Beziehungs-Changepoints?

Im veröffentlichten Benchmark: 0% Falsch-Positive über 40 Chatverläufe ohne echte Veränderung, 100% Erkennung und 100% Richtungsgenauigkeit über 40 Chatverläufe mit einer bekannten eingepflanzten Veränderung und ein medianer Datierungsfehler von 0 Tagen. Diese Zahlen stammen aus synthetischen Chatverläufen, bei denen die richtige Antwort im Voraus bekannt ist.

Warum die Falsch-Positiv-Rate messen statt nur die Genauigkeit?

Weil ein Detektor, der bei jeder Konversation auslöst, allein bei der Erkennung hoch punkten würde, während er nutzlos ist. Die Falsch-Positiv-Rate ist das, was ein Tool, das echte Wendepunkte findet, von einem unterscheidet, das sie herstellt, und sie ist die Zahl, die die meisten Tools in diesem Bereich nie veröffentlichen.

Warum synthetische Konversationen statt echter verwenden?

Eine Falsch-Positiv-Rate kann nur gemessen werden, wo die Wahrheit bekannt ist. In einer echten Konversation kann niemand mit Sicherheit sagen, dass sich nichts verändert hat, also gibt es keine Grundwahrheit zum Bewerten. Synthetische Chatverläufe sind die einzige Umgebung, in der die Frage beantwortbar ist, und es sind keine Nutzerdaten beteiligt.

Was ist ein zirkulärer Block-Permutationstest?

Er bildet die Nullverteilung, indem zusammenhängende Blöcke der Chronologie gemischt werden statt einzelne Zeitabschnitte. Das Mischen einzelner Abschnitte würde die natürliche Häufung von Nachrichten zerstören und fast jeden Kandidaten signifikant erscheinen lassen. Das Permutieren von Blöcken erhält diese Struktur, sodass ein Changepoint eine realistische Null schlagen muss statt eine künstliche.

Kann Grey Mirror mir sagen, warum sich die Beziehung verändert hat?

Nein. Es kann die Veränderung datieren und benennen, welche Verhaltensweisen sich darum herum bewegt haben. Warum sich diese Verhaltensweisen bewegt haben, ist nicht in Nachrichtenmetadaten enthalten, und der Bericht rät nicht.

Referenzen und Methodik

Verwandte Grey Mirror-Leitfäden

Hier starten

Mehr von Grey Mirror

Der Folge folgen

Ein Benchmark überprüft eine definierte Detektionsaufgabe

Visuelle Anleitung aktualisiert

  1. Kontrollierte Eingabe

    Lesen Sie, wie synthetische stationäre und sich verändernde Threads für den Test konstruiert werden.

  2. Specificiertes Ergebnis

    Überprüfen Sie die Definition von Detektion, Richtungsgenauigkeit und Falschpositiven in dieser Einrichtung.

  3. Beschränkte Schlussfolgerung

    Ein kontrolliertes Ergebnis unterstützt eine Aussage über diesen Test, nicht eine garantierte Genauigkeit in jeder realen Beziehung.

Konzeptioneller Leseleitfaden. Dieses Diagramm erklärt, was zu prüfen ist; es ist kein Kundenbericht, Diagnosetest oder gemessener Beziehungswert.
Diesen Leitfaden auf die Frage anwenden, mit der du gekommen bist

Behalten Sie den Benchmark-Arm, den Nenner und die Einschränkungen bei jedem prozentualen Wert bei. Die Detektionsleistung ist separat von der Bedeutung eines echten Lebenswandels.