JustLayMe

Grey Mirror by JustLayMe

메시지 내보내기 품질 인덱스 및 100,000개 메시지 스트레스 테스트

작가: Layne Weant · 게시됨: · 업데이트됨:

완전 무료 분석. 신용 카드 필요 없음. 전체 보고서는 선택 사항입니다.

무료 분석 시작

그레이 미러의 공개 벤치마크는 이제 생산 메시지 파서를 다섯 가지 내보내기 형태를 아우르는 공개된 버전된 합성 ground-truth 매트릭스에 적용하고, 동일한 기계-readable 아티팩트에서 기존의 100,000개 메시지 집계 스트레스 테스트를 유지합니다. 모든 입력, 예상 메시지, 공식, 결과, 및 제한이 게시됩니다.

작성자 Layne Weant

게시됨

업데이트됨

좁은 v1 합성 픽스처 매트릭스에서의 전체 파서 점수.
100 / 100
UTC 텍스트, CSV, JSON, NDJSON 픽스처에서의 20개 예상 메시지.
5개 형태
별도 집계 스트레스 테스트에서의 생성된 메시지.
100,000

그레이 미러 메시지 내보내기 품질 인덱스는 무엇인가?

메시지 내보내기 품질 인덱스 v1은 20개의 예상 메시지를 포함한 다섯 가지 합성 ground-truth 내보내기 형태에 그레이 미러의 생산 파서를 적용합니다. 2026년 7월 28일 실행에서는 20/20을 복구하고 메시지 복구, 텍스트 충실도, 타임스탬프 보존, 발신자 해결, 및 방향 해결에서 100점을 받아 동등한 20% 가중치 하에 전체 100/100을 기록했습니다.

  • 범위: 다섯 개의 작은 플랫폼 중립적인 행복 경로 픽스처—실제 내보내기의 전부, 손상된 아카이브, 로케일, 첨부 파일, 반응, 또는 스크린샷은 아님.
  • 별도 테스트: 동일한 아티팩트는 30개 저장소 픽스처 메시지를 반복하여 만든 100,000개 메시지 합성 집계 실행을 기록합니다.
  • 경계: 어느 결과도 관계 해석 정확도, 임상 타당성, 고객 결과, 또는 생산 용량을 측정하지 않습니다.

메시지 내보내기 품질 인덱스 v1 결과

각 형태에는 동일한 네 개의 합성 ground-truth 메시지가 포함되어 대화 변경 없이 형식 처리를 비교할 수 있습니다. 아래 점수는 생산 파서에 의해 생성된 것이며, 손으로 입력된 것이 아닙니다.

100/100 점수는 파서가 이 좁은 버전된 매트릭스와 일치함을 의미합니다. 모든 메시지 내보내기가 완벽하게 파싱된다는 의미는 아닙니다.

100점 점수는 어떻게 계산되는가

인덱스는 다섯 가지 동등하게 가중된 차원을 사용합니다. 각 내보내기 형태는 모든 차원에 동등하게 기여하며, 전체 점수는 가중 산술 평균입니다.

  • 메시지 복구: 100 × min(예상 개수, 복구된 개수) ÷ max(예상 개수, 복구된 개수).
  • 텍스트 충실도: 예상 시퀀스 위치에서의 정확한 텍스트 일치 ÷ 예상 메시지 × 100.
  • 타임스탬프 보존: 예상 시퀀스 위치에서의 정확한 UTC epoch-밀리초 일치 ÷ 예상 메시지 × 100.
  • 발신자 해결: 예상 시퀀스 위치에서의 정확한 발신자 라벨 일치 ÷ 예상 메시지 × 100.
  • 방향 해결: 예상 시퀀스 위치에서의 정확한 보낸/받은 일치 ÷ 예상 메시지 × 100.
  • 전체: 다섯 개의 차원 점수 각각에 20%를 곱한 값.

합성 픽스처 매트릭스가 다루는 내용

v1 매트릭스는 결정적 UTC 타임스탬프와 명시적 또는 해결 가능한 참여자를 가진 형식만 테스트합니다. 라벨은 파서가 수용하는 데이터 형태를 설명하며, 공식 플랫폼 인증을 주장하는 것은 아닙니다.

대괄호로 묶인 텍스트

각 줄에 ISO 8601 UTC 타임스탬프, 발신자 라벨, 및 메시지 본문.

CSV 변형

두 헤더 어휘는 기계 스타일 별칭과 사람이 읽을 수 있는 컬럼 이름을 연습합니다.

JSON 변형

중첩된 메시지 배열과 개행 구분 기록은 구조화된 JSON 경로를 연습합니다.

별도 100,000 메시지 스트레스 테스트

기존 스트레스 테스트는 아티팩트의 일부로 남아 있습니다. 100,000 레코드에 도달할 때까지 30개의 리포지토리 메트릭 픽스처 메시지를 반복하고, 결정적 타임스탬프와 역할을 할당하며, 메시지-특성 구성 및 지문, 전환, 게놈 집계를 측정합니다.

결과를 재현하고 검사하는 방법

생성기는 버전별 합성 픽스처 매트릭스만 읽고, 현재 파서 및 메트릭 코드를 실행하고, 일치하는 공공 아티팩트를 작성합니다. JSON에는 완전한 픽스처 정의, 예상 메시지, 관찰된 메시지, 공식, SHA-256 기준 다이제스트, 런타임 환경, 측정된 출력값이 포함됩니다.

  1. 저장소 루트에서 'npm run generate:grey-mirror-benchmark-snapshot'를 실행하세요.
  2. fixture 입력, 기준 진실, 관찰된 출력, 공식, 점수 및 제한 사항에 대해 messageExportQualityIndex를 검사하세요.
  3. 100,000 메시지 스트레스 테스트 환경, 타이밍, 메모리 및 출력 필드에 대해 metricPhase를 검사하세요.
  4. 결과를 개정 간에 비교하기 전에 SHA-256 다이제스트와 벤치마크 버전을 비교하세요.

제한 사항 및 다음 신뢰할 수 있는 확장

v1 결과는 회귀 기준이며, 범용 파서 정확도 주장이 아닙니다. 더 강력한 다음 버전은 파서 품질, 분석기 정확도, 신뢰도 보정 및 관계 유용성을 하나의 점수로 축소하지 않으면서 검토된 실패 픽스처를 추가해야 합니다.

  • 포함되지 않음: ZIP 또는 GZIP 추출, 손상되거나 잘린 파일, 모호한 현지 날짜, 첨부 파일, 반응, 삭제된 메시지 의미, 스크린샷, OCR 및 적대적 입력.
  • 측정되지 않음: 분석기 라벨, 증거 품질, 보고서 유용성, 임상 주장, 관계 결과 또는 인구 일반화.
  • 보장되지 않음: 최대 업로드 크기, 생산 처리량, 보고서 지연 또는 모든 고객 내보내기에서의 성능.
  • 다음 단계: 합성 실패 픽스처 추가, 로케일별 타임스탬프, 아카이브 추출, 미디어 자리표시자 및 명시적 예상 오류 동작.
메시지 내보내기 품질 인덱스 v1 결과
합성 내보내기 형태복구됨텍스트타임스탬프발신자방향전체
대괄호로 묶인 UTC 텍스트4 / 4100100100100100
구조화된 CSV 별칭4 / 4100100100100100
사람이 읽을 수 있는 CSV 헤더4 / 4100100100100100
중첩된 JSON 메시지 배열4 / 4100100100100100
개행 구분 JSON4 / 4100100100100100
매트릭스 총계20 / 20100100100100100
별도 100,000 메시지 스트레스 테스트
게시된 필드값지원하는 내용
대상 메시지100,000측정된 집계 단계를 통과한 입력 크기.
소스 메시지30번 반복된 픽스처독립적으로 작성된 100,000개의 메시지가 아닌 결정적 워크로드입니다.
단계 타이밍JSON 아티팩트의 밀리초 단위열거된 환경에서의 기록된 실행이며, latency 보장이 아닙니다.
메모리RSS 및 힙 스냅샷관찰된 프로세스 메모리이며, 생산 상한이 아닙니다.
출력 형태전이, 단계, 선택된 메트릭이 반복된 픽스처에 대한 결정적 실행이며, 실제 세계의 빈도가 아닙니다.

자주 묻는 질문

Message Export Quality Index란 무엇인가요?

Grey Mirror의 실제 메시지-파서 출력을 recovery, text, timestamps, senders, directions에 걸친 공개된 버전별 합성 ground-truth 매트릭스와 비교하는 재현 가능한 파서 회귀 벤치마크입니다.

Message Export Quality Index v1이 만든 점수는 얼마였나요?

2026년 7월 28일 아티팩트는 20개 중 20개 메시지를 복구하고 5개 동일 가중치 차원에서 모두 100점씩을 달성하여, 5개의 좁은 합성 happy-path 익스포트 형태에서 전체 100/100을 기록했습니다.

100/100이라는 점수가 모든 메시지 익스포트가 완벽하게 파싱된다는 의미인가요?

아니요. 이 점수는 작은 버전 고정 매트릭스에만 적용됩니다. 손상된 아카이브, 애매한 로케일, 모든 플랫폼 변형, 미디어 의미, 스크린샷, OCR, 적대적 입력은 다루지 않습니다.

이 벤치마크는 고객 대화를 사용하나요?

아니요. 공개된 파서 매트릭스와 100,000개 메시지 스트레스 테스트는 저장소의 버전된 합성 고정물을 사용하며, 개인 고객 보고서를 읽거나 집계하지 않습니다.

100,000개 메시지 결과는 무엇을 측정하나요?

이 결과는 환경별 타이밍, 메모리, 출력 형태를 기록하며, 결정적 반복 고정물에서 특성 구축 및 선택된 집계 단계에 사용됩니다. 정확도 또는 생산 용량 보장은 아닙니다.

어떻게 벤치마크를 검사하거나 재현할 수 있나요?

입력, ground truth, 관찰된 출력, 공식, 다이제스트, 환경, 한계를 포함한 공개된 JSON 아티팩트를 여세요. 저장소에서 npm run generate:grey-mirror-benchmark-snapshot을 실행하세요.

참고 및 방법론

관련 회색 미러 가이드

여기서 시작하기

Grey Mirror의 더 많은 콘텐츠

관련 가이드

구분을 유지하십시오

제품 벤치마크와 관계 연구는 다른 것을 측정합니다.

시각적 가이드 업데이트됨

  1. 방법 성능

    제어된 벤치마크 입력은 방법이 감지하도록 설계된 변경 사항을 감지하는지 평가합니다.

  2. 관계 코퍼스

    설명 연구는 명시적인 샘플 제한이 있는 제공된 기록의 측정을 요약합니다.

  3. 개인적인 해석

    어떤 결과도 관계에 대한 보편적인 규칙을 세우거나 사람의 의도를 증명하지 않습니다.

개념적 읽기 가이드. 이 다이어그램은 무엇을 검사해야 하는지 설명합니다. 고객 보고서, 진단 테스트 또는 측정된 관계 점수가 아닙니다.
이 가이드를 가지고 온 질문에 사용하세요.

벤치마크 설정과 분모를 읽으십시오. 합성 테스트 결과는 실제 관계 결과에 대한 결과가 아닙니다.