보도자료의 숫자와 별표
미국 인구조사국은 2023년 7월 18일 6월 소매·외식 판매 잠정치를 공개했다. 판매액은 6,895억 달러였고 전월 대비 점추정치는 +0.2%였다. 계절 변화와 공휴일, 영업일 차이를 조정했지만 물가를 제거하지는 않았다. 따라서 이 수치는 일정한 조건에서 본 달러 판매액 추정값이며 실제 판매량의 변화나 실질 소비의 증가율과 일치할 필요는 없다.[1]
자료는 +0.2% 옆에 별표를 달았다. 90% 신뢰구간이 0을 포함하기 때문이다. 발표된 오차 한계 0.5%포인트를 가운데 값에 더하고 빼면 약 -0.3~+0.7%다. 인구조사국은 이 자료만으로 실제 변화가 0과 다르다고 결론 내릴 통계적 근거가 충분하지 않다고 밝혔다. 증가라는 방향은 가장 가운데 놓인 추정값에서 보이지만 표본 자료가 그 방향을 뚜렷하게 뒷받침한 것은 아니다.[1]
점 하나와 구간 하나
점추정치는 표본을 토대로 얻은 대표값이다. 구간은 같은 방식으로 표본을 뽑았을 때 생길 수 있는 흔들림을 고려하도록 함께 제시한다. 예를 들어 한 가상의 조사에서 추정치가 +0.2%, 오차 한계가 0.1%포인트라면 구간은 +0.1~+0.3%다. 다른 조사에서 점추정치는 그대로인데 오차 한계가 0.5%포인트라면 구간은 -0.3~+0.7%다. 동일한 대표값을 얻어도 구간이 0을 지나는지에 따라 발표에서 근거를 설명하는 표현이 달라진다.
90%라는 숫자는 조사 방식에 붙은 값이다. 같은 조건에서 표본을 여러 번 뽑아 같은 방식으로 구간을 만들면 그 구간들의 약 90%가 참값을 포함한다는 취지다. 하나의 관측 구간을 두고 경제가 오르거나 내릴 확률을 그대로 읽는 방법은 아니다. 또한 구간에 0이 들어간다는 설명이 실제 변화가 정확히 0이었다는 결론을 뜻하지는 않는다. 변화의 방향을 분명히 가르기에는 표본 증거가 부족했다는 판단이다.[1][2]
조사 범위와 오차의 종류
인구조사국은 전체 업체를 매달 모두 조사하는 대신 더 큰 월간 표본의 일부를 이용해 속보를 계산한다고 설명했다. 두 자료의 설명은 층화 무작위 추출로 약 4,800개 소매·외식 업체를 선정하고 가중치를 적용해 훨씬 큰 모집단을 나타내는 방식을 소개한다. 표본에서 본 거래액이 전체와 완전히 같지 않으므로 표본이 달라질 때 어느 정도 흔들릴 수 있는지를 함께 제공한다.[1][2]
보고서는 표본 오차와 비표본 오차를 나눴다. 전자는 조사 대상을 전부 관측하지 않아 생기는 차이다. 후자는 예컨대 응답이 빠지거나 값이 잘못 기록되는 등 표본 추출 외의 과정에서도 생길 수 있다. 따라서 표본 오차를 바탕으로 제시한 신뢰구간을 조사에 영향을 주는 모든 오류를 덮는 범위로 여길 수는 없다. 자료를 읽을 때 구간이 말해 주는 오차의 종류를 함께 확인해야 한다.[1]
5월 수정은 다른 문제다
6월 15일에 처음 공개한 5월 판매액은 6,866억 달러로 전월 대비 +0.3%, 오차 한계는 ±0.5%포인트였다. 당시의 구간을 공개 값으로 계산하면 약 -0.2~+0.8%로 0을 포함한다. 반면 7월 18일 자료에서는 5월 판매액이 6,882억 달러, 전월 대비 +0.5%, 오차 한계는 ±0.2%포인트로 바뀌었다. 이번에는 약 +0.3~+0.7%로 계산된다.[1][2]
수정은 같은 달에 대해 나중 발표가 앞서 발표한 추정값을 갱신한 일이다. 신뢰구간은 각 발표 시점에 붙은 표본 불확실성을 보여 준다. 처음 공개한 자료와 나중에 갱신한 자료에서 구간이 달라지는 일은 두 개념을 구분해 설명해야 한다. 6월 중순 당시 5월 판매가 얼마나 바뀌었다고 발표됐는지 묻는다면 최초 수치를 사용한다. 7월에 5월과 6월의 변화율을 같은 발표 안에서 비교한다면 수정 수치를 사용한다.[1][2]
같은 보고서의 전년 비교
6월 판매액의 전년 동월 대비 추정치는 +1.5%, 오차 한계는 ±0.7%포인트였다. 공개 숫자로 계산하면 약 +0.8~+2.2%다. 바로 전월과 비교한 구간은 0을 포함하지만 1년 전과 비교한 구간은 그렇지 않다. 두 결과는 비교하는 시작 시점이 다르다. 1년 전보다 높았다는 증거가 있다고 해서 바로 앞달보다 높았다는 근거도 자동으로 생기는 것은 아니다.[1]
보고서는 소매업만 따로 본 전년 동월 대비 추정치도 +0.5%에 ±0.5%포인트라고 표시하고 별표를 붙였다. 소매업만의 범위와 외식을 포함한 합계의 범위가 다르다. 해당 범위에 맞는 오차 한계를 골라야 한다. 별표를 없애거나 전체 판매의 오차 한계를 다른 범위에 붙이면 겉보기 숫자가 비슷하더라도 원문의 해석을 바꾼다.[1]
금액을 검산할 때의 한계
같은 7월 보고서의 둥근 표시값으로 계산해 보면 6,895억 달러에서 6,882억 달러를 뺀 13억 달러는 직전 달 금액의 약 0.19%다. 소수점 첫째 자리까지 쓰면 약 0.2%가 된다. 이 계산은 발표의 자릿수와 방향을 검산하는 방법이다. 표본 오차를 계산하는 방법과는 다르고, 반올림 전의 정확한 원래 수치를 되찾아 주지도 않는다. 이미 반올림한 판매액으로 산출한 변화율과 공식 추정치를 소수점 여러 자리까지 맞추려 할 필요가 없다.[1]
또한 판매액은 거래량과 가격이 함께 반영된 값이다. 같은 돈을 더 내더라도 구입한 수량이 늘었는지는 알 수 없다. 이 자료의 계절 조정은 정기적인 달력 효과를 다루는 과정이며 물가를 제거하는 과정은 아니다. 신뢰구간이 양수로만 나오는 경우에도 판매량에 대한 증거가 생긴 것은 아니다. 통계적 불확실성과 애초에 무엇을 측정한 값인지 둘 다 확인해야 한다.[1][2]
다음에 같은 표를 볼 때
수치를 기록할 때는 먼저 범위가 소매와 외식의 합계인지 확인하고 전월 또는 전년이라는 비교 기준을 붙인다. 이어 점추정치와 오차 한계를 함께 적고 0을 포함하는지 살핀다. 마지막으로 같은 달의 수치가 수정됐다면 어떤 발표에서 읽었는지 남긴다. 이 순서대로 두 달을 기록하면 5월 수정과 6월 표본 불확실성을 각각 설명할 수 있다.[1][2]
업종별 수치를 보려면 합계의 구간을 복사하기보다 각 줄의 오차 한계를 다시 읽어야 한다. 같은 보고서에서 여러 업종의 추정값이 양수일 수 있지만 각 표본의 변동 폭은 다를 수 있다. 예를 들어 1.0%에 오차 한계 1.2%포인트가 붙은 가상의 항목은 구간이 0을 포함한다. 0.4%에 0.1%포인트가 붙은 다른 가상의 항목은 그렇지 않다. 큰 대표값이 항상 방향에 대한 더 분명한 근거를 주는 것은 아니다.
이 원칙을 7월 18일 발표에 적용하면 6월 판매액은 추정 기준에서 전월보다 0.2% 늘었지만, 발표된 구간은 0을 포함한다고 적는 것이 정확하다. 5월의 수정치와 전년 대비 추정치를 별도로 남기면 같은 보고서에서 확인되는 다른 변화도 놓치지 않는다. 표의 제목에 담긴 범위와 각 숫자에 붙은 기간, 별표까지 함께 읽어야 발표가 알려 주는 내용이 보존된다.[1][2]
예컨대 같은 해 두 달의 속보를 모아 표를 만든다면 ‘전월 대비’라는 열 외에 ‘90% 신뢰구간’과 ‘발표일’ 열을 따로 둘 수 있다. 전월 대비 변화가 비슷해도 구간 폭이 다르면 방향을 단정하기 어렵고, 발표일이 다르면 같은 달 추정값도 달라질 수 있기 때문이다. 이런 표는 여러 숫자를 한 줄로 요약할 때 빠지기 쉬운 정보를 보존한다.[1][2]
이 보고서의 분기 비교도 같은 방법으로 확인할 수 있다. 4~6월 합계는 전년 같은 기간보다 +1.6%이고 오차 한계는 ±0.4%포인트였다. 공개값을 사용한 구간은 약 +1.2~+2.0%다. 분기 합계와 한 달의 전월 변화를 각각 기록하면 기간을 늘리거나 줄일 때 어떤 질문이 바뀌는지 분명해진다.[1]
