모든 맥에는 가족 관계를 추측하는 비공개 프로그램이 숨어 있습니다
1. 이게 뭔가요?
이 기사는 애플이 2022년 macOS 13부터 모든 맥에 기본으로 넣은 두 개의 백그라운드 프로그램을 다룹니다. 이 프로그램들은 사용자와 주변 사람들에 관한 지식 그래프를 만듭니다. 지식 그래프란 사람, 장소, 사건, 관계를 점과 선으로 이어 놓은 데이터 구조입니다. 예를 들어 '나'라는 점과 '어머니'라는 점을 '가족'이라는 선으로 잇는 식입니다. 이 그래프는 기기 안에서만 만들어지고, 연락처, 캘린더, 사진, 메시지, 메일, 위치 기록, 스크린 타임 같은 여러 데이터를 서로 대조해 채워집니다. 글쓴이는 이 그래프가 어떤 항목을 담고 어떤 방식으로 추론하는지 분석했고, 사용자가 자기 맥에 저장된 그래프를 직접 들여다볼 수 있는 iKnow라는 무료 도구도 공개했습니다. 분석은 macOS 26.6.2에서 수집한 내용을 바탕으로 합니다.
2. 왜 화제인가요?
애플은 이 지식 그래프를 만드는 프로그램에 대해 공식 설명을 거의 내놓지 않았습니다. 가장 가까운 문서는 knowledgeconstructiond라는 프로그램의 설명서 한 쪽뿐이고, 어떤 버전이 이 기능을 돌리는지, 정확히 무엇을 모으고 추론하는지는 밝히지 않았습니다. 애플 연구진이 2023년에 그래프 구축 기법을 다룬 논문을 낸 적은 있지만, macOS 안에서 어떻게 통합되어 돌아가는지는 다루지 않았습니다. 이 글은 그 빈틈을 파고들어 실제 데이터베이스 구조와 추론 방식을 들여다봤습니다. 특히 가족 관계를 추론하는 분류 모델이 어떤 입력값 144개를 쓰는지, 그리고 연락처에서 지운 사람의 기록이 별도의 만료 테이블에 남아 있을 수 있다는 점을 구체적으로 보여 줍니다. 다만 이 글이 얼마나 큰 화제를 불러일으켰는지에 대한 근거는 원문에 없으므로, 대중의 반응을 확인된 사실처럼 말할 수는 없습니다.
3. 핵심 내용
두 프로그램은 작업 결과를 ~/Library/IntelligencePlatform 경로에 저장합니다. 이곳에는 51개의 SQLite 데이터베이스가 암호화되지 않은 평문 상태로 놓여 있고, '전체 디스크 접근 권한'이라는 보안 장치로 보호됩니다. 핵심은 graph.db 파일로, 181개의 개체 종류와 278개의 관계 용어를 쓰는 '트리플 스토어'입니다. 트리플 스토어란 모든 정보를 '주어-서술어-목적어' 세 부분으로 저장하는 구조로, 주어는 사람이나 앱 같은 개체, 목적어는 이름이나 날짜 같은 값 또는 또 다른 개체입니다. 서술어는 두 개체 사이의 관계 종류를 설명합니다. 모든 행에는 신뢰도, 출처, 시간 정보가 함께 기록됩니다.
그래프에는 연락처, 사진의 얼굴 인식 정보, 캘린더의 제목과 참석자, 가족 공유 정보(구성원 나이 포함), 건강 앱의 응급 연락처, 메일과 메시지에서 시리 제안이 찾아낸 일정과 연락처, 앱 실행 의도로 수집된 사람, 설치된 앱 목록이 들어갑니다. 별도 표에는 사진 속 누가 누구와 함께 나타나는지, 누구와 언제 어떤 앱으로 연락했는지(내용은 제외), 위치와 이동 경로, 화면 잠김·와이파이·블루투스·충전 상태 같은 기기 신호가 담깁니다. 'ContextualUnderstanding.PhysicalSocial'이라는 목록도 있는데, 사람들을 이름·전화번호·이메일로 나열하고 시작·종료 시간을 붙입니다. 물리적으로 주변에 있던 사람 기록처럼 보이지만 글쓴이는 이 목록이 채워진 것을 본 적이 없다고 밝힙니다.
추론 방식은 다양합니다. 대부분은 연락처의 이름이나 캘린더의 참석자를 그대로 복사하고 규칙을 적용해 채웁니다. 흥미로운 부분은 모델입니다. XGBoost 분류기 두 개가 대부분 행동 특징인 144개 입력값으로 누가 가족인지 판정합니다. 임베딩 모델(데이터를 컴퓨터가 이해하기 쉽게 수치화하는 방식) 두 개는 두 기록이 같은 사람인지 판단하는 열 가지 신호 중 하나로 쓰입니다. 사진 앱의 분석기 열두 개는 누가 언제 어느 여행과 휴일에 함께 찍혔는지를 보고 연인·부모·자녀·동료·친구 점수를 매깁니다. 애플 인텔리전스가 켜져 있으면 기기 내 언어 모델이 메시지를 읽어 얼굴에 이름과 관계를 붙입니다. 어떤 방법이든 모든 행에는 0과 1 사이의 신뢰도가 붙습니다.
가족 점수는 따로 저장됩니다. 온톨로지 옆에 EntityTagging_Family와 EntityTagging_FamilyAndFriends라는 두 모델이 있는데, 144개 특징을 받아 확률을 내놓는 이진 XGBoost 분류기입니다. 점수는 트리플 스토어가 아니라 entityTagging.db라는 별도 표에 들어가고, 사람마다 한 행씩 17개의 관계 열(가족부터 어머니, 동료까지)로 매일 다시 계산됩니다. iKnow의 점수 카드가 이 표를 읽습니다. 17개 열 중 출시된 모델이 뒷받침하는 것은 두 개뿐이고, 나머지 15개를 무엇이 채우는지, 이 확률이 어떻게 그래프의 신뢰도가 되는지는 추적하지 못했습니다.
144개 입력값은 세 묶음입니다. 20개는 그 사람이 누구인지(같은 성, 같은 집 주소, iCloud 가족 여부 등), 40개는 언제 어떻게 연락하는지, 84개는 함께 찍힌 사진에 관한 것입니다. 정체성 묶음은 작은 절반이고, 모델의 대부분은 요일과 시간대별 메시지·사진 패턴입니다. 'photosPersonPosteriorProbabilityGivenSaturdayNight' 같은 특징 이름이 실제로 출시된 분류기에 들어 있습니다.
삭제해도 모든 곳에서 지워지지는 않습니다. 연락처를 지우면 다음 실행 때 표가 통째로 교체되면서 사라집니다. 그러나 저장소는 별도로 expired_stable_graph라는 표를 두고, 철회된 행을 신뢰도·출처와 함께 그곳으로 옮깁니다. 얼마나 남는지는 분명하지 않습니다. 약 48시간 뒤 사라지는 것으로 보이지만(저장소가 정리 기준점을 유지하고, 최근 스냅숏은 그보다 오래 거슬러 올라가지 않음), 글쓴이 본인의 맥에서는 아주 오래된 기록을 여전히 읽을 수 있었습니다. 결론이 근거보다 오래 살아남기도 합니다. 글쓴이의 맥에서는 그래프가 전날 삭제한 두 사람을 점수 카드가 여전히 평가했고, 둘 다 캘린더 초대를 통해서만 알려진 사람이었습니다.
이 그래프는 사용자 한 사람만의 것이 아닙니다. 가족, 친구, 기기로 대화한 사람들이 모두 들어가고, 아무도 동의를 구하지 않았습니다. 저장소는 이들을 사용자와 연결하고, 공유한 일정과 그룹을 통해 서로 연결합니다. 글쓴이는 자기 저장소를 대조해 집에 아이가 있고 대략 몇 살인지, 그 아이가 어느 어린이집에 다니고 연락처 두 개가 무엇인지, 가족이 어느 요일 몇 시에 어디에 있을지, 누가 그 자리에 갈지를 알아낼 수 있었습니다. 같은 파일에 설치된 프로그램 목록이 비밀번호 관리자까지 담겨 있습니다.
이런 개인정보의 단일 실패 지점이 잘못된 손에 들어가면 어떻게 악용될지는 별도의 후속 글로 다룹니다. 다만 이 지식은 기기 안에 머물도록 설계됐고 전체 디스크 접근 권한으로 보호됩니다. 다른 서비스가 이 정보를 쓸 수 있다지만 어떻게 무엇에 접근하는지는 분명하지 않습니다. 글쓴이는 문서도, 저장소를 들여다볼 방법도, 잘못된 추론을 고칠 일반적인 방법도 없다고 지적합니다. 그래서 도구 두 개를 내놓습니다. iKnow는 맥 밖으로 아무것도 내보내지 않고 그래프를 둘러보는 로컬 대시보드이고, 저장소에는 데이터베이스 위치와 읽는 법을 알려 주는 에이전트용 설명서가 들어 있습니다. 클라우드 모델이 아니라 직접 돌리는 모델에 연결하라고 권합니다.
iKnow는 파이썬 표준 라이브러리로 만든 웹 대시보드로, npm도 CDN도 쓰지 않습니다. 맥에서 직접 실행하면 127.0.0.1에 연결해 데이터베이스를 읽기 전용으로 열고, 아무것도 쓰거나 기록하지 않으며, 원하면 인터넷 없이 돌릴 수 있습니다. macOS 26.6.2와 26.7.1에서 시험했고 27.0.1에서는 일부만 시험했습니다. 첫 화면은 사용자를 중심으로 사람·고용주·단체 대화를 보여 주고, 가족으로 점수 매겨진 사람은 주황색, 친밀도 점수가 기준을 넘은 사람은 파란색으로 표시합니다. 점수 카드는 17개 관계 열로 평가된 61명을 보여 주는데, 아무도 직접 입력하지 않은 값입니다. 다만 점수를 계산하는 입력 중 일부(연락처 카드의 관계, 응급 연락처, 가족 공유)는 사용자가 입력한 것입니다. 어머니·아버지·딸이 0.960으로 이 열의 최고치이고 형제·아들·자매는 0.500입니다. 카드는 아홉 가지 신호(연인 열, 종합 점수, 가구 그룹, 가족 공유 토큰, iCloud 가족 표시, 12개월 최다 연락, 사진 얼굴 묶음, 연락처 기록, 연결 가능한 연락처)가 같은 사람에게 몇 개나 맞는지 세는데, 어머니는 9개 중 8개, 아버지와 연인 프리야 산도발은 7개가 맞았습니다. 연인은 목록에 없지만 다른 열로 합쳐지지 않아 따로 잡혔습니다.
얼굴 색인은 연락처나 메시지, 캘린더를 전혀 쓰지 않고 사진만으로 만들어집니다. 두 얼굴이 같은 사진에 나오면 연결되는데, 사진이 두 장 이상인 1,643장에서 묶인 얼굴 8,904개가 입력입니다. 사용자가 중심 허브이고, 왼쪽 덩어리는 가족, 오른쪽 아래 덩어리는 직장이며 두 무리는 같은 사진에 함께 나오지 않습니다. 이 페이지는 얼굴 묶음 29개 중 3개만 이름을 붙일 수 있다고 솔직히 밝히지만, 누가 누구 옆에 서고 얼마나 자주, 어느 무리가 만나지 않는지는 이름 없이도 다 드러납니다.
연락 기록 페이지는 365일 동안 18,432건의 상호작용, 146명의 상대(97명은 이름 있음), 5개 앱을 보여 주며 메시지 내용은 한 글자도 담지 않습니다. 들어오고 나간 방향, 통화 횟수, 마지막 연락 날짜만으로 충분합니다. 같은 기록을 요일과 시간으로 접으면 매일 새벽 1시부터 7시까지 밝은 띠가 나타납니다. 아무도 수면 일정을 저장하지 않았지만, 가장 조용한 6시간 구간이 타임스탬프에서 저절로 나옵니다. 이 저장소의 일반적인 모습입니다. 거의 모든 것이 수집된 것이 아니라 다른 무언가의 결과물입니다.
macOS 27은 2026년 9월 14일 출시됐습니다. 27.0.1로 올린 뒤 그래프는 연락처, 캘린더, 시리 제안, 가족 공유, 앱 목록에서 만든 행 대부분을 철회하고 다음 날까지 다시 만들었습니다. iKnow의 일부 페이지는 아직 macOS 27에서 완전히 작동하지 않을 수 있습니다.
4. 나에게 어떤 영향이 있나요?
이 그래프는 사용자 본인뿐 아니라 가족과 친구까지 아무 동의 없이 담고, 서로 연결합니다. 연락처에서 지운 사람의 기록이 만료 표에 남아 있을 수 있고, 그래프가 버린 사람을 점수 카드가 계속 평가하기도 합니다. 저장소는 기기 안에 머물고 전체 디스크 접근 권한으로 보호되지만, 다른 서비스가 이 정보를 어떻게 쓰는지는 분명하지 않습니다. 문서도, 저장소를 들여다볼 방법도, 잘못된 추론을 고칠 일반적인 방법도 없습니다. iKnow로 자기 맥에 무엇이 저장됐는지 직접 확인할 수 있고, 저장소에 포함된 설명서로 더 깊이 살펴볼 수 있습니다. 다만 클라우드 모델이 아니라 직접 돌리는 모델에 연결해야 합니다.