CheXagent
Stanford AIMI 흉부 X선 파운데이션 모델
Dr7.ai 의료 AI 플랫폼 제공
CheXagent는 Stanford Center for Artificial Intelligence in Medicine & Imaging(AIMI)이 흉부 X선 판독을 위해 특별히 개발한 80억 파라미터 규모의 비전-언어 모델로, 소견 검출과 판독문 생성부터 시각 질의응답까지 다룹니다.
CheXagent 스타일 흉부 X선 분석 체험
흉부 X선 영상을 업로드하고 소견, 촬영 방향, 추적 검사에 대해 질문해 보세요. CheXagent가 목표로 한 구조화된 흉부 X선 판독의 예를 데모로 확인할 수 있습니다.
CheXagent의 모든 잠재력을 활용하세요
영상의학 연구 워크플로를 위한 무제한 흉부 X선 분석, 더 높은 업로드 한도, API 접근을 이용하세요.
CheXagent란?
CheXagent — 2024년 1월 Stanford AIMI가 공개한 흉부 X선 파운데이션 모델입니다(Chen et al., "CheXagent: Towards a Foundation Model for Chest X-Ray Interpretation"). 임상 언어 모델, 흉부 X선 영상으로 학습한 비전 인코더, 그리고 모델이 이미지에 대해 자연어로 추론할 수 있게 해 주는 연결 네트워크를 결합했습니다.
학습을 위해 연구팀은 수십 개의 공개 흉부 X선 데이터 소스로 구성한 대규모 인스트럭션 튜닝 데이터셋 CheXinstruct와, 이미지 인식 작업(촬영 방향 분류, 질환 식별, 시각 QA) 및 텍스트 생성 작업(소견 및 결론 생성, 판독문 요약)으로 모델을 평가하는 CheXbench를 구축했습니다.
CheXbench에서 CheXagent는 대부분의 작업에서 범용 모델과 이전 의료 멀티모달 모델을 능가했으며, 저자들은 성별·인종·연령에 따른 성능 차이도 점검했습니다. 여전히 연구용 모델로, FDA 허가를 받지 않았으며 영상의학과 전문의를 대체하기 위한 것이 아닙니다.
최신 동향
2024년 1월 Stanford AIMI 공개(Chen et al., 2024)
가중치와 CheXbench 평가 도구는 연구용으로 공개, 규제 당국의 허가를 받은 의료기기 아님
주요 특징
흉부 X선 영상 전용으로 구축 및 평가
핵심 기능
흉부 X선 촬영 방향 및 자세 분류
질환 및 소견 식별
소견 및 결론(판독문) 생성
흉부 X선 시각 질의응답
영상의학 판독문 요약
대규모 멀티소스 인스트럭션 데이터셋 CheXinstruct로 학습
CheXbench로 인식 및 생성 작업 전반을 평가
성별·인종·연령 하위 그룹 전반의 공정성 점검
성능 벤치마크
CheXbench 결과는 CheXagent 논문에서 보고된 것이며, Dr7.ai가 독자적으로 측정하지 않았습니다
CheXbench — 인식
선두촬영 방향 분류, 질환 식별, VQA를 범용 및 의료 멀티모달 베이스라인과 비교
CheXbench — 생성
선두소견, 결론, 요약 작업을 영상의학 특화 지표로 채점
CheXinstruct
다중 소스다수의 공개 흉부 X선 컬렉션(예: MIMIC-CXR, CheXpert)으로 구축한 인스트럭션 데이터셋
모델 크기
8B비전 인코더 + 비전-언어 브리지 + 임상 LLM
활용 사례
영상 연구
공통 평가 도구(CheXbench)로 흉부 X선 판독 모델을 벤치마크합니다.
영상의학 의사결정 지원
소견 초안을 작성하고 이상 가능성이 있는 부분을 영상의학과 전문의가 검토하도록 표시합니다.
영상의학 교육
교육용 흉부 X선 영상을 활용한 대화형 질의응답.
CheXagent 사용 방법
Stanford AIMI의 연구용 가중치
모델 받기
CheXagent 가중치는 Stanford AIMI가 연구용으로 Hugging Face에 공개했습니다. 최신 라이선스 조건은 모델 카드에서 확인하세요.
통합 옵션
흉부 X선 영상과 지시문을 입력하면 텍스트를 받습니다.
- • 소견/질환 식별 프롬프트
- • 소견 및 결론 생성
- • 시각 질의응답
- • 판독문 요약
배포 시 고려 사항
CheXagent를 환자 데이터를 다루는 환경에 도입하기 전에 개인정보 보호, 검증, 사람의 감독을 계획하십시오.
- • 데이터를 비식별화하고 HIPAA / GDPR을 준수합니다
- • 사용 전에 자체 기관 데이터로 검증합니다
- • 모든 출력에 대해 면허를 가진 임상의가 검토하도록 합니다
- • 감사자를 위해 한계와 의도된 용도를 문서화합니다
중요 고려 사항
임상 검증 필요
CheXagent는 연구용 모델입니다. 임상에 사용하기 전에 반드시 자격을 갖춘 의료 전문가가 출력을 검토해야 합니다.
규제 준수
이 모델은 규제 당국의 허가 또는 승인을 받은 의료기기가 아닙니다. 배포 전에 현지 의료 규정과 데이터 보호 규칙(예: HIPAA, GDPR)을 준수하는지 확인하십시오.
눈에 보이는 증상 사진이 있으신가요?
이 페이지에서 설명하는 모델은 임상 영상을 위한 연구용 도구입니다. 발진, 점, 손발톱, 상처처럼 일상적인 사진이라면 AI Doctor Scan이 약 30초 만에 무료로 긴급도 등급과 쉽게 풀어쓴 요약을 알려줍니다. 진단명을 말하지 않으며 계정도 필요 없습니다.
AI Doctor Scan 무료로 사용해 보기CheXagent와 다른 의료 영상 모델 비교
특화형 대 범용형
CheXagent
Stanford AIMI의 흉부 X선 모델
- ✓흉부 X선 영상 전용 설계
- ✓인식과 판독문 생성을 하나의 모델로 처리
- ✓공정한 비교를 위한 공개 벤치마크(CheXbench)
- ✓인구통계 집단 간 공정성 평가
- ✓대규모 멀티소스 인스트럭션 세트로 학습
- ✓연구용으로 공개
흉부 X선 연구, 판독문 초안 프로토타입, 영상의학 AI 벤치마킹
기타 의료 AI 모델
비교
- ×범용 LLM(GPT-4, Gemini)은 개방형 추론에 더 강하지만 폐쇄형이며 비용이 높음
- ×더 큰 오픈 모델(Meditron-70B, MedGemma-27B)은 훨씬 많은 GPU 메모리가 필요함
- ×텍스트 전용 모델은 이미지를 볼 수 없음
- ×이미지 전용 분류기는 소견을 언어로 설명할 수 없음
- ×상용 제품은 검증되었지만 내부를 들여다볼 수 없음
- ×대부분의 대안은 재현 가능한 벤치마크를 적게 공개함
모달리티(텍스트 대 이미지), 라이선스, 실제 보유한 하드웨어를 기준으로 선택하세요
자주 묻는 질문
CheXagent에 관한 자주 묻는 질문
CheXagent는 누가 개발했나요?
Stanford Center for Artificial Intelligence in Medicine & Imaging(AIMI)입니다. Google 모델이 아닙니다.
CheXagent는 무엇을 할 수 있나요?
흉부 X선의 촬영 방향 분류, 소견 식별, 시각 질의응답, 소견 및 결론의 생성 또는 요약을 수행합니다.
CheXagent는 FDA 허가를 받았나요?
아니요. 연구용 모델이며 임상 결정의 유일한 근거로 사용해서는 안 됩니다.
CheXbench란?
CheXagent와 함께 공개된 평가 도구로, 이미지 인식과 텍스트 생성에 걸친 8가지 흉부 X선 작업으로 구성되어 멀티모달 모델 비교에 사용됩니다.
이 데모는 CheXagent 자체를 실행하나요?
데모는 Dr7.ai의 멀티모달 의료 어시스턴트를 사용해 흉부 X선 판독을 보여 줍니다. 원래 모델을 직접 사용하려면 Stanford AIMI 가중치를 이용하세요.