생명 과학 이미지 분석을 발전시키는 TruAI™ 기술의 10가지 주요 개선 사항

Manoel Veiga

Manoel Veiga

2 May, 2024

2025년 3월 13일

TruAI 기술은 생명 과학 및 재료 과학 소프트웨어를 위한 강력한 AI 기반 이미지 분석 도구입니다. 심층 신경망을 사용하는 이 기술은 특정 이미징 응용 분야에 맞게 AI 모델의 개발을 지원합니다. 이 기술은 2019년에 Evident가 scanR HCS(High-Content Screening) 스테이션을 통해 소개했으며 나중에 더 많은 제품으로 확장되었습니다.

TruAI 기술은 Pc에서 로컬로 작동하므로 사용자에게 코딩 또는 프로그래밍 기술을 요구하지 않습니다. 개발된 AI 모델은 scanR Analysis, cellSens Count and MeasureVS200-Detect와 같은 Evident의 분석 패키지 간에 쉽게 교체 가능한 파일입니다.

TruAI 기술은 세 가지 주요 응용 분야에서 장점을 제공합니다.

이 블로그 게시물에서는 지난 6년간 지속적으로 개선되어 온 이러한 생명 과학 소프트웨어 패키지에서 TruAI 기술이 어떻게 진화해 왔는지에 대해 살펴봅니다.

  1. 유연한 툴박스(2019)

2019년 scanR 및 2020년 cellSens와 같은 TruAI 기술이 적용된 초기 제품은 연구자들에게 AI 기반 의미론적 분할 모델 생성을 위한 유연한 툴박스를 제공하는 데 주력했습니다.

AI 모델을 훈련하려면 먼저 사용자가 이미지의 이상값의 주석을 표기해야 하며, 그 다음 훈련 인터페이스로 주석이 표기된 이미지를 로드해야 합니다. 모델은 주석이 표기된 이미지를 분석하여 반복 프로세스를 통해 주석에 대한 예측을 최적화합니다.

초기 TruAI 툴박스의 주요 기능은 다음과 같습니다.

  1. 의미론적 분할(2019)

훈련을 마치면, AI 모델을 다양한 Evident 분석 패키지에서 새 이미지에 적용할 수 있습니다(추론). 의미론적 분할 시 AI 모델은 포어그라운드에 속할 확률이 높은 픽셀을 표시하며 픽셀 확률 맵을 생성합니다. 마지막 객체 감지를 위해 이 확률 맵에 임계값이 설정되고, 그 다음으로 분수령(watershed) 분할과 같은 전통적 분할 알고리즘이 사용됩니다.

A collage of images of red and green dots Description automatically generated 그림 1. a) 첫 번째 단계에서 AI는 핵을 감지하고 확률 강도로 이러한 핵을 표시합니다(빨간색). b) 두 번째 단계에서 확률 맵은 확률 강도에 대한 임계값 적용을 통해 분할됩니다. c) 마지막 단계에서는 객체가 분할됩니다.
  1. 분류(2021)

단일 AI 모델은 이미지의 모든 객체를 분할할 수 있으며 면적 및 형광 강도와 같은 객체의 측정 매개변수를 기반으로 분류가 수행됩니다.

또는 측정 매개변수를 추출하지 않고 분류를 수행하기 위해 여러 AI 모델을 동일한 이미지에 적용할 수도 있습니다. 예를 들면, 하나의 AI 모델이 상태 1의 세포만 감지하고, 다른 AI 모델이 상태 2의 세포만 감지할 수 있습니다.

초기 TruAI 기술 릴리스에서는 이 두 기능 모두 가능했습니다.

그러나 분류 모델은 특히 단일 AI 모델이 백그라운드에서 여러 포어그라운드 클래스를 구별하는 기능을 가리킵니다. 그리고 단일 AI 모델이 렌더링한 둘 이상의 확률에 임계값을 적용하여 마지막 객체 감지를 수행합니다.

유연성을 유지하기 위해 사용자는 훈련 중에 클래스의 중첩 가능성 여부를 결정할 수 있습니다.

분류 모델을 사용할 때 주된 장점은 여러 클래스를 감지할 때 또는 분류를 위한 분명한 측정 가능 특성이 없을 때 분석을 간소화할 수 있다는 것입니다.

A collage of images of cells Description automatically generated

그림 2: 형광 태그가 지정된 효모 단백질의 세포 구획 위치 파악 단일 TruAI 모델이 단백질 위치 정보에 따라 세포를 분류할 수 있습니다. 애플리케이션 노트 TruAI 딥러닝 기술을 사용하여 분류한 효모 단백질 위치 정보에서 더 자세히 알아보세요.

A diagram of a cell model Description automatically generated

그림 3: TruAI 기술은 체외 수정을 위해 비염색 샘플에서 고품질 난모세포를 선택하는 경우와 같이 인간의 시각으로 분류가 어려운 상황에서 분류 AI 모델을 생성하도록 지원합니다. 이 문서에서 더 자세히 알아보세요.

  1. 인스턴스 분할(2021)

의미론적 분할 AI 모델과 다르게, 인스턴스 분할 모델은 한 단계로 마지막 객체를 직접 분할할 수 있으므로 확률 맵 임계값 적용과 추가적인 분할이 필요하지 않습니다.

이 방법은 워크플로를 간소화하며(그림 4와 그림 1 비교), 세포 밀도가 높은 경우와 같이 전통적인 분할 알고리즘으로 감지된 객체를 분리하기 어려운 경우 특히 유용합니다.

A comparison of a microscope image Description automatically generated with medium confidence

그림 4. 단일 인스턴스 모델이 포어그라운드에 속한 픽셀을 찾아서 한 단계로 마지막 객체(핵)의 경계를 결정할 수 있습니다.

A close-up of a microscope Description automatically generated

그림 5. 인스턴스 분류 모델은 둥글지 않은 객체를 대상으로 하는 포화도가 높은 상황에서 특히 유용합니다. 이 예에서는 단일 AI 모델이 두 개의 입력 채널(파란색 및 회색)을 사용하여 경계를 정의하며 중첩 객체를 핵 또는 세포로 분류하고 있습니다.

  1. 스케일링(2021, 2023)

AI 모델은 일반적으로 몇백 픽셀로 시야가 제한되어 있어 픽셀 해상도에 민감합니다. 스케일링 기술은 이러한 한계를 완화합니다.

훈련 중 스케일링(2021)

객체가 AI 모델의 시야를 벗어날 경우, 모델은 객체의 경계를 전부 인식하지 못하여 효과적으로 감지하지 못할 수 있습니다. 이 문제를 해결하기 위해 훈련에 모델의 시야를 효과적으로 넓히는 스케일링 계수를 포함할 수 있습니다. 이러한 훈련 접근법은 제브라피시, 오가노이드와 같은 큰 객체 전체 또는 조직 샘플 안의 큰 영역을 감지하는 데 특히 유용합니다.

A screenshot of a computer Description automatically generated

그림 6. 웰 플레이트에서 전달 중인 큰 오가노이드를 감지하기 위한 훈련 AI 모델의 시야는 녹색으로 표시되어 있습니다. 왼쪽: 수천 회의 반복 후에도 스케일링이 적용되지 않은 훈련은 열악한 결과를 냅니다. 오른쪽: 25%의 스케일링이 적용된 훈련은 몇백 회의 반복만으로도 고품질 결과를 달성합니다.

추론 중 스케일링(2023)

AI 모델을 10배율 대물렌즈로 훈련하고 40배율 대물렌즈로 촬영한 이미지에 이 모델을 적용하면 감지가 효과적으로 이루어지지 않습니다. TruAI 기술의 스케일링 기능을 사용하면 AI 모델의 해상도에 맞게 이미지 해상도를 조정하여 최적의 성능을 구현할 수 있습니다. 또한, 인스턴스 분할 모델이 과다 분할을 야기할 경우, 해상도를 낮추면 전체 객체의 감지 기능이 향상되는 경우가 많습니다.

A green circle with a red circle Description automatically generated

그림 7. a) 살아 있는 세포의 형광 이미지. b) 인스턴스 분할 AI 모델이 일부 세포에서 과다 분할을 야기함. c) 50% 스케일링이 적용된 동일한 인스턴스 분할 모델은 과다 분할 없이 정확하게 세포를 감지함.

  1. Live AI(2021)

Live AI는 이미지 획득 없이 실시간으로 AI 모델을 적용하는 cellSens 소프트웨어의 기능입니다. AI 확률 또는 최종 객체 분할이 실시간 화면에 직접 표시되므로 빠른 품질 관리 검사, 정량화 응용 분야의 빠른 계수, 그리고 표본 선택(예: 세포, 정자 또는 난모세포 선택 시 최고의 후보)을 요구하는 절차의 손쉬운 대상 식별이 가능합니다.

https://adobeassets.evidentscientific.com/content/dam/mis/truai/Live-AI.mp4

그림 8. Live AI의 추론 워크플로. 분류 기능이 있는 인스턴스 분할 모델이 웰 플레이트에 적용되었습니다. 사용자가 웰 플레이트를 살펴보는 가운데 확률 맵과 세 가지 세포 클래스 계수가 실시간 이미지의 왼쪽 하단에 표시되었습니다.

  1. 사전 훈련 모델(2021~2024)

Evident는 자체 AI 모델을 훈련시킬 시간이 없는 사용자를 위해 즉시 사용할 수 있는 사전 훈련 모델을 도입했습니다. 여러 유형의 사전 훈련 AI 모델을 다음과 같은 분석 소프트웨어 패키지에서 사용할 수 있습니다.

또한, 사전 훈련 모델은 주석 표기의 출발점으로 사용할 수 있습니다. 사전 훈련 모델의 예측은 주석으로 변환할 수 있으며, 사용자는 이를 정정할 수 있습니다. 이 워크플로는 특히 대화형 훈련과 함께 사용할 경우 잘 작동합니다(섹션 9 참조).

A close-up of a colorful pattern Description automatically generated

그림 9. 사전 훈련 IHC 분류 모델은 갈색 세포와 파란색 세포 내 덩어리의 중심을 감지합니다. cellSens Count and Measure 또는 VS200-Detect에서 사용할 경우, 총 세포 수와 각 세포 유형의 비율이 출력됩니다.

TruAI 노이즈 감소 처리됨(하단)

Picture, Picture, Picture

Picture, Picture, Picture

TruAI 노이즈 감소 처리됨(하단)

Picture, Picture, Picture

Picture, Picture, Picture

그림 10. FLUOVIEW FV4000 컨포컬 현미경으로 촬영한 공진 스캐너 이미지와(각 이미지의 왼쪽) TruAI 노이즈 감소로 향상된 공진 스캐너 이미지(각 이미지의 오른쪽). 공진 스캐너 이미징은 적은 손상을 입히며 고속으로 세포의 동적 변화를 효과적으로 촬영합니다. 그러나, 이 경우 보통 신호 대 잡음비가 낮습니다. TruAI 노이즈 감소는 SilVIR 감지기의 노이즈 패턴을 기반으로 사전 훈련된 AI 모델을 사용하여 시간 분해능을 저해하지 않고 이미지를 개선합니다. 이러한 사전 훈련 TruAI 노이즈 감소 알고리즘은 실시간으로 그리고 후처리 동안 적용할 수 있습니다.

  1. 자동 샘플 감지(2022)

AI 모델을 자동 샘플 감지를 위한 획득 워크플로에 통합하여 전체 조직 스캔, 특정 영역 인식 또는 희귀 이벤트 식별 시 시간을 절약할 수 있습니다. 워크플로는 일반적으로 저배율에서 개략적 스캔과 함께 시작되며, 그 다음 더 많은 채널, 추가적인 Z 계층 또는 광시야에서 컨포컬 스피닝 디스크 현미경 검사로의 수단 변경을 활용하는 더 큰 배율의 상세 스캔이 수행됩니다.

https://adobeassets.evidentscientific.com/content/dam/video/video/library/cellSens_Macro_Micro_Video_MASTER_rev3.mp4

그림 11. 광시야 현미경용 cellSens 소프트웨어의 매크로-마이크로 이미징 워크플로를 보여주는 동영상.

  1. 대화형 훈련(2023)

훈련 AI 모델을 위한 새로운 대화형 워크플로가 2023년에 도입되었습니다. 이 워크플로를 통해 사용자는 대화형으로 이미지에 주석을 표기하고, 모델을 훈련하고, AI 예측을 검토하고, 정정을 수행하고, 이러한 정정 사항을 향후 훈련을 위한 새 라벨로 사용할 수 있습니다. 그러고 나서, 사용자는 새 이미지에 계속 주석을 표기하여 반복적으로 모델을 개선할 수 있습니다. 이 접근법으로 간단한 애플리케이션을 위한 AI 모델을 빠르게 개발할 수 있습니다.

A diagram of a diagram of a diagram Description automatically generated with medium confidence

그림 12. 대화형 훈련 워크플로의 예.

  1. 이미지 개선(2023)

사용자는 분할 작업과 이미지 처리 작업 모두를 위해 AI 모델을 훈련시킬 수 있습니다. 예를 들어, 노이즈 제거 또는 디콘볼루션과 같은 처리 기법을 수행하도록 모델을 가르칠 수 있습니다.

여러 채널에 걸쳐 훈련을 수행하므로 훈련을 위한 이상값을 쉽게 생성할 수 있습니다. 예를 들면, 노이즈 감소 모델을 위한 이상값을 생성하는 일은 두 개의 채널을 수집하는 일만큼 간단합니다. 이 두 개의 채널은 높은 신호 대 잡음비 채널(이상값 역할 수행)과 짧은 노출 및 저조도 여기 채널입니다.

이 접근법의 주요 장점은 연구자들이 자체 샘플을 사용하여 AI 모델을 훈련할 수 있다는 것입니다. 이를 통해, 할루시네이션(설명 불가한 거짓 구조)과 같은 아티팩트를 최소화하면서 특정 대상 구조를 위해 최적의 성능을 달성할 수 있습니다.

Inserting image..., Picture, Picture

Picture, Picture

그림 13. TruAI 모델을 노이즈 감소와 같은 이미지 처리 작업을 위해 훈련시킬 수 있습니다(하단).

계속 진화하는 TruAI 기술

TruAI 기술은 지난 6년에 걸쳐 지속적으로 진화해 왔으며, 그 과정에서 분할, 분류, 스케일링 및 실시간 분석을 개선하고 이미지를 향상시켰습니다. 유연성과 사용 편이성, 그리고 Evident 소프트웨어 플랫폼 전반에 통합되는 특성 덕분에 TruAI는 생명 과학 분야의 AI 기반 이미지 분석을 위한 강력한 도구가 되었습니다.

TruAI 모델이 실제로 활용되는 방식에 대해 더 알아보려면, Evident의 현미경 전문가 팀에게 문의하여 맞춤형 데모를 요청하세요.

추천 제품

scanR HCS(High-Content Screening) 스테이션

자세히 알아보기

SLIDEVIEW™ VS200 연구 슬라이드 스캐너

자세히 알아보기

FLUOVIEW™ FV4000 컨포컬 레이저 스캐닝 현미경

자세히 알아보기

cellSens™ 이미지 분석 소프트웨어

자세히 알아보기

Manoel Veiga

Manoel Veiga 박사

응용 전문가, 생명과학 연구

Manoel Veiga는 스페인 산티아고데콤포스텔라대학교에서 물리 화학 박사 학위를 취득했습니다. 그는 마드리드 콤플루텐세대학교와 뮌스터대학교에서 두 차례의 박사 후 과정을 마친 후 형광 수명 이미징 현미경(Fluorescence Lifetime Imaging Microscopy, FLIM) 및 시간분해 분광법 분야에서 전 세계의 전문가를 지원했습니다. 그는 자신의 경험을 바탕으로 2017년에 EVIDENT Technology Center Europe에서 고함량 분석 및 딥러닝 분야의 글로벌 응용 전문가로 일했습니다.