Effective Volume Rendering and Virtual Staining Framework for Visualizing 3D Cell Image Data

3차원 세포 영상 데이터의 효과적인 볼륨 렌더링 및 가상 염색 프레임워크

  • Kim, Taeho (School of Computing, Korea Advanced Institution of Science and Technology) ;
  • Park, Jinah (School of Computing, Korea Advanced Institution of Science and Technology)
  • 김태호 (한국과학기술원 전산학부) ;
  • 박진아 (한국과학기술원 전산학부)
  • Received : 2017.08.11
  • Accepted : 2018.02.28
  • Published : 2018.03.01

Abstract

In this paper, we introduce a visualization framework for cell image data obtained from optical diffraction tomography (ODT), including a method for representing cell morphology in 3D virtual environment and a color mapping protocol. Unlike commonly known volume data sets, such as CT images of human organ or industrial machinery, that have solid structural information, the cell image data have rather vague information with much morphological variations on the boundaries. Therefore, it is difficult to come up with consistent representation of cell structure for visualization results. To obtain desired visual representation of cellular structures, we propose an interactive visualization technique for the ODT data. In visualization of 3D shape of the cell, we adopt a volume rendering technique which is generally applied to volume data visualization and improve the quality of volume rendering result by using empty space jittering method. Furthermore, we provide a layer-based independent rendering method for multiple transfer functions to represent two or more cellular structures in unified render window. In the experiment, we examined effectiveness of proposed method by visualizing various type of the cell obtained from the microscope which can capture ODT image and fluorescence image together.

본 논문에서는 광 회절 단층 촬영 (Optical Diffraction Tomography, ODT) 기법을 사용해 얻어진 세포 영상을 3차원 가상 공간에 시각적으로 표현하고 기존의 세포 영상들과의 일치감을 주는 색상 매핑 기술을 포함한 가시화 프레임 워크를 소개한다. 전체 볼륨을 구성하는 내부 구조에 대한 정보가 잘 알려져 있거나 명확하게 구분 가능한 인체의 장기 또는 산업 기기와 같은 기존의 볼륨 데이터와는 달리 세포 영상 데이터는 세포소기관들 간의 경계가 모호하거나 상황에 따라 형상의 변화가 다양하다는 특징을 가지고 있어, 세포의 형상에 대한 일관적인 시각 표현이 상대적으로 어렵다는 문제가 있다. 본 논문에서는 이를 해소하기 위해 세포의 3차원 형상을 실시간으로 렌더링 할 수 있는 가시화 기법을 제안한다. 제안하는 기법에서는 우선 세포의 3차원 형상을 나타내기 위해 볼륨 데이터의 가시화에서 널리 활용되고 있는 볼륨 렌더링 기법을 ODT 영상에 맞게 적용했으며, 빈 공간 교란 기법을 통한 렌더링 결과의 개선으로 세포내 구조의 연속성을 나타낼 수 있게 했다. 또한 다중 전이 함수에 대해 레이어 기반 독립 렌더링을 적용하는 것을 통해 다수의 세포내 구조를 하나의 화면에 표현하는 복합 가시화 기법을 제안했다. ODT 영상 및 염색 영상을 동시에 촬영 가능한 현미경으로부터 얻어진 세포 영상을 가시화 하는 것을 통해 제시된 가시화 기법의 유용성을 확인했다.

Keywords

References

  1. Popescu, G., "Quantitative phase imaging of cells and tissues", McGraw-Hill, New York, (2011)
  2. Lee, S. H., Moon, J. J., and West, J. L. "Three-dimensional micropatterning of bioactive hydrogels via two-photon laser scanning photolithography for guided 3D cell migration." Biomaterials, 29(20), 2962-2968. (2008) https://doi.org/10.1016/j.biomaterials.2008.04.004
  3. Peng, H., Ruan, Z., Long, F., Simpson, J. H., and Myers, E. W. "V3D enables real-time 3D visualization and quantitative analysis of large-scale biological image data sets." Nature biotechnology, 28(4), 348-353, (2010) https://doi.org/10.1038/nbt.1612
  4. Shin, S., Kim, K., Kim, T., Yoon, J., Hong, K., Park, J. and Park, Y. "Optical diffraction tomography using a digital micromirror device for stable measurements of 4D refractive index tomography of cells." Proc. SPIE 9718, Quantitative Phase Imaging II, 971814, (2016)
  5. Wolf, I., Vetter, M., Wegner, I., Bottger, T., Nolden, M., Schobinger, M., and Meinzer, H. P. "The medical imaging interaction toolkit." Medical image analysis, 9(6), 594-604, (2005) https://doi.org/10.1016/j.media.2005.04.005
  6. Kniss, J., Kindlmann, G., and Hansen, C. "Multidimensional transfer functions for interactive volume rendering." IEEE Transactions on visualization and computer graphics, 8(3), 270-285. (2002) https://doi.org/10.1109/TVCG.2002.1021579