Video
논문 그림에 AI 챗봇 활용하기 (2025.1)
YouTube에서 보기
의료 AI 및 데이터과학 · Medical AI & Data Science
한국어 요약
이 발표는 대규모 언어 모델과 특화된 AI 도구를 사용하여 과학 논문의 그림과 그림 설명문을 기획하고 초안을 만드는 실용적 작업 흐름과 프롬프트 전략을 다룬다. AI를 최종 출판용 그림을 직접 제작하는 도구라기보다 초기 구상, 구조화된 계획, 시각적 프로토타이핑, 설명문 작성에 활용하는 접근을 제시한다.
핵심 내용
- 일반적인 텍스트 대 이미지 확산 모델은 설명과 시각적 픽셀 패턴을 대응시키는 방식으로 이미지를 생성하지만, 과학 그림에는 정확한 기하학적 배치, 좌표 기반의 도형과 텍스트 배치, 화살표와 같은 명시적 연결, 높은 수준의 추상화와 상징화가 필요하다.
- 직접적인 이미지 생성에서는 해부학적 오류, 의미 없는 화학 구조, 읽기 어려운 텍스트와 라벨, 잘못된 숫자 배열이 발생할 수 있다. 발표 자료는 생물학적으로 불가능한 쥐의 해부학과 오류가 있는 사람 무릎 관절 도식이 포함된 철회 논문의 사례를 제시한다.
- OpenAI ChatGPT o1은 원고나 리뷰 초안을 바탕으로 그림 제목, 시각적 배치와 흐름, 도형 구성, 핵심 결과와의 연결, 색상과 라벨을 포함한 개념 그림 계획을 제안할 수 있다. 초안 그림과 원고를 함께 입력하면 하위 패널별 실험 조건, 통계 표현, 설명을 포함한 구조화된 그림 설명문을 작성할 수 있으며, 설명문 작성을 위한 프롬프트를 먼저 설계하도록 요청하는 메타 프롬프트도 활용된다. 내부 추론 과정으로 인해 지연 시간과 계산 비용이 증가하며, 텍스트와 여러 이미지 입력을 지원한다고 설명된다.
- 권장 독자
- 과학 원고, 그림, 그림 설명문, 개념 도식을 준비하는 연구자, 의생명과학자, 학술 저자, 학생을 위한 내용이다.
- 범위와 한계
- 이 자료는 실용적 발표의 증거 노트에 기반하며, 도구의 체계적인 비교 평가나 출판 품질에 대한 독립적 검증 결과를 제시하지 않는다. Claude 3.5 Sonnet의 Artifacts는 대화와 렌더링 작업 공간을 분리하고 SVG, HTML, Markdown, Mermaid, React 구성 요소 등의 반복 수정을 지원하는 것으로 설명된다. 이를 통해 SVG 벡터 그림과 Mermaid 흐름도를 만들 수 있고, 레이아웃과 시각적 스타일을 대화형으로 바꿀 수 있다. Napkin AI는 구조화되지 않은 텍스트를 편집 가능한 도식과 시각적 은유로 변환하며, 약리 기전과 같은 내용을 다양한 레이아웃으로 표현하고 SVG 또는 PDF로 내보낼 수 있다. 그러나 현재의 LLM과 AI 챗봇은 카메라 레디 수준의 최종 그림을 자율적으로 제작하거나 세밀한 그래픽 조정을 수행하지 못한다. 저자는 프로토타입이나 SVG 및 Mermaid 코드를 내보낸 뒤 Adobe Illustrator나 Microsoft PowerPoint 같은 전용 그래픽 소프트웨어에서 배치, 미적 요소, 도메인 정확성을 수동으로 마무리해야 한다고 제시한다.
- 연구 맥락
- 이 주제는 Sangzin Ahn의 포트폴리오와 연결되는 의료 연구용 AI 활용, 과학적 시각화, 데이터과학 기반의 연구 커뮤니케이션이라는 중립적 주제와 관련된다.
English summary
This presentation describes practical workflows and prompting strategies for using large language models and specialized AI tools to plan and draft scientific figures and figure legends. It frames AI as a tool for early brainstorming, structured planning, visual prototyping, and legend drafting rather than as an autonomous producer of final publication graphics.
Key points
- Standard text to image diffusion models generate images by matching descriptive text with visual pixel patterns, whereas scientific figures require precise geometric placement, coordinate based arrangement of shapes and text, explicit connections such as arrows, and highly abstract symbolic representation.
- Direct image generation can produce anatomical inaccuracies, nonsensical chemical structures, unreadable text and labels, and incorrect number sequences. The presentation cites retracted papers containing AI generated graphics with biologically impossible rat anatomy and human knee diagrams with anatomical errors.
- OpenAI ChatGPT o1 can use manuscripts or review drafts to propose figure titles, visual layouts and flows, shape arrangements, links to key findings, and suggested colors and labels. When draft figures and manuscript text are supplied, it can produce structured, publication style legends describing experimental conditions, statistical representations, and panel specific content. The presentation also describes asking the model to design an effective legend prompt in advance. The model is described as having greater latency and computational cost because of its internal reasoning process and as supporting text and multiple image inputs.
- Audience
- Researchers, biomedical scientists, academic authors, and students preparing scientific manuscripts, figures, figure legends, and conceptual diagrams.
- Scope and limitations
- The source is based on practical presentation evidence notes and does not report a systematic comparative evaluation or independent validation of publication quality. Claude 3.5 Sonnet with Artifacts is described as separating chat from a rendering workspace and supporting iterative work with SVG, HTML, Markdown, Mermaid, and React components. It can draft vector figures in SVG, generate Mermaid flowcharts, and revise layouts and visual styles conversationally. Napkin AI is described as transforming unstructured text into editable diagrams and visual metaphors, representing topics such as pharmacological mechanisms in different layouts and exporting SVG or PDF files. However, current LLMs and AI chatbots are not presented as capable of autonomously producing camera ready, publication grade figures or making fine graphic adjustments. The recommended workflow is to export prototype layouts or SVG and Mermaid code, then manually finalize layout, aesthetics, and domain accuracy in dedicated software such as Adobe Illustrator or Microsoft PowerPoint.
- Research context
- This topic has a neutral thematic connection to Sangzin Ahn's portfolio through the use of AI in medical research, scientific visualization, and data science based research communication.
AI-assisted summary based on the cited primary source. Model gpt-5.6-luna, prompt academic-hub-v2, generated 2026-08-29T03:37:46+00:00.