Vision & Utilities
음성 인식(Whisper), OCR·이미지 캡셔닝, 임베딩, 3D 생성, 립싱크·토킹헤드, 비디오 향상까지 — 생성 외의 모든 AI 유틸리티를 하나의 API로 사용하세요.
모델 비교표
| 모델 | 크레딧 | 유형 | 특징 |
|---|---|---|---|
| salesforce/blip | 1 | OCR/캡션 | Salesforce, 빠른 처리 |
| andreasjansson/clip-features | 1 | 임베딩 | CLIP, 빠른 처리 |
| falcons-ai/nsfw_image_detection | 1 | 안전 필터 | Falcons.ai, 빠른 처리 |
| abiruyt/text-extract-ocr | 1 | OCR/캡션 | OCR, 빠른 처리 |
| charlesmccarthy/addwatermark | 1 | 비디오 유틸 | FullJourney, 빠른 처리 |
| lucataco/florence-2-large | 2 | 객체 감지 | Microsoft, 빠른 처리 |
| adirik/grounding-dino | 2 | 객체 감지 | Grounding DINO, 빠른 처리 |
| beautyyuyanli/multilingual-e5-large | 2 | 임베딩 | E5, 빠른 처리 |
| lucataco/moondream2 | 5 | OCR/캡션 | Moondream, 빠른 처리 |
| nicolascoutureau/video-utils | 5 | 비디오 유틸 | FFmpeg, 빠른 처리 |
| thomasmol/whisper-diarization | 7 | 음성 인식(STT) | Whisper, 빠른 처리 |
| vaibhavs10/incredibly-fast-whisper | 10 | 음성 인식(STT) | Whisper, 빠른 처리 |
| openai/whisper | 10 | 음성 인식(STT) | OpenAI, 최고 품질 |
| zsxkib/mmaudio | 11 | 비디오 유틸 | MMAudio, 고품질 |
| chenxwh/cogvlm2-video | 28 | 비디오 유틸 | CogVLM, 고품질 |
| firtoz/trellis | 77 | 3D 생성 | Microsoft, 고품질 |
| cjwbw/sadtalker | 91 | 립싱크/아바타 | SadTalker, 고품질 |
| bytedance/latentsync | 220 | 립싱크/아바타 | ByteDance, 고품질 |
| tencent/hunyuan-3d-3.1 | 1,160 | 3D 생성 | Tencent, 최고 품질 |
| lucataco/real-esrgan-video | 1,280 | 비디오 향상 | Real-ESRGAN, 고품질 |
| veed/lipsync/v2 | 2,440 | 립싱크/아바타 | Veed, 고품질 |
오디오·비디오·이미지 파일은 POST /v1/files/upload-url로 업로드한 뒤 해당 URL을 입력으로 사용하세요. 처리 시간이 파일 길이에 비례하는 모델은 상세 문서에 표기되어 있습니다.
모델 상세 정보
각 모델의 상세한 파라미터, 예제, 활용 팁은 개별 문서에서 확인하세요.
Incredibly Fast Whisper
Whisper
속도에 최적화된 Whisper large-v3입니다 (3,800만+ 실행). 배치 추론으로 약 150분 분량 오디오를 100초 이내에 전사합니다. 청크/단어 단위 타임스탬프를 지원합니다.
Whisper
OpenAI
음성 전사의 표준인 OpenAI Whisper large-v3입니다 (1억 4,400만+ 실행). 약 100개 언어 자동 감지, 영어 번역, plain text/SRT/VTT 출력 형식을 지원합니다.
Whisper Diarization
Whisper
화자 분리(diarization)가 포함된 Whisper 전사입니다 (800만+ 실행). 누가 무엇을 말했는지 세그먼트별 화자 라벨과 타임스탬프로 반환합니다. 회의·인터뷰 전사의 정석입니다.
BLIP
Salesforce
Salesforce BLIP입니다 (1억 7,300만+ 실행). 이미지 캡셔닝, 시각 질의응답(VQA), 이미지-텍스트 매칭을 하나의 모델로 제공합니다. 이미지당 1크레딧으로 대량 캡셔닝의 클래식 선택지입니다.
CLIP Features
CLIP
텍스트와 이미지를 모두 임베딩하는 CLIP ViT-L/14입니다 (1억 6,300만+ 실행). 둘을 같은 벡터 공간에 놓아 교차 모달 검색, 이미지 중복 제거, 제로샷 분류에 사용합니다. 실행당 1크레딧.
Florence-2 Large
Microsoft
Microsoft의 올인원 비전 모델 Florence-2입니다. 캡셔닝, 객체 감지, 구문 그라운딩, OCR, 세그멘테이션을 하나의 API로 제공합니다. 작업을 고르고 필요하면 텍스트 입력만 추가하면 됩니다.
Grounding DINO
Grounding DINO
자연어 프롬프트 기반 객체 감지입니다 (3,900만+ 실행). 찾고 싶은 것을 말로 설명하면('red car, person wearing a hat') 신뢰도 점수가 붙은 바운딩 박스와 시각화 이미지를 반환합니다.
Hunyuan 3D 3.1
Tencent
Tencent의 플래그십 3D 생성 모델입니다. 텍스트 프롬프트 또는 이미지로 고폴리곤 텍스처 3D 모델을 만들고, PBR(물리 기반 렌더링) 머티리얼 옵션을 지원합니다.
Moondream2
Moondream
작지만 유능한 비전-언어 모델입니다 (1,400만+ 실행). 어떤 이미지든 자유롭게 질문하면 상세한 답변을 받습니다. 태깅·모더레이션 준비·풍부한 대체 텍스트용 고효율 VQA입니다.
Multilingual E5 Large
E5
다국어 텍스트 임베딩 모델입니다 (7,400만+ 실행). 한국어 포함 100개 언어에서 1024차원 벡터를 생성합니다. Core.Today 고객 데이터베이스의 벡터 검색(knn_vector)과 완벽하게 조합됩니다.
NSFW Image Detection
Falcons.ai
NSFW 이미지 분류의 표준입니다 (1억 2,700만+ 실행). 어떤 이미지든 'normal' 또는 'nsfw'로 판정합니다. UGC 플랫폼의 필수 모더레이션 게이트로, 이미지당 1크레딧입니다.
Text Extract OCR
OCR
가장 많이 쓰이는 심플 OCR입니다 (9,100만+ 실행). 이미지 하나를 넣으면 텍스트를 plain text로 반환합니다. 영수증·스크린샷·스캔 문서 처리의 기본 선택지로, 단 1크레딧입니다.
TRELLIS
Microsoft
Microsoft의 TRELLIS 이미지→3D 모델입니다 (83만+ 실행, Replicate 최다 사용 3D 모델). 이미지 1장 이상으로 텍스처가 입혀진 GLB 3D 에셋을 만들고, 턴테이블 렌더 영상과 Gaussian PLY도 출력할 수 있습니다.
Add Watermark
FullJourney
어떤 영상에든 텍스트 워터마크를 추가합니다. 생성 콘텐츠나 사용자 콘텐츠의 브랜드 보호를 영상당 2크레딧으로 간단하고 빠르게 처리합니다.
CogVLM2 Video
CogVLM
비디오 이해·캡셔닝 모델입니다. 영상에 대해 자유롭게 질문하면 동작·장면·내용에 대한 상세한 답변을 받습니다. 비디오 검색 인덱싱과 모더레이션 준비에 유용합니다.
LatentSync
ByteDance
ByteDance의 오픈소스 립싱크 모델입니다. 잠재 확산(latent diffusion)으로 영상의 입 모양을 어떤 오디오에든 다시 동기화합니다. 더빙·현지화를 위한 오픈소스 최고 수준의 립싱크 품질입니다.
MMAudio
MMAudio
어떤 영상에든 AI 사운드를 입힙니다 (500만+ 실행). 영상 내용과 텍스트 프롬프트로 동기화된 오디오(앰비언스·효과음·폴리)를 합성합니다. 무음인 AI 생성 클립의 마무리에 완벽합니다.
Real-ESRGAN Video
Real-ESRGAN
Real-ESRGAN 기반 비디오 업스케일링입니다. 프레임 단위로 영상을 FHD·2K·4K로 향상합니다. 오래된 영상과 AI 생성 클립을 위한 대표적인 오픈소스 비디오 업스케일러입니다.
SadTalker
SadTalker
사진 한 장과 오디오로 토킹헤드 영상을 만듭니다. 자연스러운 머리 움직임과 눈 깜빡임으로 얼굴을 애니메이션하며, GFPGAN 얼굴 향상 옵션을 제공합니다.
Veed Lipsync v2
Veed
Fal.AI를 통해 제공되는 Veed Lipsync v2 모델입니다. 원본 영상의 입 모양을 새로운 오디오 트랙에 맞춰 재구성합니다 — 원본 영상과 새 오디오 트랙만 있으면 입 모양이 자연스럽게 동기화된 결과 영상을 생성합니다.
Video Utils
FFmpeg
FFmpeg 기반 비디오 유틸리티입니다 (2,000만+ 실행). task 파라미터 하나로 mp4/gif 변환, mp3 오디오 추출, 프레임 zip 추출을 처리합니다. 미디어 파이프라인의 맥가이버 칼입니다.
빠른 시작 — 음성 인식 (Whisper)
오디오 URL 하나로 100개 언어 자동 감지 전사를 받을 수 있습니다 (13크레딧):
curl -X POST https://api.core.today/v1/predictions \
-H "Content-Type: application/json" \
-H "X-API-Key: cdt_your_api_key" \
-d '{
"model": "openai/whisper",
"input": {
"audio": "https://example.com/meeting.mp3",
"language": "auto"
}
}'이미지에서 텍스트 추출(OCR)은 단 1크레딧입니다:
curl -X POST https://api.core.today/v1/predictions \
-H "Content-Type: application/json" \
-H "X-API-Key: cdt_your_api_key" \
-d '{
"model": "abiruyt/text-extract-ocr",
"input": { "image": "https://example.com/receipt.jpg" }
}'모델 선택 가이드
- 음성 전사 — openai/whisper (13크레딧, 표준). 긴 오디오를 빠르게는 incredibly-fast-whisper (13크레딧), 회의록처럼 화자 구분이 필요하면 whisper-diarization (9크레딧)
- OCR·캡션 — 텍스트 추출은 text-extract-ocr (1크레딧), 이미지 캡션·VQA는 blip (1크레딧), 자유 질문은 moondream2 (7크레딧)
- 임베딩 — 다국어 텍스트는 multilingual-e5-large (3크레딧, 한국어 지원 + 고객 DB 벡터 검색 조합), 이미지·텍스트 교차 검색은 clip-features (1크레딧)
- 3D 생성 — 이미지→3D는 trellis (100크레딧, GLB 출력), 프롬프트/이미지 겸용 최고 품질은 hunyuan-3d-3.1 (1,500크레딧, PBR 지원)
- 립싱크·토킹헤드 — 영상 립싱크는 latentsync (285크레딧), 사진 한 장으로 토킹헤드는 sadtalker (120크레딧)
- 콘텐츠 모더레이션 — nsfw_image_detection (1크레딧, UGC 필수 게이트)
- 객체 감지 — 자연어로 찾는 grounding-dino (3크레딧), 감지+캡션+OCR 올인원 florence-2-large (3크레딧)
- 비디오 업스케일·유틸 — real-esrgan-video (1,650크레딧, FHD/2K/4K), 비디오에 AI 사운드는 mmaudio (15크레딧), 변환·추출은 video-utils (7크레딧), 비디오 내용 질문은 cogvlm2-video (36크레딧)