Clips.
긴 녹음을 자막에서 순위별 쇼츠와 하이라이트로 바꾸는 빠른 클립 선별 모델. iPhone이나 Mac에서 온디바이스로 실행.
짧은 영상과 하이라이트 클립을 만듭니다.
25분짜리 녹음에서 Clips는 iPhone 17 Pro에서 12개의 클립을 9초에 순위 매깁니다. 바로 공유할 수 있는 순위별 클립 모음을 만드세요.
Clips는 자막을 분석해 가장 좋은 순간과 이야기를 찾아, 순위 매긴 클립 목록을 돌려줍니다. 이 순위별 선택으로 하이라이트 릴이나 요약 영상을 만드세요. 추론 비용 없이 직접 클립 엔진이나 자동 편집을 구축할 수 있습니다.
업로드가 없으므로, 지난 콘텐츠 전체를 클립으로 만드는 비용이 영상 하나를 클립으로 만드는 것과 같습니다. 길이 제한도, 최대 문맥 크기도 없습니다. 짧은 영상이나 오디오 파일에 Clips를 써서 몇 초 만에 요약을 얻거나, 한 시간짜리 녹음도 제약 없이 처리하세요.
25분 영상을 9초에 클립으로.
Clips는 404문장, 25분짜리 자막을 iPhone 17 Pro에서 9.19초에 12개 클립으로 순위 매깁니다. 기기에서요.
기기에서 측정, CPU와 Neural Engine에 고정
| 자막 | iPhone 17 Pro | iPhone 15 Pro |
|---|---|---|
| 25-minute video, 12 clips | 9.19s | 10.22s |
| Per candidate, encoder only | 2.78ms | 3.13ms |
출시된 Core ML 빌드에서의 내부 측정. 클립 경계가 알려진 약점이고, 한 순간 근처의 선택은 작은 점수 변화에도 민감하므로, 런타임이나 양자화가 다르면 다르지만 비슷한 집합이 나옵니다.
팟캐스트 에피소드에서 쇼츠 만들기
한 시간짜리 에피소드의 가장 좋은 순간 다섯 개를, 내보내기가 끝나기도 전에 순위 매긴 쇼츠로 게시하세요. 단 몇 초 만에 기기에서 바로요.
긴 테이크 자동 편집
두서없는 25분짜리 테이크를 영상 편집기에서 짜임새 있는 컷으로 바꿉니다. 영상에서 가장 중요한 대목만 담은 하이라이트 릴을, 검토하거나 게시할 수 있는 상태로 얻으세요.
지난 콘텐츠 클립 만들기
녹화된 강연이나 스트림 라이브러리를 Mac에서 밤새 Clips로 처리하세요. 업로드도 없고 영상당 요금도 없으므로, 천 개의 영상이 하나와 같은 비용입니다.
백 개 언어의 하이라이트
스페인어, 포르투갈어, 독일어로 출시하는 크리에이터 앱이 세 언어 모두에서 같은 클립 선별을 얻습니다. 하나의 모델이 자막에서 백 개 언어를 기기에서 처리합니다.
영감
Clips(으)로 만들 아이디어. 프롬프트를 코딩 에이전트에 복사해 시작하세요.
Turn any recording into a ranked set of shorts.
Build a feature that takes a recording's transcript and uses Desert Ant's Clips to rank the best non-overlapping moments, then exports them as vertical shorts. On-device, so a back catalog costs the same as one video. Build it with the Desert Ant SDK. Clips (Swift). Install and API: https://desertant.com/docs/clips/. Install: SwiftPM desert-ant-core. SDK source: https://github.com/Desert-Ant-Labs/desert-ant-core. Machine-readable catalog of every model and SDK: https://desertant.com/llms.txt.
Generate a highlight reel from a long stream or talk.
Build a 'make highlights' button that runs Desert Ant's Clips over a talk or stream transcript to pick the strongest moments and assemble a highlight reel, ranked best first. Build it with the Desert Ant SDK. Clips (Swift). Install and API: https://desertant.com/docs/clips/. Install: SwiftPM desert-ant-core. SDK source: https://github.com/Desert-Ant-Labs/desert-ant-core. Machine-readable catalog of every model and SDK: https://desertant.com/llms.txt.
Produce a rough auto-edit from a rambling take.
Build an auto-edit that uses Desert Ant's Clips to select the clips worth keeping from a long, rambling recording and lays them on a timeline for review. Control how tight the cut is with the percentile threshold. Build it with the Desert Ant SDK. Clips (Swift). Install and API: https://desertant.com/docs/clips/. Install: SwiftPM desert-ant-core. SDK source: https://github.com/Desert-Ant-Labs/desert-ant-core. Machine-readable catalog of every model and SDK: https://desertant.com/llms.txt.
Clip a whole back catalog of videos overnight on a Mac.
Build a batch job that runs Desert Ant's Clips over an archive of recorded talks or streams on a Mac, exporting ranked clips for each. Nothing uploaded, no per-video bill. Build it with the Desert Ant SDK. Clips (Swift). Install and API: https://desertant.com/docs/clips/. Install: SwiftPM desert-ant-core. SDK source: https://github.com/Desert-Ant-Labs/desert-ant-core. Machine-readable catalog of every model and SDK: https://desertant.com/llms.txt.
Build a full podcast studio: transcribe, clip, and title on the device.
Build a podcast tool that runs Desert Ant's Voz to transcribe an episode, Clips to pick the best moments as shorts, and Title to name and describe each clip, all on-device with no per-minute or per-token bill. Build it with the Desert Ant SDK. Voz (Swift). Install and API: https://desertant.com/docs/voz/. Clips (Swift). Install and API: https://desertant.com/docs/clips/. Title (Swift). Install and API: https://desertant.com/docs/title/. SDK source: https://github.com/Desert-Ant-Labs/desert-ant-core. Machine-readable catalog of every model and SDK: https://desertant.com/llms.txt.
Record, clean, transcribe, and clip: a whole creator pipeline, offline.
Build a creator pipeline: Desert Ant's Clear cleans the recording, Voz transcribes it, and Clips pulls the shorts, all on the device so a full episode never touches a server. Build it with the Desert Ant SDK. Clear (Swift, Kotlin, JavaScript / TypeScript). Install and API: https://desertant.com/docs/clear/. Voz (Swift). Install and API: https://desertant.com/docs/voz/. Clips (Swift). Install and API: https://desertant.com/docs/clips/. SDK source: https://github.com/Desert-Ant-Labs/desert-ant-core. Machine-readable catalog of every model and SDK: https://desertant.com/llms.txt.
Turn a webinar into teaser clips for social.
Transcribe a webinar with Desert Ant's Voz and use Clips to pull the strongest moments as teaser clips for social, on-device. Build it with the Desert Ant SDK. Voz (Swift). Install and API: https://desertant.com/docs/voz/. Clips (Swift). Install and API: https://desertant.com/docs/clips/. SDK source: https://github.com/Desert-Ant-Labs/desert-ant-core. Machine-readable catalog of every model and SDK: https://desertant.com/llms.txt.
Build a fully local clipping engine: transcribe, clip, title, caption.
Chain Desert Ant's Voz (transcribe with word timestamps), Clips (select the moments), and Title (name each clip) into a clipping engine that runs entirely on-device on iPhone or Mac, with word-accurate captions from Voz and no per-minute cost. Build it with the Desert Ant SDK. Voz (Swift). Install and API: https://desertant.com/docs/voz/. Clips (Swift). Install and API: https://desertant.com/docs/clips/. Title (Swift). Install and API: https://desertant.com/docs/title/. SDK source: https://github.com/Desert-Ant-Labs/desert-ant-core. Machine-readable catalog of every model and SDK: https://desertant.com/llms.txt.
모델이 하는 일
- 자막에서 겹치지 않는 최고의 순간들을 순위 매깁니다: 각 클립에 점수가 매겨지고 순위가 붙습니다. 영상이나 오디오 녹음에서 가장 좋은 문장을 골라, 강력한 선택이나 남다른 편집 기능을 만드세요.
- 선택을 제어하세요. 원점수가 아니라
percentile로 기준을 잡습니다: 0.8 기준은 평균 5개 클립으로 영상의 17%를 담고(하이라이트), 0.3 기준은 평균 32개 클립으로 74%를 담습니다(자동 편집). - 문맥 창이 없습니다: 문장이 배치 단위로 선택기를 지나고 각 후보가 독립적으로 점수 매겨지므로, 우회할 문맥 제한이 없습니다. 긴 영상이나 오디오 자막에서도 문제없이 클립을 만드세요.
- 더 빠르고, 더 낫고, 더 저렴합니다. 404문장, 25분짜리 자막에서 iPhone 17 Pro는 12개 클립을 9.19초에, iPhone 15 Pro는 10.22초에 돌려줍니다; 인코더만으로 후보당 2.78밀리초.
- 다국어 지원. 278M 파라미터의 xlm-roberta-base 트렁크 하나로 100개 언어: Apple에서는 284MB 단일 int8 Core ML 패키지.
- Clips를 우리 Title 모델과 짝지으면 제목과 설명을 생성해, 완전히 로컬에서 도는 클립 엔진을 만들 수 있습니다.
예제 앱
Clipper
Voz, Clips, Title로 제작
Generate short clips from a video podcast or a long recording, fully on device. A macOS app and a command-line tool over the same core.
Voz transcribes with a time on every word, Clips ranks the best spans, and Title writes a title and description for each.
macOS 26 or later, Apple Silicon
brew tap desert-ant-labs/tap
brew install --cask clipper시작하기
클립 선별을(를) 몇 줄의 코드로 iOS or macOS 앱에 추가하세요. Clips 문서.
// Swift Package Manager
.package(url: "https://github.com/Desert-Ant-Labs/desert-ant-core.git", from: "3.1.0")
// target dependency
.product(name: "Clips", package: "desert-ant-core")import Clips
let clips = Clips()
let moments = try await clips.clips(in: sentences) // [Clip], best first
for clip in moments {
print(clip.text, clip.start, clip.end, clip.percentile)
}Add Clips from Desert Ant Labs to this Swift project (iOS, macOS). What it does: 어떤 녹음이든 온디바이스로 만드는 쇼츠와 하이라이트. SDK: Swift (iOS, macOS) Repo: https://github.com/Desert-Ant-Labs/desert-ant-core#readme // Swift Package Manager .package(url: "https://github.com/Desert-Ant-Labs/desert-ant-core.git", from: "3.1.0") // target dependency .product(name: "Clips", package: "desert-ant-core") Reference: - Model page: https://desertant.com/models/clips/ - Full catalog and other models: https://desertant.com/llms.txt Add the SDK, then follow its README for the exact API and current version. Do not invent API names or method signatures; confirm them against the README.
사양
- 속도
- iPhone 17 Pro에서 25분짜리 자막을 9.19초에, iPhone 15 Pro에서 10.22초에
- 온디바이스 크기
- 284MB int8 Core ML (Apple); Android, Linux, Windows용 283MB LiteRT 파일 두 개
- 언어
- 100
- 모델
- xlm-roberta-base 트렁크, 278M 파라미터, 헤드 네 개: 현저성, 시작, 종료, 클립 점수
- 플랫폼
- iOS 18, macOS 15, tvOS 18, visionOS 2 (Core ML). Android, Linux, Windows LiteRT 파일은 공개되어 있으나 아직 우리 SDK에서 지원되지 않습니다.
클립의 경계가 약점입니다. 클립이 앞 문장에 지시 대상이 있는 대명사로 시작하거나, 두 주제를 뭉치거나, 결정적 대목 전에 끊기거나, 광고 낭독을 삼킬 수 있습니다.
짧은 영상은 클립이 적게 나오고, 세 문장 미만의 자막은 하나도 나오지 않으며, 클립 수 제한은 상한이지 할당량이 아닙니다. 비라틴 문자 체계는 검증이 부족하고, Linux와 Windows 파일은 아직 우리 SDK에서 지원되지 않습니다.
자주 묻는 질문
Clips은(는) 무엇인가요?
긴 녹음을 자막에서 순위별 쇼츠와 하이라이트로 바꾸는 빠른 클립 선별 모델. iPhone이나 Mac에서 온디바이스로 실행.
Clips은(는) 온디바이스로 실행되나요?
네. Clips은(는) 서버 호출 없이 기기에서 실행되므로, 데이터는 사용자의 기기에 그대로 남습니다.
Clips은(는) 어떤 플랫폼을 지원하나요?
Clips은(는) Swift용 네이티브 온디바이스 SDK로 제공됩니다.
Clips의 비용은 얼마인가요?
모든 모델은 SDK당 월간 활성 기기 10만 대까지 무료입니다. 사용자당 추론은 무제한입니다. 맞춤 라이선스는 문의하기 바랍니다.
Clips은(는) 얼마나 정확하고 빠른가요?
Clips는 404문장, 25분짜리 자막을 iPhone 17 Pro에서 9.19초에 12개 클립으로 순위 매깁니다. 기기에서요.