Стоит читать если: вы следите за инвестициями в генеративный AI, интересуетесь развитием моделей мира или работаете с Gen-4.5 через API. Можно пропустить если: вам интересны только операционные апдейты существующих моделей.
$315 миллионов на следующий шаг в симуляции мира
Runway получила 315 миллионов долларов в раунде финансирования Серии E. Эти средства компания направит на предварительное обучение нового поколения «моделей мира», а также на интеграцию их в будущие продукты и отрасли. Раунд возглавил General Atlantic при участии таких инвесторов, как NVIDIA, Adobe Ventures, AllianceBernstein, AMD Ventures, Fidelity Management & Research Company, Mirae Asset, Emphatic Capital, Felicis и Premji Invest. Цель инвестиций — ускорить разработку моделей, которые в Runway считают самой трансформационной технологией нашего времени. Компания планирует активно нанимать сотрудников для достижения этих целей, чтобы обеспечить позитивное влияние на мир.
Gen-4.5 доступен через API
Модель Gen-4.5 теперь доступна для разработчиков через Runway API. Это позволяет генерировать высококачественные видео непосредственно из текста или изображений. Ключевые возможности включают:
- Режимы генерации: «текст в видео» и «изображение в видео».
- Продолжительность видео: от 2 до 10 секунд. Эта интеграция открывает новые возможности для автоматизации создания видеоконтента.
API-доступ к Gen-4.5 расширяет сценарии использования. Разработчики теперь могут создавать видео, предоставляя модели как текстовое описание, так и исходное изображение. Это позволяет, например, автоматизировать создание коротких рекламных роликов или динамичных превью на основе статичных изображений.
Цена вопроса
API Runway использует систему кредитов. Каждый запрос к API стоит определённое количество кредитов, которые можно приобрести по цене $0.01 per credit.
Генерация видео с помощью Gen-4.5 тарифицируется по времени. Стоимость составляет 12 credits per second сгенерированного видео. Это позволяет гибко управлять затратами в зависимости от длительности конечного результата.
Помимо видео, API поддерживает генерацию изображений и аудио. Например, генерация изображения в разрешении 720p стоит 5 credits per 720p image, а для 1080p — 8 credits per 1080p image. Аудиогенерация тарифицируется как 1 credit per 50 characters. Это обеспечивает экономичную работу с различными медиаформатами.
Широкий спектр моделей в API
API Runway предоставляет доступ не только к видеогенерации. Разработчикам доступны модели для широкого спектра задач:
- Генерация видео: кроме Gen-4.5, представлены модели, позволяющие генерировать видео из изображения, из видео и текста/изображения, а также другие опции для выбора под конкретные требования к стилю и скорости генерации.
- Генерация изображений: доступны различные модели для создания изображений.
- Реалтайм аватары: одна из моделей способна генерировать видео и аудио из текстового диалога в реальном времени.
- Аудиогенерация: API включает модели для преобразования текста в аудио, для создания звуков по тексту, а также инструменты для изоляции и дублирования голоса.
- Масштабирование изображений: одна из моделей позволяет улучшать качество изображений, что важно для постобработки сгенерированного контента.
Также за день
- Проблемы с генерацией Nano Banana Pro устранены. Runway сообщила об устранении инцидента, связанного с повышенной частотой сбоев при генерации видео с помощью компонента Nano Banana Pro.
Что это значит
Привлечение такого объема финансирования сигнализирует о растущем интересе инвесторов к фундаментальным AI-моделям, способным понимать и симулировать сложные интерактивные миры. Для инженеров, работающих с генеративным видео, это означает потенциальное появление более продвинутых и мощных инструментов в экосистеме Runway, а также расширение возможностей через API для текущих моделей. API-доступ к разнообразным моделям Runway открывает двери для создания комплексных автоматизированных конвейеров. Разработчики теперь могут интегрировать генерацию видео, изображений и аудио в свои приложения, автоматизируя процессы создания медиаконтента на новом уровне. Прозрачная система тарификации по кредитам позволяет более точно планировать бюджеты для проектов, использующих эти возможности.