Viquipèdia

Runway

empresa de recerca nord-americana

Runway AI, Inc. (també coneguda com a Runway i RunwayML) és una empresa nord-americana amb seu a la ciutat de Nova York especialitzada en investigació i tecnologies d'intel·ligència artificial generativa. L'empresa es centra principalment en la creació de productes i models per generar vídeos, imatges i diversos continguts multimèdia. És més notable pel desenvolupament dels models comercials d'IA generativa de text a vídeo i vídeo Gen-1, Gen-2,[1] Gen-3 Alpha i Gen-4.[2]

Infotaula d'organitzacióRunway
Dades
Tipussocietat Modifica el valor a Wikidata
Indústriaintel·ligència artificial, aprenentatge automàtic i desenvolupament de programari Modifica el valor a Wikidata
Forma jurídicaempresa privada Modifica el valor a Wikidata
Història
Creació2018
Governança corporativa
Seu
Lloc webrunwayml.com Modifica el valor a Wikidata

Les eines i els models d'IA de Runway s'han utilitzat en pel·lícules com Tot alhora a tot arreu,[3] en vídeos musicals per a artistes com A$AP Rocky,[4] Kanye West,[5] Brockhampton i The Dandy Warhols, i en l'edició de programes de televisió com The Late Show with Stephen Colbert Top Gear.[6][7]

Història

modifica

L'empresa va ser fundada l'any 2018 pels xilens Cristóbal Valenzuela, Alejandro Matamala i el grec Anastasis Germanidis després que es coneguessin a la New York University Tisch School of the Arts.[8] L'empresa va recaptar 2 milions de dòlars el 2018 per construir una plataforma per desplegar models d'aprenentatge automàtic a escala dins d'aplicacions multimèdia.

El desembre de 2020, Runway va recaptar 8,5 milions de dòlars EUA[9] en una ronda de finançament de la Sèrie A.

El desembre de 2021, la companyia va recaptar 35 milions de dòlars en una ronda de finançament de la Sèrie B.[10]

L'agost de 2022 la companyia va publicar conjuntament una versió millorada del seu model de difusió latent anomenada Stable Diffusion juntament amb el Grup CompVis de la Universitat de Múnic i una donació de càlcul per part de Stability AI.[11][12]

El 21 de desembre de 2022 Runway va recaptar 50 milions de dòlars[13] en una ronda de la Sèrie C. Seguida d'una ronda d'extensió de la Sèrie C de 141 milions de dòlars el juny de 2023 amb una valoració de 1.500 milions de dòlars[14] de Google, Nvidia i Salesforce[15] per crear models d'IA multimodal fonamentals per a la generació de contingut que s'utilitzaran en pel·lícules i producció de vídeo.[16][17]

El febrer de 2023, Runway va llançar Gen-1 i Gen-2 el primer model de generació de vídeo a vídeo i text a vídeo bàsic comercial i disponible públicament[18] accessible mitjançant una interfície web senzilla.

El juny de 2023, Runway va ser seleccionada com una de les 100 empreses més influents del món per la revista Time.

Serveis i tecnologies

modifica

Runway se centra en IA generativa per a vídeo, mitjans i art. L'empresa se centra a desenvolupar una tecnologia de model bàsica patentada que els professionals de la realització de cinema, la postproducció, la publicitat, l'edició i els efectes visuals poden utilitzar. A més, Runway ofereix una aplicació per a iOS adreçada als consumidors.[19]

El producte Runway és accessible mitjançant una plataforma web i una API com a servei gestionat.

Stable diffusion

modifica

Stable Diffusion és un model d'aprenentatge profund de codi obert i text a imatge publicat el 2022 basat en el document original High-Resolution Image Synthesis with Latent Diffusion Models publicat per Runway i el Grup CompVis de la Universitat de Múnic.[20][21] La difusió estable s'utilitza principalment per crear imatges condicionades a descripcions de text.

Gen-1

modifica

Gen-1 és un sistema d'IA generativa de vídeo a vídeo que sintetitza nous vídeos aplicant la composició i l'estil d'una imatge o una indicació de text a l'estructura d'un vídeo font. El model es va llançar el febrer de 2023. El model Gen-1 va ser entrenat i desenvolupat per Runway basant-se en el document original Structure and Content-Guided Video Synthesis with Diffusion Models from Runway Research.[22] Gen-1 és un exemple d'intel·ligència artificial generativa per a la creació de vídeo.

Gen-2

modifica

Gen-2 és un sistema d'IA multimodal que pot generar vídeos nous amb text, imatges o clips de vídeo. El model és una continuació de Gen-1 i inclou una modalitat per generar vídeo condicionat a text. Gen-2 és un dels primers models de text a vídeo disponibles comercialment.[23][24][25][26]

Gen-3 Alfa

modifica

Gen-3 Alpha és el primer d'una sèrie de models entrenats per Runway en una nova infraestructura construïda per a l'entrenament multimodal a gran escala. És una millora important en la fidelitat, la coherència i el moviment respecte a la Gen-2, i un pas cap a la construcció de models mundials generals.

Les dades d'entrenament per a Gen-3 s'han obtingut de milers de vídeos de YouTube i de pel·lícules potencialment piratejades. Un antic empleat de Runway va al·legar a 404 Media que un esforç de tota l'empresa era compilar vídeos en fulls de càlcul, que després es baixaven mitjançant youtube-dl a través de servidors intermediaris per evitar ser bloquejats per YouTube. En proves, 404 Media va descobrir que els noms dels youtubers generarien vídeos amb els seus respectius estils.

Gen-4

modifica

El 31 de març de 2025, Runway va llançar el seu últim model insígnia, Gen-4.

Gen-4 capaç de generar amb precisió personatges, ubicacions i objectes consistents a través de les escenes. Només cal definir l'aspecte i la sensació i el model mantindrà entorns mundials coherents alhora que conserva l'estil, l'estat d'ànim i els elements cinematogràfics distintius de cada fotograma. A continuació, es poden regenerar aquests elements des de múltiples perspectives i posicions dins de les escenes.[27]

Gen-4 pot utilitzar referències visuals, combinades amb instruccions, per crear imatges i vídeos nous utilitzant estils, temes, ubicacions i molt més coherents. Oferint una llibertat creativa sense precedents per explicar històries.[28]

Runway Gen-4 permet generar personatges consistents en infinites condicions d'il·luminació, ubicacions i tractaments. Tot amb només una imatge de referència dels personatges.[29]

Gen-4 destaca per la seva capacitat de generar vídeos altament dinàmics amb moviment realista, així com coherència de subjecte, objecte i estil amb una adherència ràpida superior i la millor comprensió del món.[30]

Referències

modifica
  1. ↑ Vincent, James. «Text-to-video AI inches closer as startup Runway announces new model» (en anglès americà). The Verge, 20-03-2023. [Consulta: 15 setembre 2023].
  2. ↑ «Introducing Runway Gen-4» (en anglès americà). runwayml.com, 31-03-2025. [Consulta: 31 març 2025].
  3. ↑ «How director and editor Evan Halleck uses Runway for films, music videos, and commercials» (en anglès americà). Runway. Arxivat de l'original el 2024-03-01. [Consulta: 1r març 2024].
  4. ↑ «Distorting Reality with Dan Streit» (en anglès americà). Runway. Arxivat de l'original el 2024-03-01. [Consulta: 1r març 2024].
  5. ↑ Cowen, Trace William. «Kanye West Shares Unsettling Video for "Vultures (Havoc Version)" Ahead of Ty Dolla Sign Collab Album Release» (en anglès americà). Complex. [Consulta: 1r març 2024].
  6. ↑ «How Runway took The Late Show edits from five hours to five minutes» (en anglès americà). Runway. Arxivat de l'original el 2024-03-01. [Consulta: 1r març 2024].
  7. ↑ «How Drew Emery uses Runway to edit content for Top Gear America & Cooper's Bar» (en anglès americà). Runway. Arxivat de l'original el 2024-03-01. [Consulta: 1r març 2024].
  8. ↑ Black, Julia. «'Not Everyone Is Trying to Build God': Runway CEO Cristóbal Valenzuela Tries to Dampen the Doomerism» (en anglès). The Information. [Consulta: 18 setembre 2023].
  9. ↑ «RunwayML raises $8.5 million for its AI-powered media creation tools» (en anglès americà). VentureBeat, 16-12-2020. [Consulta: 15 setembre 2023].
  10. ↑ «Runway raises $35M Series B | Runway Blog» (en anglès americà). Runway. Arxivat de l'original el 2023-11-07. [Consulta: 7 novembre 2023].
  11. ↑ Cai, Kenrick. «The AI Founder Taking Credit For Stable Diffusion's Success Has A History Of Exaggeration» (en anglès). Forbes. [Consulta: 15 setembre 2023].
  12. ↑ «The original startup behind Stable Diffusion has launched a generative AI for video» (en anglès). MIT Technology Review. [Consulta: 18 setembre 2023].
  13. ↑ Cai, Kenrick. «Runway Raises $50 Million At $500 Million Valuation As Generative AI Craze Continues» (en anglès). Forbes. [Consulta: 15 setembre 2023].
  14. ↑ Wiggers, Kyle. «Runway, a startup building generative AI for content creators, raises $141M» (en anglès americà). TechCrunch, 29-06-2023. [Consulta: 15 setembre 2023].
  15. ↑ «Google Invests in AI Startup Runway to Wrest Cloud Business From AWS» (en anglès). The Information. [Consulta: 15 setembre 2023].
  16. ↑ Black, Julia. «'Not Everyone Is Trying to Build God': Runway CEO Cristóbal Valenzuela Tries to Dampen the Doomerism» (en anglès). The Information. [Consulta: 15 setembre 2023].
  17. ↑ «Featured interview: Runway AI CEO Chris Valenzuela - First Move with Julia Chatterley - Podcast on CNN Audio» (en anglès americà). CNN. [Consulta: 18 setembre 2023].
  18. ↑ Vincent, James. «Text-to-video AI inches closer as startup Runway announces new model» (en anglès americà). The Verge, 20-03-2023. [Consulta: 15 setembre 2023].
  19. ↑ Vincent, James. «Create generative AI video-to-video right from your phone with Runway's iOS app» (en anglès). The Verge, 24-04-2023. [Consulta: 1r març 2024].
  20. ↑ «Stable Diffusion developer Runway raises $50M to create AI multimedia tools» (en anglès americà). SiliconANGLE, 06-12-2022. [Consulta: 18 setembre 2023].
  21. ↑ «The original startup behind Stable Diffusion has launched a generative AI for video» (en anglès). MIT Technology Review. [Consulta: 18 setembre 2023].
  22. ↑ «Gen-1 by Runway» (en anglès americà). Runway. [Consulta: 18 setembre 2023].
  23. ↑ «Text to Video Generative AI Is Finally Here and It's Weird as Hell» (en anglès). Gizmodo, 22-03-2023. [Consulta: 18 setembre 2023].
  24. ↑ Wiggers, Kyle. «Runway's Gen-2 shows the limitations of today's text-to-video tech» (en anglès americà). TechCrunch, 09-06-2023. [Consulta: 18 setembre 2023].
  25. ↑ Avram Piltch. «Runway's Powerful Gen-2 Text-to-Video Tool Now Available to Everyone for Free» (en anglès). Tom's Hardware, 08-06-2023. [Consulta: 18 setembre 2023].
  26. ↑ Vincent, James. «Text-to-video AI inches closer as startup Runway announces new model» (en anglès americà). The Verge, 20-03-2023. [Consulta: 18 setembre 2023].
  27. ↑ «Introducing Runway Gen-4» (en anglès americà). runwayml.com, 31-03-2025. [Consulta: 31 març 2025].
  28. ↑ «Introducing Runway Gen-4» (en anglès americà). runwayml.com, 31-03-2025. [Consulta: 31 març 2025].
  29. ↑ «Introducing Runway Gen-4» (en anglès americà). runwayml.com, 31-03-2025. [Consulta: 31 març 2025].
  30. ↑ «Introducing Runway Gen-4» (en anglès americà). runwayml.com, 31-03-2025. [Consulta: 31 març 2025].
Obtingut de «https://ca.wikipedia.org/w/index.php?title=Runway&oldid=36945056»