Share:
){kind=small}
Jon ist Senior Product Manager für die Video-API von Vonage. Er verfügt über mehr als 20 Jahre Erfahrung in der Kommunikationstechnologie, sowohl als Forscher, der Patente hält, als auch als Produktentwickler. Der gebürtige New Jerseyer liebt es, bei der Entwicklung von APIs mit Kunden auf der ganzen Welt zusammenzuarbeiten, die damit ihre einzigartigen und kreativen Videolösungen entwickeln.
Video-API: Interaktive Sendungen und Aufzeichnungen für Sie besser machen
Lesedauer: 9 Minuten
März 2022 Update: Verdreifachung der interaktiven Teilnehmer auf 15.000, Einführung von Experience Composer und LL-HLS.
Vonage Multiparty-Video erreicht 5.000 - jetzt 15.000 - interaktive Live-Teilnehmer, Verbesserung der interaktiven Übertragungsqualität, der Layouts und der Aufzeichnung
Wir arbeiten weiterhin hart an der Verbesserung interaktiver Übertragungen mit noch mehr Teilnehmer-Streams (jetzt mit bis zu 15.000 ECHTZEIT-Teilnehmern!), einem brandneuen Experience Composer, Live-Streaming mit niedriger Latenz, Full-HD-Übertragungen sowie Verbesserungen des Bildschirm-Layouts und der allgemeinen Videoqualität von interaktiven Übertragungen und Aufzeichnungen.
Die Vonage Video API bietet seit langem die Möglichkeit Video-Layouts für die Ausstrahlung und Aufzeichnung zu erstellen in Echtzeit während der Videokonversation zu erstellen und an eine unbegrenzte Anzahl von Zuschauern mit Live-Streaming und an soziale Plattformen wie Facebook Live oder Twitch.tv zu streamen. Von all den aufregenden neuen Funktionen, die wir in diesem Jahr hinzufügen, ist der Experience Composer - der in der Beta-Phase veröffentlicht wurde - die größte Neuerung, die es unseren Kunden ermöglicht, nicht nur die Videostreams, sondern auch das gesamte Surround-Erlebnis, ihre zweckgebundene Anwendungs-UX, zu gestalten. Springen Sie direkt zum Experience Composer.
Unternehmen, die virtuelle Veranstaltungen anbieten, sind im letzten Jahr wie Pilze aus dem Boden geschossen, da Organisationen intelligente Wege suchten, um Menschen sicher mit Veranstaltungen zu verbinden und ihnen die Teilnahme zu ermöglichen, ob persönlich oder virtuell. Eine virtuelle Veranstaltung kombiniert in der Regel einen Live-Stream mit der Teilnahme des Publikums. Dieses interaktive Element trägt dazu bei, die Möglichkeiten für das Engagement der Mitglieder und die Teilnahme an der Veranstaltung zu maximieren, unabhängig davon, ob die Mitglieder persönlich oder online anwesend sind.
2020 zeigte, dass jeder von der Teilnahme an einer virtuellen Veranstaltung profitieren kann. Fernveranstaltungen können, wenn sie gut durchdacht sind, sehr effektiv sein. Das speziell entwickelte Erlebnis ermöglicht spezialisierte Bühnenumgebungen mit textbasierten Publikumsinteraktionen wie Frage- und Antwortrunden und Abstimmungen, während die Breakout-Räume Networking und einen offenen Ideenaustausch ermöglichen.
Der Übergang zu virtuellen Diensten in den letzten zwei Jahren hat eine rasche digitale Transformation erforderlich gemacht. Virtuelle Rathäuser wurden zu einem der Markenzeichen von Unternehmen und zivilgesellschaftlichen Organisationen, die versuchen, mit ihren Mitarbeitern in Kontakt zu bleiben.
"Mit der Video-API von Vonage sind wir in der Lage, die Nutzer innerhalb unseres Ökosystems zu halten, so dass wir sicherstellen können, dass sowohl die Mitarbeiter der lokalen Behörden als auch die Bürger an Sitzungen teilnehmen, kommunizieren und sichere und leicht zugängliche Informationen von jedem Gerät aus einsehen können." - Steven Garratt, CIVICA Modern.Gov.
Wie auch im übrigen Leben hat die weltweite Pandemie Auswirkungen auf die Nutzung von Video, sei es für Übertragungen oder Aufzeichnungen. Da immer mehr Ihrer Kunden an Videositzungen teilnehmen, wurden diese Sitzungen länger, mit mehr Teilnehmern und mit verschiedenen Geräten - die Aufzeichnungen und Übertragungen mussten ebenfalls Schritt halten! Die Welt, für die unsere Plattform ursprünglich entwickelt wurde, hat sich verändert, und wir haben uns auf die Suche nach den Funktionen gemacht, die am dringendsten benötigt werden, um mitzuhalten.
In einer interaktiven Live-Videoübertragungkann eine große Anzahl von Kunden in Echtzeit kommunizieren, indem sie die Streams der anderen Teilnehmer in der Sitzung veröffentlichen und abonnieren. Mit dem jüngsten Plattform-Update wurde die Anzahl der unterstützten interaktiven Live-Teilnehmer in einer Videoübertragungssitzung auf bis zu 15.000 erhöht - abhängig von der Anzahl der aktiven Publisher in der Sitzung.
Wenn es beispielsweise 1 oder 2 veröffentlichte Streams in der Sitzung gibt, können bis zu 15.000 Teilnehmer diese beiden veröffentlichten Streams in Echtzeit als interaktive Broadcast-Teilnehmer sehen. Wenn es 3 veröffentlichte Streams in der Sitzung gibt, können bis zu 12.000 Teilnehmer alle veröffentlichten Streams sehen, usw. Bei einer interaktiven Übertragung leitet der Vonage Video Router alle veröffentlichten Streams an jeden der abonnierten Teilnehmer weiter, so dass die Anwendungen unabhängig voneinander dynamisch festlegen können, wie das Video jedem der abonnierten Teilnehmer präsentiert wird. Bitte beachten Sie das Entwicklerhandbuch um mehr über die Anzahl der Teilnehmer einer interaktiven Live-Übertragung zu erfahren, die alle Publisher der Sitzung abonnieren können.
Erfahren Sie mehr über die neuen Grenzen und darüber, wie Sie Ihre App zur Unterstützung interaktiver Übertragungen entwickeln können, in unserem Entwicklerhandbuch für interaktive Live-Übertragungen.
Mit einer bereits großen Kapazität von 15.000 Echtzeit-Zuschauern über WebRTC kann Video API Ihre Videositzungen mit einem einzigen zusammengesetzten Stream unter Nutzung von HTTP Live Streaming (HLS) an ein immer größeres Publikum und darüber hinaus an Zuschauer auf Facebook Live, Twitch und YouTube Live bringen.
Live-Streaming kann jedoch nicht nur nützlich sein, um mehr Zuschauer zu erreichen! Ein Vorteil des Streamings besteht darin, dass ein einziger Stream zwar die Flexibilität im Vergleich zu mehreren Streams einschränkt, dafür aber Zuschauer in eingeschränkten Netzen oder auf älteren Geräten erreicht werden können. Der Nachteil des Live-Streamings gegenüber dem Echtzeit-Video besteht darin, dass die Streaming-Zuschauer das Ereignis mit einer leichten Verzögerung erleben, was sie aber nicht zu passiven Teilnehmern macht. Live-Zuschauer sind sehr engagierte Chat-Teilnehmer, beteiligen sich an Umfragen und stellen sogar Fragen. Und mit der Einführung von Low Latency HLS in der Vonage Video API schrumpft die Lücke zwischen live und interaktiv auf einen Wimpernschlag (statt auf einen oder zwei Seufzer). Erfahren Sie mehr über die Übertragung von Video-Chat.
Low Latency HLS (LL-HLS) ist ein Zusatz zum Apple HLS-Standard (und kein neues Streaming-Protokoll), der Latenzzeiten von 4-6 Sekunden ermöglicht, verglichen mit Standard-HLS-Latenzzeiten in der Größenordnung von 15-30 Sekunden.
Der Zusatz "niedrige Latenz" wird von iOS-Geräten nativ unterstützt und ist auch mit Standard-HLS-Playern abwärtskompatibel. Das bedeutet, dass die neuen Manifestdateien so erstellt werden, dass Player, die LL-HLS nicht unterstützen, den neuen Standard ignorieren und die Dateien einfach als Standard-HLS abspielen können.
Ein kurzer Überblick über die beiden Methoden, die Vonage Video API für die Übertragung einsetzt.
| WebRTC, or Interactive Broadcasts | HLS and LL-HLS Live Broadcasts | |
|---|---|---|
| Latency | Presenters interact with audiences and other presenters by subscribing to each other's real-time media and signaling with sub-second latency (for chat, polls, etc.) | Presenters' composed media stream reaches audiences close to real-time. 1) With NewLow-Latency HLS (LL-HLS) the delay is down to 4-6 seconds, barely noticeable for chat and Q&A sync 2) HLS streaming creates latency of around 15+ seconds. Real-time signaling may still be deployed for chat, polls and other interactive application elements |
| Capacity | Video API currently supports any number of on-screen presenters and up to 15,000 audience participants - depending on the number of active publishers in the session (learn more about interactive capacity) | This type of broadcast allows the event to reach an unlimited number of viewers at low latency and stream directly to social platforms such as Facebook Live, YTlive, Twitch and others via RTMP |
| Implementation | Easy to implement with the standard Video API calls; your application controls the look and feel, no extra composition steps needed | Requires stream composition to transmit the desired broadcast experience |
| Flexibility | Easy to bring an audience member "on stage" - just enable them to publish their video and audio streams! | Requires additional coding to bring audience members "on stage" by switching the HLS participants to WebRTC mode |
| Reach | WebRTC is available on all modern browsers as well as on native clients for all major platforms. More on WebRTC browser support. | Greater compatibility across browsers and better video performance over restricted networks and on older devices. More on HLS browser support. |
Unsere Kunden haben schon immer personalisierte Anwendungen mit der Video-API entwickelt. Diese Anwendungen ermöglichen den Teilnehmern oft ein reichhaltiges Benutzer- und Kundenerlebnis, das über die grundlegenden Medienstreams hinausgeht und webnative Komponenten, benutzerdefinierte Layouts, benutzerdefiniertes Anwendungsdesign, Chat-Widgets, Emojis, Whiteboards usw. umfasst. Dieser Trend hat sich aufgrund der Pandemie weiter durchgesetzt, da immer mehr persönliche Erfahrungen wie Lernen, Konferenzen, Treffen und Veranstaltungen online stattfinden.
Experience Composer ermöglicht es Entwicklern, personalisierte Erlebnisse, die von ihren Anwendungen angeboten werden, programmatisch zu erfassen und ihnen einen zusammengesetzten Medienstrom zur Verfügung zu stellen, der ausgestrahlt oder aufgezeichnet werden kann, um ein intensiveres On-Demand-Erlebnis zu bieten.
Stellen Sie sich eine verteilte Gruppe von Wissenschaftlern oder Produktdesignern vor, die eine neue Idee mit Hilfe von Simulationen, Abstimmungstools, Chats und Whiteboards - zusätzlich zu Videos der Präsentatoren - vorstellen und all diese Elemente mit Zehntausenden von engagierten Zuhörern teilen oder die Live-Veranstaltung, so wie sie stattgefunden hat, für die Nachwelt erhalten möchten. Vonage Experience Composer bietet genau das.
Zu den mit dem Experience Composer erfassten Anwendungserlebnissen gehören Videohintergründe und Overlays wie Wasserzeichen, Echtzeit-Zuschauerinteraktion, Chats, Emojis, Whiteboards oder andere programmierte Anwendungsoberflächen. Um mit dem Experience Composer zu beginnen, lesen Sie bitte die Anleitung für Entwickler zur Videokomposition.
Um Ihren Veranstaltungen den Charme eines großen Bildschirms zu verleihen, fügen wir den Vonage Video API-Clients die Unterstützung von Full HD (1080p) hinzu, so dass Sie die höchste heute verfügbare Auflösung an jedes Gerät übertragen können, das dies unterstützt, sowohl in weitergeleiteten als auch in gerouteten Sitzungen und in wenigen bis vielen Live-Übertragungssitzungen.
Die Unterstützung für 1080p wird durch die Verwendung von Simulcast optimiert, so dass mehrere Videoebenen veröffentlicht und an die Clients weitergeleitet werden können, je nach den ihnen zur Verfügung stehenden Bandbreiten.
Als Erweiterung der HLS-Standardübertragungen aktivieren wir die DVR-Funktion, die es den Teilnehmern ermöglicht, HLS-Liveübertragungen anzuhalten, fortzusetzen und zurückzuspulen, wenn diese Funktion aktiviert ist.
Die Funktion ist mit allen HLS-Playern kompatibel und bietet eine 2-stündige Rückspulhistorie für Sendungen. Es ist zu beachten, dass die DVR-Funktion nur für Standard-HLS-Streams aktiviert werden kann und nicht verfügbar ist, wenn LL-HLS aktiv ist.
In einem kürzlichen Plattform-Update haben wir die maximale Anzahl von Video- und Audiostreams erhöht, die in einer einer zusammengesetzten Aufnahme oder einer zusammengesetzten Live-Streaming-Sendung für alle Kunden. Um mehr Videoteilnehmer und Videostreams im zusammengesetzten Layout unterzubringen, haben wir die maximale Anzahl der unterstützten Videostreams von 9 auf 16 erhöht. Ebenso wurde die Anzahl der reinen Audio-Teilnehmer von 9 auf 50 Gesamtteilnehmer in Aufzeichnungen und Übertragungen erhöht.
Unser Best Fit-Layout-Typ wird beispielsweise automatisch zu einem 4x4-Raster-Layout vergrößert, und die Kunden haben die Möglichkeit, es so anzupassen, dass bis zu 16 Videostreams angezeigt werden. Bei Audio werden die ersten 50 Audiostreams, die für die Sitzung veröffentlicht werden, in die Aufzeichnungen und Übertragungen aufgenommen.
Leitfaden für Entwickler: Lernen Sie die besten Praktiken für Übertragung von interaktiven Sitzungen über HLS- und/oder RTMP-Streams.
Die Vonage Video-Aufnahme-API wurde aktualisiert, um die maximale Videoaufzeichnungszeit auf 240 Minuten zu verdoppeln, damit Benutzer längere Meetings und Videositzungen aufzeichnen können. Bei automatischen Aufzeichnungssitzungen wird die Aufzeichnung bei 4 Stunden langen Dateien neu gestartet. Darüber hinaus werden Audiodaten in den aufgezeichneten Dateien und Übertragungen jetzt mit einer höheren Bitrate aufgezeichnet, nämlich als MP4-Dateien, die mit AAC mit 128 KBit/s kodiert sind, was eine höhere Audioqualität für Anwendungsfälle ermöglicht.
Die Video-API ermöglicht den Benutzern die Flexibilität, das das Video-Layout anzupassen und sogar das Video-Layout dynamisch zu ändern, während Aufzeichnung oder Ausstrahlung.
Die neuen Screen Share Layouts priorisieren Screenshare-Streams, so dass die Präsentation oder der freigegebene Inhalt des Nutzers immer Vorrang in der Aufzeichnung oder Übertragung hat. Kunden können diese Funktion nutzen und Layout-Stream-Priorisierungsregeln verwenden, um sicherzustellen, dass Präsentationen, Bildschirmfreigaben und ausgewählte Streams in Aufzeichnungen und Übertragungen Vorrang haben.
Picture-in-Picture, Vertical Presentation and Horizontal Presentation Layouts
Leitfaden für Entwickler: Erfahren Sie, wie Sie eine JS-Anwendung für mehrere Screen-Share-Streams.
Da sich die Menschen an ihre entfernten Umgebungen anpassen, sahen wir auch die Notwendigkeit, vertikale Kompositionen zu unterstützen, die für mobile Geräte im Hochformat geeignet sind. Zu diesem Zweck haben wir die Unterstützung für hochformatige Layout-Auflösungen, hochformatige SD (480x640) und hochformatige HD (720x1280), sowohl für die Aufzeichnung als auch für interaktive Sendungen hinzugefügt. Unsere vordefinierten Layouts wurden für diese Hochformatausrichtungen optimiert und passen sich automatisch an die Ansichten auf mobilen Geräten an.
Portrait Layout
Schließlich haben wir auch unsere Videoplattform mit einer Reihe von Optimierungen an unseren Echtzeit-Cloud-Composition-Servern aktualisiert, um die Videosynchronisation und die Widerstandsfähigkeit von in Echtzeit komponierten Aufnahmen und Sendungen unter schlechten Netzwerkbedingungen zu verbessern. Durch diese Verbesserungen wird sichergestellt, dass Sitzungen ordnungsgemäß aufgezeichnet oder live gestreamt werden, selbst wenn sich die Herausgeber in ungünstigen Netzwerkbedingungen befinden. (Erfahren Sie mehr über unsere Arbeit an Qualitätsverbesserungen und einen vergleichenden Benchmark VS unserer Top-Konkurrenten).
Wenn es um Videoübertragungen und -aufzeichnungen geht, können datenschutz- und sicherheitsrelevante Funktionen erforderlich sein. Vonage Video API verfügt bereits über eine permanente Verschlüsselung und andere Funktionen zum Schutz der Nutzerdaten. Mit Verschlüsselungkönnen Kunden sicherstellen, dass ihre aufgezeichneten Daten sicher gespeichert werden können, um die Privatsphäre der Nutzer zu schützen und Vorschriften wie GDPR einzuhalten. Erfahren Sie mehr über Vonage Video-API-Datenschutzarchitektur und wie sie Ihre Nutzer und Ihre Inhalte schützt.
Wir freuen uns sehr, dass wir unseren Kunden die Möglichkeit bieten können, verbesserte Übertragungs- und Aufzeichnungsfunktionen zu nutzen, damit sie mit den heutigen Kommunikationsanforderungen Schritt halten können. Die Funktionen sind bereits verfügbar in der Vonage Video API Standard- und Enterprise-Umgebungen zur Verfügung, so dass Kunden sofortigen Zugang zu diesen verbesserten Funktionen erhalten können.
Wenn Ihnen dieses Video-API-Update gefallen hat, sehen Sie sich unsere neue Video-Expressund warum es so genial ist!
Share:
Jon ist Senior Product Manager für die Video-API von Vonage. Er verfügt über mehr als 20 Jahre Erfahrung in der Kommunikationstechnologie, sowohl als Forscher, der Patente hält, als auch als Produktentwickler. Der gebürtige New Jerseyer liebt es, bei der Entwicklung von APIs mit Kunden auf der ganzen Welt zusammenzuarbeiten, die damit ihre einzigartigen und kreativen Videolösungen entwickeln.