GPAC Updates&Co

GPAC 0.2.1 released

http://gpac.sourceforge.net/news.php

Zitat

October 15th 2004 - GPAC Release 0.2.1
GPAC is on the road to nowhere - Come on inside. Many new things in this release:

Stable 3D renderer supporting all common nodes between MPEG-4 and VRML 97. Overview:
Loads of 2D & 3D graphic primitives (and extruded text through hardcoded protos
MPEG-4 special nodes: Layer2D, Layer3D, CompositeTexture2D and CompositeTexture3D
Lighting, texture mapping, viewpoints & navigation
User interactions supported in main scene, layers and composite textures
User navigation supported in main scene and layer3D
Collision detection & gravity - still buggy, you may walk through walls or get stuck on the ground like "Le Passe Muraille"...
Support for BT/XMTA/WRL and basic SWF in the players.
Good VRML support, including the powerfull CreateVrmlFromString (but no compressed wrl support).
Much more stable SDL/Linux support.
Faster and more reliable javascript support.
MP4Box now supports >2GB files (avi importer should also).

Alles anzeigen

GPAC beinhaltet MP4Box zum erstellen von Mpeg 4 Conntent und Osmo4 zum abspielen.

MP4Box : Zum erstellen von interaktiven Mpeg 4 Content (wie bereits erwähnt).
Osmo4 : Um Interaktive Mpeg 4 Files ab zu spielen.

Hast du schon mal einen Blick auf Bonds MP4 FAQ geworfen.

Hier findet man ein Beispiel für ein interaktives Mpeg 4 File:
http://multimedialab.elis.ugent.be/h2ocean/movie.asp

Wenn man selbst interaktive Mpeg 4 Files erstellen will, sind die BT Scribts von hier:HowTo create DVD-like Menus in MP4 - MP4Menu , MP4Menu Profile 2 released - playable in DirectShow, Quicktime and Realplayer!, Download the GPAC Regression Test Suite (Version 0.2.1) und Download the MPEG-4 Tutorial for offline browsing ganz hilfreich.

Bei Fragen zu einzelnen nodes kann man ganz einfach "MP4Box -node <node_you_need_help>" eingeben umInformationen zu erhalten:

MP4Box -node TouchSensor
Node Syntax:
TouchSensor {
        exposedField SFBool enabled TRUE
        eventOut SFVec3f hitNormal_changed 0 0 0
        eventOut SFVec3f hitPoint_changed 0 0 0
        eventOut SFVec2f hitTexCoord_changed 0 0
        eventOut SFBool isActive FALSE
        eventOut SFBool isOver FALSE
        eventOut SFTime touchTime 0
}

Wenn du gpac nicht selbst kompilieren willst würde ich einfach ein paar Tage warten bis celticdruid das getan hat und du hier: http://celticdruid.no-ip.com/xvid/gpac/ eine aktuelle gpac Version findest.

Zitat von LigH

Erinnert mich verdächtig an VRML-Syntax...

Das siehst du richtig .

Zitat

http://www.iis.fraunhofer.de/amm/download/bifs_de.pdf
Binary Format for Scenes
MPEG-4 BIFS Binary Format for Scenes MPEG-4 ist ein Standard zur objektbasierten Beschreibung und Codierung von herkömmlichen und interaktiven multimedialen Inhalten. Anders als bei MPEG-1/-2 können in MPEG-4 so genannte »Szenen« definiert werden, die aus mehreren audiovisuellen Objekten bestehen. Die einzelnen Multimedia-Objekte werden getrennt codiert und übertragen und bei der Wiedergabe wieder zur Szene zusammengesetzt. Zur Beschreibung des Szenenaufbaus dient eine auf der Virtual Reality Modeling Language (VRML97) aufbauende Sprache. Sie wird für die Übertragung auf Binärcode abgebildet und daher BIFS (BInary Format for Scenes) genannt. Eine BIFSSzenenbeschreibung enthält Informationen, wo und wann multimediale Objekte darzustellen bzw. abzuspielen sind, über die Beziehungen der Objekte zueinander sowie über Möglichkeiten zur Benutzerinteraktion. BIFS für 3D-Audio Zur auditiven Beschreibung von Räumen und Szenen bietet BIFS das so genannte AudioBIFS. Es eröffnet unter anderem Möglichkeiten, die Raumakustik der Szene zu beschreiben, virtuelle Schallquellen zu positionieren und zu beschreiben, sowie Audioquellen zu mischen. Die endgültige Zusammensetzung findet auf der Wiedergabeseite nach den Vorgaben der Szenenbeschreibung statt. Daher ist diese Form der Codierung unabhängig vom Wiedergabesystem (Stereo, 5.1, Wellenfeldsynthese, etc.). Auch eine akustische Raumsimulation ist in MPEG-4 enthalten, wobei die Raumakustik entweder aus der Szenengeometrie und den akustischen Materialeigenschaften der 3D-Objekte ermittelt oder durch wahrnehmungsorientierte Parameter beschrieben wird. Einmal erstellte Audio-Objekte sind ohne weitere Bearbeitung in verschiedenen Szenen wiederverwendbar. BIFS ermöglicht

Eine Scene von einem simplen mit mpeg4ip/MP4Box erzeugten (1 Audio Stream/1 Video Stream) Mpeg4 File sieht zum Beispiel so aus:

OrderedGroup { 
  children [
    Sound2D { 
      source AudioSource { 
	url [ '10' ]
      }
    }
    Shape { 
      appearance Appearance { 
	texture MovieTexture { 
	  url [ '20' ]
	}
      }
      geometry Bitmap { 
      }
    }
  ]
}

Ja basiert auf MP4MENU (Profile 1)/MP4MENU (Profile 2). Ist nicht so ganz sauber, bräuchte vielleicht noch etwas Überarbeitung, war aber auch nur ein schneller Test. Im CVS von GPAC ist momentan wieder hevay development "^^ . Bin mal auf "SVGGen" gespannt . Wenn man SVG Files nach BIFS konvertieren kann gibt das einem schon mehr Gestaltungsmöglichkeiten .
Erstellen kann man Scalable Vector Graphics ja unter anderem mit http://www.inkscape.org/ . Das ist auch ein nettes einfaches Beispiel : IBMSVGLion.mp4

MP4Box (GPAC dev 0.2.3 CVS) unterstützt jetzt auch den direkten import von aac Audio :

MP4Box -import audio.aac output.mp4

MP4Box -import audio_HE-aac.aac -sbr output.mp4

HE-aac Audio kann man unter anderem mit dem (Helix)Poducer erstellen siehe dazu auch: http://forum.gleitz.info/showthread.php?t=18277 [Edit] http://forum.doom9.org/showthread.php?s=&threadid=83828 [/Edit]

Man erhält dann allerdings ein rm File mit HE-aac Audio. Mit mkvtoolnix kann man darus allerdings ein aac File machen.

mkvmerge -o output.mkv --aac-is-sbr 0 -a 0 output.rm

mkvextract tracks output.mkv 1:audio.aac

Leider unterstützt der (Helix)Poducer kein Multichannel (5.1) .Kennt wer einen anderen frei verfügbaren HE-aac Encoder der unter Linux/Windows läuft der Multichannel unterstützt ?

Eine entsprechende Windowsbinary für GPAC findet man hier: http://celticdruid.no-ip.com/xvid/gpac/dev/ ( GPAC Framework 0.2.3 2004.11.20.exe / extras2004.11.20.7z )

Wenn ich das HE-aac_audio.mp4 File mit der Kombination 3ivX Splitter / CoreAAC öffne zeigt dieser mir allerdings nur an das es sich um AAC LC handeln würde(siehe Screenshot). Auch stimmt die Bitrate nicht. Im Vergleich dazu was MP4UI über das File sagt.(siehe Screenshot). Von MPBox erhalte ich natürlich diese Information:

Track # 1 Info - TrackID 101 - TimeScale 22050 - Duration 4271104
Media Type "soun" - Media Sub Type "MPEG" - 4171 samples
MPEG-4 Config: Audio Stream - ObjectTypeIndication 64
MPEG-4 Audio SBR - 2 Channels - SampleRate 22050
Synchronized on stream 1

Kann jemand mit einem neueren Version des 3ivX Splitters vielleicht mal ausprobieren ob da auch noch AAC LC mit falscher Bitrate angezeigt wird ? Oder ist die Schuld bei CoreAAC zu suchen. Mein AAC Decoder von 3ivX ist leider schon abgelaufen.

Zitat von bond

meines wissens nach sind die einzigen he-aac encoder derzeit von real und nero erhaeltlich (nero enkodiert direkt in .mp4, ich denke der helixproducer kann das ebenso)

Kenne mich mit dem Helixproducer leider nicht so aus. Bisher bin ich den Umweg über rm-mkv-aac gegangen.

Aber die heutigen Änderungen bei GPAC sehen sehr gut aus .

Zitat von CVS update: 29/11/04

- 3GPP/MPEG4 timed text decoder - supports everything except soft wrap & dynamic highlighting (karaoke) - vertical text not fully tested
- new "ttxt" format (for "timed text"): XML representation of 3GPP/MPEG4 timed text streams - importer (from ttxt and from srt) and dumper (to ttxt only) support.
- MP4Box "-ttxt" option: converts an SRT file to a TTXT one.
- Input plugin for ttxt and srt files.
- Support for "dynamic scenes", eg gpac will now generate on the fly a scene description when none is found, and allows stream selection in GUI.
- Modified Osmo4 & wxOsmo4 GUI: stream selection & subtitle adding
- Changed MP4Box "-import" to "-convert" ("-import" is kept for backward compatibility).
- Added MP4Box "-rem" (removes a track), -nosys (removes all MPEG-4 systems streams and writes an empty IOD)
- Added MP4Box "-add": adds any supported format to an mp4 file (same input conventions as -convert). Several input can be specified (ex: -add audio1.aac -add sub1.srt video.mp4 -out full_movie.mp4)

Alles anzeigen

Gleich mal testen und schauen ob VLC die SUBs abspielt .