APPLE · 2014–2021
Meine Arbeit an Maps, iMessage und Augmented Reality: eigene Entwicklung, Bedienkonzepte und teamübergreifende Umsetzung. Veröffentlichte Funktionen und Prototypen sind getrennt gekennzeichnet.
Maps
Augmented RealityMein 2018 intern präsentierter Prototyp verbindet Kamerablick, räumliche Geometrie und Ortsinformationen. Die Placecards baute ich mit SpriteKit für die Anzeige in der Kameraansicht nach.
Wiedergabe nicht möglich. Videodatei direkt öffnen
MapsAugmented RealityMit SceneKit entwickelte ich den Flyover zu einer detaillierteren 3D-Umgebung weiter: Gebäude, Straßen mit Namen und Gehwegen sowie Wasser und Himmel. Die Platzierung von Straßennamen und Begrenzungen berechnete ich selbst und blendete sie zur Laufzeit ein.
Wiedergabe nicht möglich. Videodatei direkt öffnen
GPS und Blickrichtung positionierten unsichtbare Gebäudegeometrien um den Nutzer. Beim Tippen bestimmte der Prototyp den ersten Treffer in Blickrichtung und zeigte die zugehörigen Ortsinformationen als Placecard.
Die Geometrie und verfügbaren POI-Daten stammten aus Maps. Fehlten passende Ortsinformationen, nutzte der Prototyp verfügbare Zillow-Immobiliendaten, etwa Miet- oder Kaufpreise und Zimmerangaben. Auch dann blieb die Geometrie aus Maps.
Im weiterentwickelten Prototypen berechnete ich die Darstellung von Gebäuden, Straßen, Namen und Begrenzungen und blendete sie zur Laufzeit ein. Gehwege, Wasser und Himmel ergänzten den räumlichen Kontext zur Orientierung.
Maps
iMessageBUSINESS CHAT
Ein Unternehmen in Maps auswählen und direkt aus seiner Ortskarte ein Gespräch in Messages beginnen.
Die Idee entwickelte ich gemeinsam mit einem Kollegen. Ich entwickelte funktionsfähige Prototypen, führte die Integration vor und prüfte den Ansatz. Den Nachrichten-Einstieg aus der Maps-Ortskarte setzte ich selbst bis zur veröffentlichten iOS-Funktion um — in Zusammenarbeit mit den Maps- und iMessage-Teams.
Ich stellte den Kontakt zwischen Apple und MessengerPeople her und begleitete die ersten beiden Gespräche. Danach führten die beteiligten Teams die Zusammenarbeit fort. Für MessengerPeople ergänzte Apple Business Chat das WhatsApp-Angebot; Apple gewann einen passenden Messaging-Partner.
Ein Ort und seine Informationen in Maps.
Der Einstieg direkt aus der Ortskarte.
Kontakt, ohne die Telefonnummer suchen zu müssen.
Heute heißt das Produkt Messages for Business.
Das Produkt bei Apple
Maps
WikipediaWIKIPEDIA · WIKIMEDIA COMMONS
Die entscheidende Arbeit lag vor der Anzeige: Informationen verbinden, Bilder passend auswählen und ungeeignete Inhalte ausfiltern.
Orte mit ihrem größeren Zusammenhang verknüpfen — zum Beispiel ein Land mit seinem Kontinent.
Artikel, Bevölkerung, Fläche und weitere vorhandene Angaben zu einer konsistenten Ortsansicht zusammenführen.
Medien aus Wikimedia Commons semantisch zuordnen, thematisch ordnen und passende Bilder für die Anzeige auswählen.
Filter für explizite sexuelle oder gewalthaltige Bilder entwickeln und einsetzen.
Wikipedia-Texte, Bilder und Metadaten mit den beteiligten Teams für Maps und weitere iOS-/Mac-Funktionen aufbereitet, integriert und in ihrer Qualität geprüft. Bildauswahl, thematische Ordnung und Inhaltsfilter waren ein wesentlicher Teil dieser Arbeit.
Diese inhaltliche Aufbereitung war deutlich aufwendiger als die Anbindung bereits strukturierter Partnerdaten.
Ein anderer Datenweg.
Maps
Tripadvisor
YelpPOI · PARTNER-APIS
Restaurants, Hotels und Unternehmen sind nicht flächendeckend in Wikipedia enthalten. Dafür kamen Datenanbieter mit bereits aufbereiteten APIs hinzu.
Welche Quelle deckt ein Land oder eine Region am besten ab?
Die geeignete Quelle für die jeweiligen POIs auswählen und anbinden.
Fotos, Bewertungen und Rezensionen mit erkennbarer Anbieterzuordnung anzeigen.
Mit verschiedenen Anbietern die Abdeckung je Land und Region analysiert, geeignete POI-Quellen ausgewählt und deren Einbindung mit den Teams umgesetzt.
Beispiele meiner damaligen Anbieterarbeit
MapsINDOOR MAPS
Innenräume erfassen und so aufbereiten, dass aus einem Grundriss eine nutzbare Orientierung wird.
Ich verantwortete Indoor-Navigationsfunktionen und entwickelte mit den beteiligten Teams iOS-/Mac-Anwendungen sowie die App zur Gebäudeerfassung. 2019 programmierte und dokumentierte ich Apples offizielles Beispielprojekt „Displaying an Indoor Map“. Es zeigt anderen Entwicklern, wie Gebäudepläne im IMDF-Format mit MapKit dargestellt werden.
Meinen veröffentlichten Beispielcode bei Apple ansehen ↗Werkzeuge zur Arbeit mit Innenräumen.
Strukturen und relevante Ziele zugänglich machen.
Das Sample-Code-Projekt machte die Darstellung von Innenräumen für andere Entwickler nachvollziehbar und nutzbar.
MapsAugmented RealityAUGMENTED REALITY
Geokoordinaten und räumliche Informationen werden in der sichtbaren Umgebung verständlich — statt nur auf einer Karte.
Die frühe AR-Maps-Idee entwickelt, selbst programmiert und ihre teamübergreifende Umsetzung über rund 18 Monate verantwortet. Die beiden Filme am Anfang zeigen meine damalige Entwicklung.
Eigener Ansatz, eigene Softwarearbeit.
Umsetzung mit mehreren Teams.
Rund 18 Monate.
In dieser Form nicht veröffentlicht; eine Grundlage späterer AR-Navigation in iOS.
DER ROTE FADEN
Eigene Ideen, technische Umsetzung und die Zusammenarbeit mit Menschen aus unterschiedlichen Disziplinen. Heute untersuche ich mit MindFlow die Möglichkeiten und Grenzen lokaler KI.
MindFlow ansehen