Artificiell intelligens roll i den framtida mobiliteten
Hur AI kan klara sitt ”förarprov”
AI-assistenter i bilar
LIDAR som nyckelteknologi
Volkswagens syn på AI
Zenuity om framtiden
Hur man kan förhindra dataintrång
HD-kartor och förarstödsystem
Under de senaste åren har vi vittnat många nya allianser kopplade till utveckling av automatiserade fordon och mobilitetstjänster. I en ny rapport kallad Strategic alliances: a real alternative to M&A? beskriver KMPG vad som krävs för att diverse allianser inom transportbranschen ska kunna överleva.
Startup-företaget Mighty AI, som levererar träningsdata till företag som bygger datormodellmodeller för autonoma fordon, och konsultföretaget Accenture har publicerat en rapport om några av de utmaningar som autonoma fordon står inför med avseende på all den data som samlas in [1].
För att fordon ska kunna uppnå högre nivåer av automation genom deep learning behöver de en massiv datamängd som kommer från sensorer såsom kamera, radar och LiDAR, både för upplärningen av AI-systemet men också för att kunna fatta beslut i realtid när de väl introducerats på marknaden.
Rapporten pekar ut följande fyra områden att ha i åtanke när man utvecklar metoder för att hantera massiva datamängder för autonoma fordon:
Datainsamling: Företag kan bli mycket effektivare på datainsamling genom att optimera datakraven och insamlingsmetoden.
Datalagring: Att engagera företagets centraliserade IT-avdelning så tidigt som möjligt är avgörande (innan man har distribuerade team som jobbar i olika riktningar).
Datahantering: Att kunna spåra datas ursprung, vad som händer med det och hur det används över tid är viktigt.
Datamärkning: Med så mycket data som samlas är det viktigt med kategorisering för att få klarhet.
Rapporten säger avslutningsvis att företag som är medvetna om dessa utmaningar och bygger system för att hantera dem har större möjligheter att kringgå utmaningar som kan bromsa deras framgång.
Källa
[1] Autonomous vehicles: The race is on. Accenture, 2018, Länk
Vi fortsätter i samma anda som förra gången och sammanfattar det vi missat under juluppehållet.
En av nyheterna är att KMPG släppt en ny rapport – Autonomous Vehicles Readiness Index där de rankat olika länder utifrån fyra faktorer: policy och lagstiftning, teknologi och innovation, infrastruktur och acceptans. Nederländerna hamnat överst följt av Singapore och USA. Vet ni vilket land hamnat på plats 4? Sverige. PWC har också publicerat en rapport med tips hur fordonsindustrin kan överkomma de 5 mest distraherande myter. Ett tips: Don’t do it all yourself.
För att ta reda på vilka företag är ledande i AI kan ni ta en titt på CB Insights lista AI 100 eller kika på illustrationen som är baserad på denna och publicerad av World Economic Forum.
Här är några andra spännande nyheter.
Ford boostar sina leveransplaner. Detta genom att ingå ett samarbete med Postmates som fokuserar på ondemand leveranser. Under årets gång kommer de att utforska hur deras plattformar kan kombineras för att ge kunder bra upplevelse vid användning av autonoma varutransporter. Vi lär se fler pizza-liknande tjänster! Ford har också tydliggjort under CES att företaget vill koppla upp sina bilar mot smarta städer, andra fordon, cyklister. För att åstadkomma detta ämnar företaget utveckla en öppen plattform (Transportation Mobility Cloud) och har bland annat ingått ett samarbete med Qualcomm. LänkLänk
Snap. Så heter Rinspeeds nya multifunktionella konceptfordon för transport av varor och människor. Det är ett modulärt fordon med en skatebordliknande basplattform och ett avtagbart chassi. Länk
Renault-Nissan-Mitsubishi satsar stort. Den här gången handlar det om en investeringsfond på 1 miljard dollar för att stödja nystartade företag i deras utveckling av automatiserade fordon. I år kommer de spendera upp till 200 miljoner dollar för detta. Länk
Door2door + ZF + Microsoft. I ett nytt samarbete kommer dessa tre företag att utveckla en komplett end-to-end-lösning för autonoma masstransportflottor. Den kommer vara designad för att kunna drivas av städer och masstransitoperatörer och kommer att möjliggöra optimering av både passager- och godstransporter. Länk
Utan ratt 2019. Under CES presenterade General Motors (GM) ihop med Cruise Automation en ny konceptbil som är helt självkörande utan några traditionella kontroller som ratt och bromspedal. Lanseringen av bilen är planerad till 2019 (!). För att möjliggöra detta arbetar företaget aktivt med myndigheterna och har publicerat en säkerhetsrapport. Länk
Voyage utökar sin verksamhet. Detta genom att lansera en taxitjänst med självkörande fordon i Florida på ett av landets största pensionärsamhällen. En liknande taxitjänst har testats under hösten 2017 i Kalifornien på ett något mindre pensionärsamhälle. Voyage är en spin-off från Udacity som startas av bland andra Sebastian Thurn som också står bakom Googles självkörandeprogram. Länk
Cellular Vehicle-to-Everything (C-V2X). Under 2018 kommer Nissan, Qualcomm, Ericsson, OKI, Continental och NTT DOCOMO att genomföra tester med C-V2X i Japan med målet att visa fördelarna med tekniken som definieras i 3GPP Release 14 och som använder 5GHz bandet. Länk
Magnas nya radar. Den heter ICON RADAR och kan skanna omgivningen i fyra dimensioner. Den är baserad på teknologi som används av amerikansk militär, har en räckvidd på över 300 meter och skannar miljön 50 gånger snabbare än vad det tar att blinka med ögat. Länk
Från CAN till Ethernet. Hyundai och Cisco samarbetar för att möjliggöra nästa generations nätverk inne i fordon som tillgodoser de ökade datakraven för automatiserad körning. De planerar att lansera ett produktionsfordon år 2019 med ett sådant nätverk där de ämnar övergå från Controller Area Network (CAN) till Ethernet-teknik för att uppnå bearbetningshastigheter på upp till 1 Gbps och integrerad datakontroll. Länk
Första 5G telematiklösning för fordon? Harman och Samsung Electronics har utvecklat en 5G-baserad telematiklösning för applikationer inom automatiserade fordon, något som de påstår sig vara först med. En icke-namngiven europeisk fordonstillverkare är först med att använda denna. Inom ramen för deras samarbete har Samsung och Harman också utvecklat DRVLINE, en öppen, modulär och skalbar plattform för autonoma fordonsapplikationer. LänkLänk
Pony.ai. Det är ett startupföretag som grundades för ungefär ett år sedan och som nyligen fått en investering på över 112 miljoner dollar för att vidareutveckla sin idé – ett fordon av automationsnivå 4 för mer förutsägbara miljöer som till exempel universitetscampus, förorter och industriella områden. Företaget tror att fordonet kommer att vara redo om 2-3 år. Länk
Mjukvara som hittar fel i annan mjukvara. Den heter Jarvis och är utvecklad av BlackBerry med mål att hitta sårbarheter i mjukvara som används i självkörande fordon. Jarvis skannar och ger insikter i minuter, en process som normalt skulle ta ett stort antal experter och mycket tid. För tillfället testas den av fordonstillverkare inklusive Jaguar Land Rover. Länk
Functionality Safe. Det är Nvidias nya AI-plattform för automatiserad körning som enligt företaget erbjuder den redundans som krävs för att möjliggöra utveckling av funktionellt säkra självkörande bilar och lastbilar som kan uppfylla säkerhetsstandarder som ISO 26262. Plattformen är utformad för att möjliggöra säker körning även i händelse av fel relaterade till operatören, system eller miljö. Länk
Peterbilts lastbil. Under CES visade Peterbilt en lastbil av modellen 579 som de anpassat till att kunna köra själv, motsvarande automationsnivå 4. Det är ett proof-of-concept fordon för testning som tagits fram i samarbete med Waymo, snarare än en produktionsredo produkt. Företaget gjorde inga live demonstrationer, förutom att visa ett trötthetsdetekteringssystem utvecklat av Aptiv. TuSimple ställde också ut sin lastbil. Detär första gången som lastbilar intar CES. Länk
Waymo testar i San Francisco. Efter att ha påbörjat tester i Arizona utan någon mänsklig förare bakom ratten inleder företaget liknande tester i San Francisco. Det är oklart hur många fordon som kommer att testas. Länk
Nya godkännande metoder efterlyses. Under Homologation konferensen som hölls i december 2017 av TÜV SÜD konstaterade experterna att metoder för godkännande av vägfordon kommer att behöva förändras betydligt för att möjliggöra automatiserad körning. Länk
Är man borta i en månad så hinner det hända mycket. Men så är det väl med allt, det gäller att hänga med! Är man inte med i varje ögonblick så hinner andra före. Kanske något att lägga på minnet under det nya året?
Navigants senaste kartläggning av ledande företag inom automatiserad körning tyder i alla fall på det. Förra årets ledare, Ford, har blivit omkörd av GM, Waymo och Daimler-Bosch och hamnat därmed på plats 4 på Navigants Leaderboard. Svenska Volvo-Autoliv-Ericsson-Zenuity har hamnat på plats 9 bland s.k. contenders. Intressant nog har Tesla, Apple och Uber hamnat längst bak bland s.k. challengers. Ja, så kan det gå. Vill ni få en uppfattning om hur det kan gå under 2018 kan ni förslagsvis läsa den här prognosen samt den här.
Nedan följer en sammanställning av det vi missat under den senaste månaden. Mycket av det vi skriver om har visats under årets upplaga av Consumer Electronics Show (CES) i Las Vegas. En intressant sammanfattning av CES återges också av Automotive News.
Ska fordonet kunna förstå förarens hjärnaktivitet? Ja, enligt Nissan som visade ett s.k. brain-to-vehicle gränssnitt (läs: en mössa med många elektroder i) med hjälp av vilken fordonet kan förutspå när föraren exempelvis vill bromsa eller när föraren ogillar dess körsätt. Länk
Självkörande fordon kommer behöva bättre batterier, enligt uppfinnaren av litiumjonbatterier Akira Yoshino. Förutom att fokusera på att göra batterier mer kraftfulla för att utöka räckvidden för privatägda bilar, kommer tillverkarna också behöva utveckla enheter som klarar av svårigheter med nästan konstant körning och kortdistansresor för delade fordonspooler. Länk
Bosch blir delägare av kartföretaget HERE. Att få tillgång till detaljerade kartor och andra datatjänster från HERE är en del av företagets plan att utvecklas inom området smarta städer. Andelen som Bosch kommer att äga är ca 5%. Länk
Baidu inleder samarbete med BlackBerry. I och med detta har Baidu valt BlackBerrys QNX för användning i Apollo, företagets öppna plattform för självkörande fordon. Länk
Aurora i samarbete med VW och Hyundai. Detta för att kommersialisera Auroras mjukvara för självkörande fordon. Hittills har Aurora testat sitt system i Mountain View och Pittsburgh med ett okänt antal fordon. Förhoppningen är att samarbeten ska möjliggöra mobilitetstjänster, och först ut blir VWs Sedic. Länk
Kommersiell platooning 2018? Ja, det är Pelotons ambition. Troligtvis blir det av vid halvårsskiftet ihop med en icke-namngiven kund i Texas. Nyheten kommer strax efter att företaget genomfört tester på allmänna vägar i Florida och Michigan. Länk
Finska Martti i snö. VTT i Finland har visat att dess självkörande bil Martti (en anpassad Volkswagen Touareg) klarar av dåliga vägförhållanden. Den klarar av att köra själv på en helt snötäckt motorväg utan synliga linjemarkeringar i hastigheten 40 km/h. Martti är baserad på samma mjukvara som används i dess föregångare Marilyn som tränades av forskarna under våren 2017 att hantera tätbebyggda områden. Här kan ni se Martti in action. Länk
Självkörande bagagetransport. EasyMile, som gjort sig känt genom att tillverka små självkörande bussar EZ10, har ihop med TLD utvecklat ett självkörande fordon för bagagetransport. Fordonet kallas TractEasy och är baserat på TLDs JET-16 eldrivna traktor som integrerats med EasyMiles självkörande system. Länk
Faurecia och Accenture ska tillsammans bedriva en digital tjänstefabrik. De kommer inledningsvis att fokusera på två områden: kognitiv teknologi för att återuppfinna användarupplevelsen i bilen samt tjänster för att förbättra hälsa och välbefinnande. De har också för avsikt att utnyttja digital teknik som artificiell intelligens (AI), avancerad analys, förstärkt och virtuell verklighet, blockedja och kvantumberäkning. Länk
Autolivs Liv 2.0. Autolivs forskningsfordon Liv 2.0 gjorde debut under CES, och inte bara en utan hela fyra stycken. Dessa är av modellen Lincoln MKZ och är utrustade med externa och interna sensorer, samt artificiell intelligens och en smart ratt. Ambitionen med Liv 2.0 är att skapa en dialog mellan fordon och förare och bidra till att skapa en gemensam förståelse för varandras kunskaper och förmågor. Länk
Självläkande asfalt för självkörande fordon. Dålig infrastruktur skulle kunna vara ett stort hinder för massintroduktion av automatiserade fordon. För att lösa problem med hål och liknande vägdefekter har en grupp forskare vid Delft University tagit fram en ny typ av asfalt som har förmåga att läka själv. Liknande tankar har också forskarna vid ETH Zurich och University of Minnesota Duluth. Länk
Aptivs och Lyfts taxitjänst. Under CES demonstrerade Aptiv (tidigare Delphi) och Lyft sin mobilitetstjänst. De tog dit en flotta på 8 bilar som resenärerna kunde boka via Lyfts app för resor till 20 olika destinationer i Las Vegas. Som ni kan se i filmen nedan är i princip alla sensorer integrerade i bilen. Länk
Toyotas nya fordon och allians. Toyota, som hittills hävdat att de inte har några planer på att ta bort ratten och föraren, har under CES visat e-Palette – ett helt självkörande konceptfordon utan någon ratt. Tanken är att fordonet ska användas för nya mobilitetstjänster. För att kunna förverkliga dessa tjänster har Toyota bildat en allians för e-handel med företag som Amazon, Pizza Hut, Uber, Mazda och Didi Chuxing. På kort sikt kommer alliansen att fokusera på att utveckla den eldrivna e-Paletten som kommer att ha ett gränssnitt för öppen källkod som gör det möjligt för partnerföretag att installera sina egna automatiserade körsystem om så önskas. Dessutom kommer Toyota att erbjuda en rad tjänster för att hjälpa e-Palette-kunderna att använda sina fordon, inklusive leasing, försäkringsstöd och flotthantering. Användarna kommer också ha tillgång till kommunikationsnät och ett så kallat Toyota Big Data Center. Länk
Självkörande och eldrivna bussar by AB Volvo. Ni som bor i Göteborg har säkert sett och åkt med Volvos eldrivna stadsbussar många gånger. Nu ska Volvo också automatisera två av sina elbussar (modell 7900 Electric) och testa dem på en testbana i Singapore ihop med Nanyang Technological University och landets transportmyndighet LTA. Bussarna kommer att utrustas med den nya tekniken i Göteborg och levereras till Singapore i början av 2019. Viktigt att notera är att ABB kommer förse Singapore med snabbladdare för dessa bussar. Länk
Under maskininlärningskonferensen NIPS som hölls förra veckan i Kalifornien bekräftade Teslas VD Elon Musk tidigare rykten – Tesla håller på att utveckla egna AI-chip [1]. Enligt honom är detta ännu ett bevis på att företaget menar seriöst med AI, både vad gäller mjukvara och hårdvara.
Musk avslöjade inga fler detaljer men han konstaterade att företagets specialiserade AI-hårdvara kommer att bli ”bäst i världen”.
Idag använder sig Tesla av Nvidias teknologi.
Källor
[1] Simonte, T, Wired. MUSK SAYS TESLA IS BUILDING ITS OWN CHIP FOR AUTOPILOT. 2017-12-08 Länk
Kinesiska myndigheten MOST (Ministry of Science and Technology) har identifierat de stora internetföretaget Baidu, Alibaba och Tencent (tillsammans kallade BAT) ihop med röststyrnings-företaget iFlyTek som de första företagen att hjälpa till att ta landet till globalt ledarskap inom artificiell intelligens [1].
Tanken är att de fyra företagen ska samverka för att bygga öppna innovationsplattformar inom fyra områden: autonom körning (Baidus fokus), smarta stadstransporter (Alibabas fokus), visionsystem (Tencents fokus) och ”röstintelligens” (iFlyTek).
Kina satsar mycket på utveckling av självkörande fordon och har som mål att 2022 ha nått Nivå 3 (SAE-skalan) och 2025 Nivå 4/5 [2]. Innan dess ska man ha satt standarder för vad sådana fordon ska klara liksom regelverk för provning, licensiering och ansvar. Platser för test och demonstration har byggts på flera platser i landet som Shanghai, Beijing, Wuhan och Chongqing.
Källor
[1] China recruits Baidu, Alibaba and Tencent to AI ‘national team’ , South China Morning Post 2017-11-21 Länk
[2] Much work still needed for era of driverless vehicles, Global Times 2017-11-26 Länk
Microsoft har utvidgat sin AI-plattform AirSim att även inkludera simulering för utveckling av självkörande fordon [1]. Med AirSim kan man utveckla och testa system i realistiska miljöer och med realistiska modeller för fordonsdynamik och sensorer.
Med AirSim följer mer än 12 km väg i detaljerade 3D-miljöer av såväl storstäder, förorter, industriområden etc.
Här kan ni se en demo av simulering av en drönare inklusive vad olika sensorer ser.
Egen kommentar
Simulering är ett viktigt verktyg för utvecklare, det går inte att testköra miljontals mil. Dessutom är det viktigt med repeterbara förhållanden. Samtidigt så blir inte resultaten bättre än vad som byggs in. I verkligheten kan en elefant korsa en indisk väg men har man inte modellerat elefanten så händer det aldrig i simuleringen.
Källor
[1] Microsoft extends Artificial Intelligence research to self-driving vehicles, Financial Express 2017-11-27 Länk
Det är många som är nyfikna på vad Apple håller på med inom fordonsområdet. Nu har två av deras forskare, Yin Zhou och Oncel Tuzel, skrivit en vetenskaplig artikel i webbtidskriften arXiv [1] [2] om att kunna identifiera objekt som cyklister och fotgängare med färre sensorer och en programvara som kallas VoxelNet.
Normalt använder självkörande fordon en kombination av 2D-kameror och LIDAR för objektidentifiering och positionering. Ett problem med dessa är att upplösningen är för låg att kunna detektera små objekt på stora avstånd. För att klara detta får man komplettera med en vanlig kamera.
Med VoxelNet säger Apples forskare att de kan få mycket bra resultat enbart med användande av bara LIDAR-data. Dock handlade det om simuleringar och inte tester i verkligheten.
Egen kommentar
Att kunna ”se” är förstås avgörande för självkörande fordon, och det går att klara med dyra lösningar med många sensorer. För att få ner kostnaden vore det bra om man kan klara sig med färre. Men samtidigt så finns det många situationer där LIDAR inte fungerar så bra som i dåligt väder. LIDAR är också en relativt dyr teknologi jämfört med radar och kameror.
Källor
[1] Stephen Nellis: Apple scientists disclose self-driving car research, Reuters 2017-11-22 Länk
[2] Yin Zhou, Oncel Tuzel: VoxelNet: End-to-End Learning for Point Cloud Based 3D Object Detection, 2017-11-17 Länk
Vid ett seminarium hos Toyota Research Institute sade chefen Gill Pratt att fordon på SAE-nivå 5 kommer att kräva en ny nivå av artificiell intelligens som ännu ingen vet hur den ska byggas [1].
”Om någon anger en tidplan för nivå 5, pressa dem hårt med frågor. Vi är i de första dagarna av en lång resa,” sade Pratt.
Toyota tar det säkra före det osäkra vad gäller utvecklingen av autonoma bilar, med målet att nå noll dödade i trafikolyckor involverande teknologin. ”Vårt mål är att skapa en bil som aldrig orsakar en olycka, oavsett vad föraren gör,” sade Pratt.
På vägen dit har redan utvecklat ett antal olycksundvikande system, vilka efter 2020 kommer att följas av mer avancerade funktioner som kommer att tillåta att föraren släpper ratten (SAE nivå 2).
Egen kommentar
De olika fordonstillverkarna har verkligen olika syn på hur snabbt det kommer att gå, med Tesla som kanske har den snabbaste tidplanen medan Audi ju lanserat en nivå 3-bil (med dispens från myndigheterna) och alltså Toyota och till exempel nog även Volvo Cars alltså är mer försiktiga.
Källor
[1] Toyota taking a cautious safety-based approach to autonomous driving, Autovista Group 2017-11-07 Länk
AI är en nyckel till AD, men på vilket sätt? Audi och NVIDIA som är partners i AD-utvecklingen presenterade olika uppfattning vid ELIV 2017.
Det finns två angreppssätt end-to-end eller modulärt. Audi tror på det senare sa Florian Netter i sitt föredrag. Audi anser inte att AI skall tillämpas i modulerna för att tolka omvärld och för styrning. Däremot är AI tillämpbart för att identifiera objekt i sensorströmmar, prediktion mm. Audi vill ha kontroll på varje steg.
Joachim Langenwalter, NVIDIA visade att end-to-end fungerar, vilket innebär att sensorsignalerna tas in till AI-nätverken och ut kommer styrsignaler. Han visade flera säljande demos på video, bl.a. körning nerför den krokiga Lombard Street i San Fransisco.
Egen kommentar
Vi har tidigare skrivit om George Hotz som ensam tog fram en självkörande konceptbil med end-to-end. Intressant att NVIDIA som leverantör och partner med ledande bilföretag visar möjligheter som kan innebära genombrott. Men NVIDIA är leverantör av plattform, teknik och kompetens inte fordon med AD.