Kategoriarkiv: HMI

Detta har hänt under julen del I

Som vanligt har nyhetsflödet under slutet av december och början av januari handlat nästan enbart om Consumer Electronics Show (CES). Det har blivit lite av en tradition här på OmAD att ägna en del av julsammanfattningen åt CES:

Hesai presenterar ny lidar. Hesai har avslöjat sin nya lidar vid namn FT120. Den nya sensorn är avsedd för att täcka döda vinklar för förarstödssystem, d.v.s för detektering av objekt på korta avstånd. Tillsammans med Hesais lidar AT128 som är avsett för längre avstånd så har Hesai nu en komplett lidarlösning. Länk

Googles nya HD karttjänst. Google har berättat om en ny karta avsedd för automatiserade fordon, Google HD Maps. Produkten fungerar som ett extra lager på deras redan existerande karttjänst Google Maps där man får tillgång till mer detaljerad information om vägutformning och annan viktig information för automatiserade fordon. Volvo och Polestar avslöjade att lösningen kommer finnas i deras nya fordon Volvo EX90 och Polestar 3. Länk

Morai utökar sitt utbud inom simulering. Det sydkoreanska företaget Morai som utvecklar simuleringsteknologi för autonoma fordon har utökat sin lösning för att inkludera fler typer av autonoma fordon inklusive förarlösa luftfarkoster, förarlösa båtar, förarlösa markfordon (eng: Unmanned Ground Vehicle – UGV), och olika typer av robotar så som gående robotar eller robotar med hjul. Länk

aiMotive har demonstrerat förbättrad simulator. aiMotive, som nyligen förvärvades av fordonskoncernen Stellantis, har avslöjat sin nya simulator aiSim 4 avsedd för validering och vidareutveckling av ADAS och AD-teknologi. Simulatorn kan skapa olika väder, möjliggöra testning av sensorer, generera syntetisk data, har ett webbaserat gränssnitt, och ger tillgång till ett utbud av 3D-modeller samt verktyg för att skapa nya 3D-modeller. Länk

Foxconn går in i samarbete med Nvidia. Nvidia och taiwanesiska techföretaget Foxconn har tillkännagivit ett nytt samarbete som går ut på att automatiserade och autonoma fordonsplattformar. Mer specifikt så kommer Foxconn tillverka styrenheter (eng: Electronic Control Unit – ECU) baserade på Nvidias System-on-a-chip (SoC) vid namn Drive Orin. Foxconn avslöjade också planer om att tillverka ett autonomt fordon utrustad med Nvidias Drive Orin och Drive Hyperion. Länk

Ambarella och Continental samarbete för AD-plattform. Kalifornien-baserade företaget Ambarella, som b.la är verksamma inom ljud- och bildteknik, ska ingå samarbete med tyska techföretaget Continental för att utveckla en AD-plattform. Företagen kommer att slå ihop sin expertis och bidra med mjukvara för att bygga en komplett AD-plattform på Ambarellas SoC. Relaterat till Ambarella så fick vi nyligen veta att Kodiak Robotics som utvecklar AD för lastbilar valt deras CV2AQ-SoC för sin teknologi. Länk1 Länk2

LG och Magna utvecklar infotainment för AD. Teknikföretagen LG och Magna avser skapa en lösning där man kombinerar LGs infotainmentsystem med Magnas automatiserade körteknologi. Målet för slutprodukten är att förbättra användarupplevelsen av fordon-till-förargränssnitt i fordon med automatiserad körteknologi. Länk

Självkörande barnvagn. Ett kanadensiskt startupföretag vid namn Glüxkind Ella visade upp en självkörande barnvagn på CES. Barnvagnen kör endast när en person är bakom vagnen och vagnen är tom. Produkten är avsedd för de tillfällen när barnet vill bli buret eller gå själv. Ni kan se en video på den självkörande barnvagnen här. Länk

Guldkorn från svensk forskning

Det här är svenska guldkorn från er läsare. Tack för ert fantastiska jobb.

Eldsjäl: Elektriska delade självkörande fordon i det framtida fossiloberoende transportsystemet
Trafikkontoret i Göteborg, Västtrafik, K2/Malmö Universitet och Trivector har genomfört Drive Sweden-projektet Eldsjäl. Projektet analyserade hur delade självkörande elektriska fordon kan komma att påverka staden och transportsystemet i Göteborgsregionen. Det syftade till att skapa en ökad förståelse för hur elektriska delade självkörande fordon kan påverka och komplettera kollektivtrafiken men också hur transportsystemet i stort påverkas utifrån ett hållbarhetsperspektiv. I projektet utvecklades möjliga framtidsscenarier vilka sedan modellerades i Göteborg Stads nya multimodala VISUM-modell. Från scenarierna erhölls resultat i form av hur trafiken påverkas och parametrar såsom restider, trafikflöden, fordonsflotta och beläggning i fordonen. I projektet genomfördes också digitala djupintervjuer för att få en bättre förståelse för människors inställning, resonemang och behov kring självkörande fordon i staden i allmänt och kring simuleringsresultaten i synnerhet. Mer information om projektet hittar du här eller kontakta Lennart Persson, Trivector, (lennart.persson@trivector.se)

Will leisure trips be more affected than work trips by autonomous technology? Modelling self-driving public transport and cars in Stockholm, Sweden
I studien användes den svenska transportmodellen Sampers för att undersöka vad självkörande fordon skulle innebära för Stockholm, genom en av de första modellstudierna där överflyttning mellan trafikslag ingår. En överflyttning från gång- och cykeltrafik hittades i samtliga scenarier, framförallt till biltrafik men i mindre mån skulle även självkörande teknik för kollektivtrafik innebära att människor åkte kollektivtrafik istället för att gå eller cykla. Nytt var även att vi undersökte geografiska skillnader och kom fram till störst effekter i förorter till Stockholm – med motiveringen att förbättringen av tillgängligheten för kollektivtrafik och bilar i innerstaden relativt sett skulle vara mindre. På samma sätt har de flesta redan bil på landsbygden och avstånden är långa, vilket ger få överflyttningseffekter. Där kan däremot anropsstyrd kollektivtrafik vara ett bra alternativ till bilen. Därutöver, som titeln antyder, undersökte resors olika syften och såg små effekter för transportsystemet för arbetspendling. Istället är det på fritiden som den stora ökningen av tillgänglighet får effekten att människor helt enkelt göra fler resor. Ni kan läsa den vetenskapliga artikeln här. Kontaktperson Erik Almlöf (ealmlof@kth.se)

Frameworks for assessing societal impacts of automated driving technology
I studien gjordes en översikt av de olika ramverk som finns för att utvärdera effekterna av självkörande teknik. Det identifierades 13 tidigare ramverk med ambitionen att täcka mer än ett område (t ex så försvann då ramverk som bara tittade på säkerhetsaspekter) och val av både metod och redovisade områden varierade stort. Det konstaterades att inget av de identifierade ramverken täcker allt, istället har olika ramverk olika styrkor. Därtill användes Trafikverkets metod för samhällsekonomiska bedömningar för att utvärdera en föreslagen autonom busslinje i södra Stockholm och det kunde konstateras att projektet skulle kunna ge stora, och lite oväntade, vinster i form av framförallt bekvämare resor för resenärer, medan t ex olyckor var en relativt marginell faktor. Samtidigt så täcker inte den nuvarande metoden för samhällsekonomiska bedömningar alla aspekter av effekter av självkörande teknik, t ex ökad arbetslöshet, då metoden främst används för infrastrukturåtgärder. Den vetenskapliga artikeln hittas här. Kontaktperson Erik Almlöf (ealmlof@kth.se)

5GCroCo – FIFTH GENERATION CROSS-BORDER CONTROL, a project funded by EU H2020 program
The 5GCroCo project has carried out large-scale connected car trials along two 5G corridors that cross the borders between France-Germany and Luxembourg-Germany. The trials carried out in these corridor areas proved that seamless service continuity on 5G networks can be guaranteed across borders. The service continuity solution implemented in 5GCroCo is achieved through a cross-border (and cross-MNO) handover, which results in an almost imperceptible service interruption time of around 120 ms. The seamless service continuity is important for all of the three use case that were demonstrated: Tele Operated Driving (VW); HD mapping (Volvo Cars); and Anticipated Cooperative Collision Avoidance (PSA and Renault). In today’s mobile networks, the connection breaks and needs to be re-established, which took more than 6 seconds with the devices used in the conducted trials. In all cases the service interruption time is significantly reduced compared to tens of seconds, or even minutes, experienced today when you are crossing a country border. The handover solution implemented in 5GCroCo is thus essential to enable continuous driving experiences between 5G national networks when connected and autonomous vehicles cross from one country to another. In addition to the large-scale trails, tests have been performed at AstaZero, using the 5G network from Ericsson, where a virtual country border was emulated on the rural road test track. 5GCroCo consortium in short: 24 partners from 7 European Countries, Total project budget about 17M€, EC contribution about 13M€, Project duration: 44 Months, 3 CAM key use cases demonstrated. Ni kan läsa mer på länken här. Kontaktperson Mikael Nilsson (mikael.nilsson@volvocars.com)

Assuring Safety for Rapid and Continuous Deployment for autonomous driving (ASSERTED)
Assuring safety of ML-enabled systems like Autonomous Driving (AD) Function in DevOps context is the challenge which will be addressed in ASSERTED. Our research goal is to explore methods and technical solutions for coping better with safety of autonomously driving vehicles for rapid and continuous development and deployment. The project is a collaboration between Volvo Cars, Zenseact, and Chalmers. ASSERTED is funded by Sweden’s Innovation Agency (Diarienummer: 2021-02585), and supported by WASP. https://youtu.be/YRlSpd6NIm8 Contact person Ali Nouri (ali.nouri@volvocars.com)

Digital trafiksäkerhetslösning: en förstudie
En förstudie som ämnar öka förståelsen och möjligheterna för en kostnadseffektiv och robust-över-tid digital trafiksäkerhetslösning som automatiskt varnar för annalkande trafik i obevakade plankorsningar håller nu på att avslutas. Förstudien har koordinerats av RISE tillsammans med företaget Crossing Safety och syftet är att risken för plankorsningsolyckor, samt kostnader för plankorsningsåtgärder, ska kunna reduceras. Ett ”proof-of-concept” utfördes den andra december med en utvecklad mobil-app som varnar för tåg då man befinner sig inom ett visst förutbestämt område från en obevakad plankorsning. Slutrapport publiceras i januari. https://youtu.be/YErx4DjlfyM. Kontaktperson Joakim Rosell (joakim.rosell@ri.se)

AUTOPIA – successful operation in Nordic winter conditions
From April 2021 until January 2022, Ruter and the AUTOPIA partnership trialed a service of AV transport in Ski, Norway. As a feeding shuttle to Ski train station, the pilot project aimed to demonstrate the benefits of a fleet of ride-shared AVs as an integrated part of public transport. Retrofitted Toyota Proaces with Sensible4’s AV technology were used in a publicly open service driving more than 10.000 kilometers through all seasons. Among others, the project resulted in new methodology for site/vehicle matching, experience with key issues of winter operation, and demonstrated that AVs can handle Nordic winter conditions successfully. All learning reports, videos and more can be found here: https://ruter.no/automated-mobility AUTOPIA consisted of the Nordic partners Ruter, Holo, Norwegian Public Road Administration, Viken municipality, TØI and Sensible4 as well as Toyota Motor Europe. Several others were involved in the project, including Edeva from Sweden. eirik.mero@ruter.no Eirik Mero

Augmented CCAM
Augmented CCAM (https://www.augmentedccam.com/) är ett HEU-projekt (https://www.ccam.eu/projects/augmented-ccam/) som syftar till att förstå, harmonisera och utvärdera olika lösningar i den fysiska och digitala infrastrukturen (så kallade PDI-koncept – Physical and Digital Infrastructure) för att förenkla och förbättra storskaligt införande av självkörande fordon. Det kan t.ex. handla om hjälp för att detektera oskyddade trafikanter eller vägarbetspersonal, interaktion med utryckningsfordon eller vävningssituationer. Projektet koordineras av FEHRL och konsortiet består av 26 parter från 13 länder. Från Sverige deltar VTI med körsimulatorförsök som syftar till att undersöka trafikanters interaktioner med något eller några av de framtagna PDI-koncepten samt genomföra trafiksimuleringsexperiment för att skala upp effekter, från studier av enskilda fordon och trafikanter i körsimulator eller digitala tvillingar, till ett trafiksystem med olika andel fordon eller trafikanter som kan utnyttja PDI-koncepten. Johan Olstam (johan.olstam@vti.se)

I4Driving
HEU-Projektet i4Driving (https://i4driving.eu/) syftar till att lägga grunden för en ny standardmetod för utvärdering av säkerhet hos självkörande fordon genom att ta fram en trovärdig och realistisk säkerhetsreferensnivå (hur säkert en mänsklig förare kör i en given situation). Detta dels genom att ta fram ett modulärt och skalbart bibliotek av förarmodeller för simulering och dels genom en metodik för att beakta den stora variationen och osäkerheten i mänskligt förarbeteende i olika situationer. Projektet koordineras av Panteia och konsortiet består av 14 parter samt 3 parter från USA, Australien och Kina. Från Sverige deltar VTI som kommer att bidra med kunskaper kring föraruppmärksamhet, förarmodellering och med körsimulatorförsök i syfte att fånga variation i förarbeteende i olika situationer. VTI kommer också genomföra en variant på Turing-test där tanken är att undersöka om mänskliga förare kan särskilja förarbeteende från den utvecklade förarmodellen från en verklig förare. Kontaktperson Johan Olstam (johan.olstam@vti.se)

GLAD, Godsleverans under den sista milen med självkörande fordon är ett nyligen avslutat projekt som delfinansierats av Trafikverket och utförts av RISE, Clean Motion, Combitech och Aptiv. I projektet undersöktes vilka områden som s.k. Autonomous Delivery Vehicles (ADV) kan användas och vilka utmaningar som måste hanteras vid implementering av sådana fordon för sista-milen leveranser. Man undersökte också interaktioner mellan ADV:er och andra trafikanter, och operatörer som interagerar med ADV:er i terminalmiljö. Flera av studierna utfördes med hjälp av ADV-prototyper som utvecklades under projektet. Prototypen med självkörande funktioner hade ett autonomt transporthanteringssystem (eng. Autonomous Transport Management System, ATMS) som placerades i en molntjänst med kapabilitet för fjärrkontroll. Projektet undersökte även legala aspekter av ADV:er, med fokus på hur de kan klassificeras. Beroende på ADV:ns maxhastighet och lastkapacitet skulle denna typ av fordon kunna klassificeras som antingen 4-hjulig tung motorcykel för godstransport, eller som motorverktyg. Det förstnämnda kan innebära längre väg till marknadsintroduktion p.g.a högre säkerhetskrav. Resultaten från studierna om interaktioner mellan människor och ADV:er visade bl.a att fordonets körbeteende hade en betydande roll i att förmedla fordonets beteende och avsikt att lämna/inte lämna företräde, samt att ljussignaler på fordonet (e-HMI) kan bidra till att lättare förstå fordonets beteende. En studie som gjordes i en simulerad terminalmiljö visade även att kontexten d.v.s terminalscenariot, situationerna och arbetsuppgifterna var viktig för deltagarna att förstå innebörden av fordonets eHMI. Kontaktperson: Mikael Söderman (mikael.soderman@ri.se)

Digital traffic rules for a connected and automated road transport system. Within the framework of Drive Sweden Policy Lab 2021/22, ways towards a future system for digital traffic rules were identified. Sweden has, from an international perspective, come a long way but there are challenges that can only be solved with a common approach. The project gathered relevant actors to understand how the conditions for change look like, as well as how a change would be received by all relevant actors. Actors ranging from those who issue local traffic rules to those who benefit from the information being presented in a machine-readable format (e.g. navigation service providers, vehicle manufacturers, road users etc.). Reliable information is needed already today for various applications and supporting IT systems and will become increasingly important with a connected and automated road transport system. The project Drive Sweden Policy Lab 2021/22 is funded through the strategic innovation program Drive Sweden by Vinnova, Formas and the Swedish Energy Agency. Join our final digital event (in Swedish) and register via Drive Sweden. Contact persons Cilli Sobiech (cilli.sobiech@ri.se) & Jenny Lundahl (jenny.lundahl@ri.se).

Independent assessment in trials with automated vehicles. The Swedish Transport Agency’s regulations and general advice on trials with autonomous vehicles have recently been amended (TSFS 2021:4, last amended by TSFS 2022:82). If the application concerns trials where technical systems are used to a large extent to ensure road safety, the risk assessment in the application should be supplemented with a statement from an independent assessor who examines that the system can ensure road safety. However, there is no further guidance on when an assessment is needed and what it should cover. RISE is gathering relevant vehicle manufacturers, vehicle operators, assessors, and authorities to clarify and harmonize what an independent assessment of road safety should cover, how the new general advice can be applied in practice and what experiences we can build upon for independent assessment and application processes from other countries and transport areas. If you are interested in participating contact Cilli Sobiech at RISE (cilli.sobiech@ri.se) & Jenny Lundahl (jenny.lundahl@ri.se).

Co-opetitive systems of systems for mobility.
In the recently finished research projects Maus and Orm, foundational aspects of co-opetitive systems of systems for future mobility systems have been explored. A co-opetitive system of systems consists of several independently managed and operated constituent systems that are both collaborating in constellations that solve user needs and competing for business. The projects have developed research results in architecture and design, value network flow analysis, governance, decision-making, and policy analysis. The projects are joint work between RISE, AFRY, Volvo Cars, and (for Orm) Trollhättans stad, and have received funding from Vinnova. More information, including one introductory and one visionary movie about the results, can be found at http://www.sos-4-mobility.se/ or by contacting Pontus Svenson (pontus.svenson@ri.se).

Skara Skyddsängel – Infrastrukturtjänster on-demand för säkrare, tryggare och bekvämare aktiv mobilitet
För säkert cyklande i mörka nordiska miljöer krävs ljus. Forskningsprojektet Skara skyddsängel arbetar för att utveckla och testa autonoma drönare som ett alternativt sätt att lysa upp mörka cykelvägar i Skara kommun. Projektet koordineras av RISE med partner Högskolan i Skövde, Jönköpings Universitet och Skara Kommun.  Det övergripande syftet med projektet är att belysa såväl cykelvägar som möjligheter för människor att välja ett hälsosamt, hållbart och kostnadseffektivt resande. Som en del av projektet har fokusgrupp studier utfört i juni med VR och pilotförsök hållits i november på de utvalda cykelvägarna. Tillsammans med testet har intervjuer gjorts för att undersöka människors nuvarande resvanor och förstå mer om känslan av säkerhet i relation till bland annat mörker och om drönarbelysningen kan bidra till att underlätta hållbart resande. I början av 2023 genomför projektet ytterligare en pilotstudie med utökat testmöjligheter. De som bor i Skara som är intresserad är välkomna att anmäla med länken https://forms.office.com/r/eNjgYcfF7M. Ni kan läsa mer om projektet här. Kontaktperson: Lei Chen (lei.chen@ri.se)

DiG Drönarleverans i Glesbygd
Leverans av paket och gods på svensk landsbygd är utmanande med längre leveranstid och transportutsläpp, särskilt i skärgårdsområden där vattentransporter behövs. Klimatförändringarna är en akut fråga som kräver att vi gör allt för att hitta motlösningar, samtidigt driver näthandeln behovet av logistik till en ny tidshöjd. DiG är ett Vinnova-finansierad projekt med syftet att undersöka det senaste inom drönarleverans med anpassningar till svenska landsbygdsegenskaper för att minska utsläppen, öka servicejämlikheten och tillgänglighet. Projektet koordineras av RISE med samarbeten mellan Aerit – den svenska drönarleverans startuppen, ICAx – innovationsgruppen på ICA Gruppen och Norrtälje kommun, med stöd från ICA Nära Gräddö och Öbutiken i Tjocke. Genom året har projektet utvecklat och testat autonoma drönarleveranssystem och integrerat med ICA Pronto appen. Nu i december pågår pilot i Norrtälje och de utvalda kunderna kommer kunna beställa vissa varor med drönare som ett leverans alternativ. Ni kan läsa mer om projektet här. Kontaktperson: Lei Chen (lei.chen@ri.se)

Guldkorn från svensk forskning

Det här är svenska guldkorn från er läsare. Tack för ert fantastiska jobb.

Autonoma leveransfordon i interaktion. Inom projektet GLAD (Goods deliveries under the LAst mile with autonomous Driving vehicles) genomfördes under maj månad en användarstudie där en ADV (Automated Delivery Vehicle) utrustad med s.k. eHMI:er (visuella medel som kommunicerar till människor i omgivningen) körde en kortare rutt. Syftet var att utvärdera hur individer uppfattade och förstod eHMI:erna i olika situationer, samt hur de kan utvecklas. Preliminära resultat indikerar att eHMI:erna i sig inte kommunicerade sina specifika budskap, men att de i sina givna sammanhang blev begripliga. Resultaten visade även på tydliga inlärningseffekter, d.v.s. deltagarna lärde sig snabbt eHMI:ernas budskap. Projektet är finansierad av Trafikverket och utförs av RISE, Clean Motion, Aptiv, Combitech och Högskolan i Halmstad. Kontakt: Mikael Söderman, RISE, (mikael.soderman@ri.se)

Förstudie SMART-projektet. Som en del av det EU-finansierade SMART-projektet genomför RISE en förstudie kring förutsättningarna för att komplettera kollektivtrafiken med förarlösa tjänster i Skaraborg. Projektet leds av Destination Läckö/Kinnekulle som är ett kommunalt bolag ägt av Götene och Lidköping. Preliminära resultat visar att det i några av tätorterna finns intressanta systemeffekter värda att studera närmare men att det är svårt att hitta lämpliga lösningar för lite längre avstånd mellan kollektivtrafikens hållplatser och populära utflyktsmål eller uppför Kinnekulles de branta vägar. Det finns också sträckor i området där det antagligen finns en marknad för kommersiella tjänster med manuellt framförda fordon. Kontakt: Håkan Burden, RISE, (hakan.burden@ri.se)

Generering av dimma och väderklassificering. RISE och Veoneer har under våren 2022 genomfört en förstudie ”Dimhöljt” för lära hur dimma kan skapas i klimatkammare. Syftet med den genererade dimman är att testa lidar, t ex för att filtrera bort störningar, för att validera simuleringsmodeller, för att verifiera sensorprestanda eller för att verifiera att en funktion är inom ODD. Det finns i princip tre olika sätt att slå sönder vatten till fina droppar: med vibrationer, med trycksatt vatten eller med tryckluft; man kan även generera dimma genom att kondensera ånga. Dimma är våta aerosoler i storleksordning från våglängden av synligt ljus till en faktor 20-50 ggr större. Projektet har också undersökt hur mätning av dimmans karaktäristik utförs på lämpligt sätt. Mätningar måste bland annat inkludera storleksfördelning av partiklar och mängden vatten i flytande form. Det är viktigt att skapa repeterbart testsystem med dimma. I projektet studerades därtill hur man med en lidar kan klassificera vädertyper såsom dimma, regn, snö, klart väder. Studien baserades på mätningar utomhus och i klimatkammare. De inledande försöken har varit framgångsrika och tanken är att förstudien ”Dimhöljt” följs av en fördjupad ansats. Förstudien delfinansierades av Vinnova/FFI, 2021-02582. Kontakt: Martin Sanfridson, RISE, (martin.sanfridson@ri.se)

Autonoma fordon för blinda, döva och dövblinda. I en nyligen publicerad journalartikel vid namn ”Vibrotactile guidance for trips with autonomous vehicles for persons with blindness, deafblindness, and deafness” presenteras resultat från Drive Sweden projektet ”Guidning till autonoma fordon för blinda, döva och dövblinda”. Studien visar bland annat på vikten av att beakta användarperspektivet för hela resan, inte bara fordonet i sig. Artikeln finns att läsa här. Kontaktperson Jonas Andersson (jonas.andersson@ri.se)

Best student paper på IEEE konferens. Vid konferensen IEEE Intelligent Vehicles Symposium vann doktoranden José Manuel Gaspar Sánchez och industridoktoranden Truls Nyberg från KTH och Scania första pris i kategorin ”Best student paper” med artikeln ”Foresee the Unseen: Sequential Reasoning about Hidden Obstacles for Safe Driving”. I samarbete mellan KTH och Scania har studenterna utarbetat en algoritm för autonoma fordon för att hantera skymda trafikanter på ett säkert och effektivt sätt. Forskningen har finansierats genom Vinnovas center TeCOSA och forskningsprogrammet WASP.
Andra pris i kategorin gick till industridoktoranden Magnus Gyllenhammar vid KTH och Zenseact för artikeln ”Uncertainty Aware Data Driven Precautionary Safety for Automated Driving Systems Considering Perception Failures and Event Exposure”, också den finansierad genom WASP. Kontaktperson Truls Nyberg (truls.nyberg@scania.com)  & Magnus Gyllenhammar (gyllenhammar@zenseact.com). 

Syntetisk data för validering. En vanlig utmaning inom maskininlärning är att ta fram realistisk data både för att träna sina nätverk samt för att validera dem. I dag är en vanlig metod att samla in data i den miljö där nätverket ska appliceras, t.ex. i trafiken, och sedan hoppas att det resulterande datasetet ska vara representativt. Detta är tyvärr sällan fallet eftersom att det är svårt att få med alla tänkbara scenarion. Inom FFI-projektet DIFFUSE utvecklas metoder för att skapa syntetisk data och bilder primärt för valideringssyften. Tanken är att förbättra de maskininlärningsmetoder som i dagsläget bara i begränsad omfattning ger kontroll över vad den resulterande bilden innehåller. Kontaktperson Martin Torstensson (martin.torstensson@ri.se)

Future mobility services in Ride the future-project. Ride the future is a multi-brand pilot where 8 partners join forces in running three autonomous buses along a 4 km route in Linköping’s Valla district. The partners are VTI, Linköping University, Linköping Science Park, Transdev Sweden AB, Östgötatrafiken, Linköpings kommun, Akademiska Hus and RISE. The area includes residential housing, businesses and the campus of Linköping University (LiU). 
Ride the future is furthermore one of the sites in the larger Horizon 2020-project called SHOW (SHared automation Operating models for Worldwide adoption), and a platform for several projects related to future mobility solutions. To date over 20 studies and research projects – completed and ongoing – are related to Ride the Future. A result conference was held 26 April and presented findings about the following topics:

  • Lessons learned from setting up a demonstration site with autonomous shuttle operation; paper (funding: SHOW)
  • Mobility for all – but who is ”all”?  paper (funding: Drive Sweden)
  • 5 feasibility studies (funded by VTI and summarised in here) about
    • Towards a digital twin of campus Valla for co-simulation of road users 
    • Exploring spatio-temporal accessibility in Lambohov: a pre-study. 
    • Data processing and visualization of mobile air quality measurements. 
    • Road surface unevenness and its impact on comfort and vibrations in low speed vehicles
    • Infrastructure needs at bus stops. 
  • The following studies were also presented at the conference. (funding in brackets):
    • Säkerhetsförarens uppmärksamhet och vakenhet (FFI)
    • The digital infrastructure of ELIN’s data collection (SHOW=EU)
    • Automated Vehicles as Social Agents: A Research Agenda (ELLIIT)
    • Cybersecurity of autonomous vehicles (Drive Sweden)
    • Digital guidance in public transport (funding: ERA-net)
    • Children’s perspective on future travels by autonomous bus (SHOW)
    • Autonomous shuttles for all – Experiences from children with intellectual disability (WASP-HS)
    • Game engine simulation of autonomous buses in a student project (LiU)
    • Ljudsignaler i interaktion mellan autonoma bussar och oskyddade trafikanter (LiU)
    • For more information and contact to project leaders, please get in touch with Ingrid Skogsmo (ingrid.skogsmo@vti.se)

Säkerhetskultur för automatiserade fordon. Målet för projektet Säkerhetskultur för automatiserade fordon är att utveckla metoder och verktyg för att kunna hantera säkerhetskulturen i organisationer som konstruerar och implementerar automatiserade fordon och maskiner. Projektet kommer att utforska befintlig säkerhetskultur och nya risker, samt utveckla mätinstrument för säkerhetskultur och pröva hur de kan appliceras på hållbarhet- och jämställdhetskultur. Säkerhetsfokus har länge legat på fordon och förare. Nu behövs organisationens och kundens betydelse lyftas fram. I projektet kommer därför en modell och verktyg utarbetas för att integrera säkerhetskultur i utvecklingsarbetet och för att stötta en lärandeprocess. Modellen utvecklas och utvärderas på två fallstudier från olika domäner, dels autonoma truckar samt automatiserade bussar i projektet Ride the future. En viktig aspekt av projektet är kunskaps och metodiköverföring mellan de olika tillämpningarna och mellan parterna VTI, RISE, Volvo GTT, Combitech och Toyota material handling. Projektet finansieras av Vinnovas FFI-program och genomförs på två år under ledning av VTI. Kontaktperson: Christina Stave (christina.stave@vti.se).

Studie om lastbil-VRU interaktioner inom FFI-projekt. Inom ramarna för FFI-finansierade projektet ”Externa interaktionsprinciper för förtroende och acceptans av tunga autonoma fordon” som bedrivs av Scania, RISE och Högskolan i Halmstad har doktoranden Victor Fabricius och kollegor publicerat en vetenskaplig tidskriftsartikel ”Interactions Between Heavy Trucks and Vulnerable Road Users—A Systematic Review to Inform the Interactive Capabilities of Highly Automated Trucks”. Artikeln syftar till att ge en översikt av den vetenskapliga litteraturen gällande dagens interaktioner mellan tunga lastbilar och oskyddade trafikanter – mer specifikt fotgängare och cyklister. En av insikterna från studien är att en stor del av interaktionen består av implicit kommunikation som till exempel fordons körsätt och rörelsemönster, och att den här typen av kommunikation i framtiden troligtvis kommer utgöra grunden även för interaktioner med automatiserade fordon. En annan insikt från studien är också att explicit kommunikation, i form av exempelvis ljussignaler på lastbilen i syfte att förtydliga lastbilens avsikter och handlingar, kan vara till nytta för interaktionerna. Utformning och nyttan av sådan kommunikation undersöks vidare i projektet som pågår fram till mitten av oktober 2022. Kontaktpersoner: Yanqing Zhang (yanqing.zhang@scania.com) och Daban Rizgary (daban.rizgary@ri.se)

Autonomous vehicle interactions in the hub. Scania, RISE, Boliden and Icemakers are working together in a research project “In the Hub – Samspel mellan operatörer och förarlösa fordon i framtidens transportsystem” funded by FFI. The aim is to investigate how natural interaction technologies can be integrated into autonomous transport systems to facilitate efficient and engaging experience in the hub contexts. An exploratory study have examined the potential of using verbal interaction and augmented reality (AR) to facilitate collaborations between professional human operators and unmanned self-driving heavy vehicles. Concepts that support operators in loading situations were designed and evaluated with forklift operators and rock-loading operators during a video-based study. Overall, the concepts received high scores in perceived efficiency and user experience. The results from the forklift operators supported the idea that more natural and social verbal interaction between operators and unmanned vehicles could lead to increased trust and acceptance compared to using simple voice commands. However, the results from the rock-loading operators showed that extensive use of voice interaction could become disturbing. The exploratory study thus supports the potential of using and further exploring verbal interaction and AR to facilitate human operators’ collaboration with self-driving vehicles, and the proposed concepts provide promising examples of interaction models for further investigation and implementation. The results have been presented in a paper which will be published in the conference “Applied Human Factors and Ergonomics” this year. Contact person: Yanqing Zhang (yanqing.zhang@scania.com) and Johan Fagerlönn (johan.fagerlonn@ri.se)

Heavy Automated Vehicle Operation Center (HAVOC) – Requirements and HMI design is a recently completed FFI-funded research project conducted by RISE and Scania with the following final project summary: Development trends suggest that, in spite of the optimistic announcements made by some stakeholders a few years ago, there are still technological challenges and regulatory constraints making heavy automated vehicles (HAVs) dependent on human control. Indeed, most HAV still require a human safety operator in the vehicle, and automated driving without a human “fallback” might be distant. At the same time, having a human safety operator in the vehicle jeopardises major anticipated benefits of HAVs – transport safety and efficiency. To bridge this gap, stakeholders are exploring remote operation technology, which enables HAV to be remotely operated by a human operator to some extent. The purpose of the HAVOC project was to study operator work and HMI for remote monitoring and control of heavy autonomous vehicles. The aim was to answer the following research questions:

  • What requirements are imposed on people and heavy vehicles for assessment, assistance, and driving?
  • What is required to scale the ratio between the number of operators and the number of monitored vehicles?
  • How should operator work be designed for transitions between assessment, assistance, and driving?
    A simulator was developed in Unity game engine with corresponding 3D-world and operator HMI to enable exploration of remote operation of ten vehicles in parallel. In a user study, 15 participants were invited to work for 1.5 hours and evaluate the system and work in terms of human-automation interaction. Human factors and HMI requirements were elicited for remote assessment, remote assistance, and remote driving operator tasks. The results show the importance of taking a systems perspective in developing and implementing remote operation control centers. See this link for an overview of the study and its results.
  • One of the major takeaways from the user study and the HAVOC project is the importance of a systems perspective in the analysis and design of future remote operation centers. The answer to questions such as “How many operators are needed?, How many vehicles can be monitored and controlled?, What is the best HMI?, What are the most important operator tasks?”  etc., will always rely on the dependencies between multiple human, technical and organizational factors. The ability to deal with the dependencies between factors such as operators’ skills and knowledge, operator tasks and training, HMI, vehicle capabilities, operational context, etc., lies in defining the envisioned work system and deciding what to design for. If a viable business case for remote operation is an operator:vehicle ratio of 1:1, 1:10 or 1:100 will place very different demands on overall human-automation systems design and work organisation. In this project, we have only considered single operator work. In a real application, teamwork between remote operators, traffic planners, and field personnel can be expected, further stressing the socio-technical systems approach. Contact person: Jonas Andersson (Jonas.andersson@ri.se)

Två nya samarbeten

Samarbete för underhållning i AV. Det svenska företaget Terranet som numer utvecklar teknologi för ADAS ska samarbeta med det tyska startupföretaget Holoride. Holorides fokus är på Virtual Reality (VR)-underhållning för passagerare i autonoma fordon . I samarbetet ska Terranets sensorteknologi vid namn VoxelFlowTM integreras med Holorides teknologi för underhållning. Holorides lösning är baserad på att skapa en virtuell miljö som återspeglar verkligheten utanför fordonet, och det är av den anledningen som Terranets sensorer kommer till nytta här. Länk

En boost för Torc Robotics autonoma körsystem. Daimler-ägda företaget Torc Robotics, som utvecklar system för autonoma lastbilar, påbörjar samarbete med mjukvaruföretaget Applied Intuition. I samarbetet ska Applied Intuitions simulerings- och valideringsverktyg nyttjas för att förbättra teknologin som Torc Robotics utvecklar. Länk

Skyttlar på rull igen

Samåkning med självkörande skyttlar har varit något mindre hett under pandemin men börjar nu rulla igen.

I Kista har Keolis tillsammans med T-engineering, Telia, Urban ICT Arena och Intel demonstrerat ett 5G-övervakat självkörande fordon som kunnat iaktta resenärers tillstånd samt kvarglömda föremål [1].

Utanför Birmingham har storstadskommunen Solihull blivit första Engelska kommun att äga en självkörande skyttel. Den lokalt utvecklade Aurrigo-skytteln kommer under en första testperiod erbjuda resor för allmänheten till och från stadens utställningscenter [2]

Egen kommentar

I klipp som beskriver Kistatestet ses och hörs bland andra RISE-medarbetaren Sigma Dolins som presenterade sin licentiatavhandling Diagnosing Sharing Anxiety på Chalmers igår. Grattis Sigma!

Källor

[1] Intelligent Transport. Keolis trials 5G-connected, remotely monitored autonomous electric minibus. 2021-10-29 Länk

[2] Intelligent Transport. Solihull Council, UK, launches trial of fully electric autonomous shuttle. 2021-10-22 Länk

Virtuell verklighet för underhållning

Det tyska startupföretaget holoride som nyttjar virtuell verklighet (VR) för att skapa underhållning för resor i (självkörande) fordon har nu avslutat en Serie A finansieringsrunda och fått in 10 miljoner Euro [1]. Finansieringsrundan har letts av det svenska företaget Terranet som utvecklar teknologi för förarstödssystem (ADAS).

Holorides VR-underhållning använder sig av fordonets accelerationer och rörelser för att stimulera användaren. Utryckt på ett annat sätt, det man ser i VR-glasögonen synkroniseras med det man fysiskt upplever i fordonet. Det blir som ett lager av gamification på verkligheten. Holoride har nyligen också vunnit en pitchtävling inom kategorin Entertainment, Gaming & Content som anordnas årligen av South By Southwest, en festival med fokus på media och underhållning [2].

Om vi skiftar fokus ifrån underhållning till säkerhet, så har forskare från Cambridges Universitet, Oxfords Universitet och University College London i Storbrittanien testat en 3D head-up-display som via förstärkt verklighet visar föraren information från LiDAR [3]. Syftet är att möjliggöra för föraren att ”se igenom” objekt för att bättre kunna undvika olyckor vid skymd sikt, eller detektera trafikskyltar som är skymda. Planen är att anpassa systemet så att det får plats i ett fordon och sedan testa det i fordon, vilket ännu inte gjorts.

Egen kommentar

Både virtuell och förstärkt verklighet är attraktiva teknologier som utforskats ganska länge. Ingen av dem har dock varit tillräckligt mogen för storskalig användning i fordonsbranschen. Men nu tycks dessa tekniker mognat något, och det är inte osannolikt att de får en viktig roll i autonoma fordon. Många aktörer i underhållningsbranschen ser nämligen autonoma fordon som en stor affärsmöjlighet.

Källor

[1] holoride. holoride Completes Series A Funding Round. 2021-04-22 Länk

[2] holoride. WE WON! holoride Honored at 13th Annual SXSW Pitch. 2021-03-22 Länk

[3] University of Cambridge. 3D holographic head-up display could improve road safety. 2021-04-26 Länk

Varför behövs Explainable AI (XAI)?

Våra liv är fyllda av förklaringar. Vi går till doktorn för att få vår onda axel undersökt. Doktorn säger till dig att vila armen och undvik tunga lyft. Dessutom får du ett recept på ett läkemedel. Du undrar direkt, varför behöver jag ta medicin? Du vill också få reda på vilken diagnos doktorn ställt på min axel? Och hur lång tid kommer det ta innan den blir bra? Du frågar efter mängder av förklaringar.

Legendaren Lance Eliot har skrivit en artikel om varför förklarande AI (Explainable AI, XAI) behövs för autonoma fordon [1].

Utmaningen ligger i att ställa rätt fråga och att den som förklarar förstår på vilken nivå förklaringen ska ges. Inte sällan sker förklaringen under en dialog allteftersom mer och mer information faller på plats hos den som ställer frågor.  

När människor interagerar sker denna dialog naturligt. Men vad händer om vi interagerar med en maskin, ett system eller ett autonomt fordon? Inga av dagens AI-baserade system har tillräcklig förmåga att fullständigt känna igen en människas beteende eller tal och därmed får AI-systemet problem att kunna engageras i en naturlig dialog med sina användare.

Tänk dig situationen när du åker i ett autonomt fordon som plötsligt tar en annan rutt än den vanliga eller att fordonet du färdas i plötsligt bromsar kraftigt. I ett vanligt fordon skulle du fråga chauffören varför detta plötsliga beteende. Men hur ska det ske i ett fordon utan mänsklig förare? Ska passageraren koppla upp sig till kundtjänst eller fjärrkontrollcenter?  Det skulle inte skala särskilt bra med flera hundra tusen fordon som samtidigt är ute och kör.

XAI är en mycket viktig komponent för att skapa autonoma fordon. Lämpliga och lägliga förklaringar till fordonets beteende kan vara avgörande för att vi användare ska kunna lita på fordonet.

Sammanfattningsvis, vi som åker med autonoma fordon kommer vilja ha förklaringar av olika slag från fordonet. Ett kostnadseffektivt och lättillgängligt system som kan ge dessa förklaringar skulle förkroppsligas av ett XAI som baseras på det AI-system som kör fordonet.

Egen kommentar

Som AI forskare inses lätt nyttan med denna typ av system, tänk om Alexa eller Siri förstod allt jag vill eller undrar! Samtidigt finns ett spännande kunskapsgap mellan vad som är möjligt att visualisera med avseende på information som ligger till grund för ett beslut i ett AI/Machine learning-system och ett system som kan interagera med en användare och som förstår innebörden av grunderna i beslutet.

Källa

[1] Lance, E, Forbes. Explaining Why Explainable AI (XAI) Is Needed For Autonomous Vehicles And Especially Self-Driving Cars. 2021-04-24 Länk

Huaweis nya AD Tech

Det kinesiska telekomföretaget Huawei har introducerat fem nya fordonsrelaterade produkter och lösningar: en radar, en bilskärm med förstärkt verklighet (augmented reality heads-up display, AR-HUD), en plattform för autonoma fordon, ett värmehanteringssystem, och en smart förarhytt [1].

Huaweis nya radar som kallas 4D imaging radar ska ha en rad nya förbättringar jämfört med existerande radarer. Exempelvis ska den kunna klara av svårare ljus- och väderförhållanden, ha bättre förmåga att upptäcka objekt utanför siktlinjen, och dessutom se i högre upplösning.

Ni kan läsa mer om resterande produkter i källan.

Ni kan också se en video här när Huaweis autonoma system utrustat på en Arcfox bil ifrån fordonstillverkaren BAIC demonstreras i Shanghai.

Källa

[1] Udin, E., Gizchina. HUAWEI RELEASES FIVE NEW CAR-RELATED PRODUCTS – HUAWEI OCTOPUS, 4D IMAGING RADAR, & MORE. 2021-04-18 Länk

Same same, but different?

Hur ska interiören i framtidens automatiserade fordon se ut, och hur påverkas designen utifrån kulturella aspekter? Det är en fråga som studerats av forskare vid universitetet i Aachen med nära koppling till Audi [1]. 

Enkätstudien med 28 experter på området från Kina, Tyskland och USA pekar på att behoven runt design för välbefinnande faktiskt är ganska lika, men att skillnader finns i hur olika funktioner bör designas. Till exempel så lyfter de kinesiska experterna behovet att kunna ”cocoona” och skärma av omvärlden, medan de tyska experterna trycker på vikten av funktionell design och god ergonomi.

Studien kommer dock med brasklappen att experternas åsikter inte nödvändigtvis speglar kundernas.

Egen kommentar

Även designen av dagens fordon och tillhörande tjänster präglas av kulturella skillnader. I Japan är till exempel mycket vanligare med diverse ikoner jämfört med Europa. Men att identifiera exakta skillnader för framtida fordon är svårt och kräver en kombination av olika studier och metoder.

Källor

[1] Suaer et al., Designing automated Vehicle interiors for Different Cultures: evidence from China, Germany, and the United States. Feature, Oktober 2020 Länk

Design för välmående

Förra veckan var Högskolan i Halmstad värd för seminariet What’s the fun in parking? – Wellbeing, Interaction Design and Cars med Marc Hassenzahl, som är professor inom Ubiquitous Design / Experience and Interaction vid Universiteit of Siegen. Presentationen sammanfattades i följande fem punkter [1]:

  • All teknologi formar oundvikligen vårt välmående genom försedd funktionalitet och interaktion.
  • Välmående (eng. wellbeing) bör vara startpunkt för all design. Vi behöver mer ”value-fiction” och mindre ”science-fiction”, alltså mer social innovation och mindre rent tekniskt baserad innovation.
  • Utmaningen att designa för välmående är att identifiera, förstå, omformulera eller uppfinna positivt vardagligt handlande, och materialisera detta genom interaktion och form; ”Towards a humanistic approach to technology design”.
  • Designers behöver vara medvetna om normativa påföljder och det ansvar de har för att forma människors välmående.
  • Vi behöver hitta svar på hur vi bäst designar för ”otherware” (dvs. teknik med interaktiva AI-komponenter).

Egen kommentar

Prof. Hassenzahl lyckas bra med att exemplifiera teori om upplevelsedesign och välmående med konkreta exempel. Han betonar vikten att (produkt)utveckling bör följa en viss ordning, enligt aspekterna: 1) Varför (upplevelse/behov), 2) Vad (aktivitet) och 3) Hur (interaktion). De som är med och utvecklar produkter och tjänster (och styr dessa aspekter) har stora möjligheter och likaså ansvar vad gäller utfallet, även om det sedan är mer situationsspecifika aspekter (t.ex. vem/var/när) som formar upplevelser i stunden.

Det ges härmed en tydlig rekommendation att ta del av seminariet i sin helhet. Jag kan också tipsa om två andra ”Zoom-inars” (i härligt amerikanskt debattformat) med teman The driverless new normal och The future of public roadway transit [2].  

Källor

[1] Halmstad Högskola Colloquium. 2020-05-24 Länk

[2] Fishkin, F. Pyle, K. Bino, M. Jeremiah, L.  Zoom-Tank. 2020. Länk