Posts Tagged: Aerial AI

Home » Aerial AI

(English) How to capture a perfect drone video for your ultimate traffic survey?

The employment of drones and automatic image analysis offers new possibilities in traffic surveys, thanks to the accuracy of the measurement, the coverage range and the uniqueness of the obtained data. The camera is the most sensitive on the change of the position of ground objects in all directions when using the bird’s eye view. The dynamic occlusion between individual objects is minimalized as well.

These factual reasons together with advanced algorithms for extraction of traffic data ensure perfect information about every single participant of traffic flow.

Main aspects:

  • Angle of recording/ drone position
  • Lens speed / parasitic optical phenomena
  • Resolution & framerate & bitrate
  • Legislation

Source: DataFromSky.

Angle of recording / drone position

In terms of accuracy of vehicle localization, the most ideal drone position is directly above the intersection — so-called TOP DOWN VIEW. At this position, the camera is the most sensitive to the change of the position of the object in the scene, therefore an extremely precise measurement of vehicle speed and acceleration is made possible. At the same time, the dynamic occlusion between individual objects is minimalized. Nevertheless, drone suspension directly above the traffic node is not always possible due to safety regulation and applicable legislation. In a situation like this, a simple rule applies — place the drone in such position that the view of the analyzed section is near to the bird’s eye view.

The procedure is as follows:

  1. Fly with the drone to the nearest possible place in the middle of the intersection.
  2. Ascend to the maximum possible height. However, do not cross the height where a pixel resolution of monitored objects would be less than 20×20 pixels.

There is a notable drop of the accuracy of the vehicle localization (please note that this does NOT hold for DETECTION or for  CLASSIFICATION) if the angle of the view is higher than 55 degree.

A simple rule is as follows:

  • Angle of incidence ˂ 55 degrees = the drone should always be higher than the distance between the projection of the drone position on the ground and the center of the intersection.
  • 45 degrees means, that the drone altitude is the same as its distance from the center of the intersection.
  • 0 degrees means that the drone is directly above the intersection.

Figure: three situations -0° = ideal position, 45° = ok, altitude is the same as distance from the center of the intersection, 55° = drone should be higher. Source: DataFromSky.

The drone should always be positioned in that way so the dynamic and static occlusions are avoided. Occlusions increase the probability of failure of object tracking and of disengagement of continuous trajectories, in other words, one object will have a higher number of shorter trajectories. The systems are robust against short occlusions, but long occlusions can cause the disengagement of continuous trajectories into more parts.

Figure: two situations — long occlusions are problematic, but system is robust against short occlusions. Source: DataFromSky.

Try to keep the drone in the same position when recording. Do not change the drone altitude nor the camera take and zoom when recording. All parameters should have been set before the start of recording. For high-quality recordings, it is better to use a camera with ultra-wide range lens, not with fish eye lens, which causes high distortion especially noticeable at image margins.

Figure: two situations — try to avoid changing drone position when recording, and also avoid recording against the strong source of light. Source: DataFromSky.

Parasitic optical phenomena / lens speed and scene acuity

When recording, try to avoid parasitic optical phenomena in camera take, which may be caused for instance by the sun or another strong source of light. Always turn the camera in such a way that this strong source of light is not recorded by a camera. Takes of scenes with sky should be avoided.

Figure: three situations — nok: too bright (left), ok: ideal (center), nok: blurred due to low exposure time (right). Source: DataFromSky.

Focusing should always be carried out in such a way so the vehicles / objects are not blurred in a take. At the same try to set the camera in such a way so the objects are contrasting but not over-bright nor too much dark. This should be considered even at the expense of other parts of the shot. In case of night recordings or the recordings at the low light conditions, it is important that besides vehicles also the traffic elements are visibly identifiable.

Figure: nok — four situations. Source: DataFromSky

An image from camera ought not to be deformed by shaking (caused by drone motor vibrations) as a majority of cameras use the rolling shutter function to load image data in rows. If the vibrations are not sufficiently damped, their effect will occur in the form of shaking in between rows within the image. This shaking then lowers the accuracy of the used stabilization methods. Motor vibrations can be damped with suitable damping elements.

Resolution, FPS and bitrate

Resolution is a key attribute for the detection and classification of objects. The minimal size of an object within the image (for its detection) is 15×15 pixels, while for its correct classification, a resolution of 30×30 pixels is needed. A recommended size for objects within the image is between 30×30 pixels up to 150×150 pixels in the whole monitored area within the intersection. Object size depends on the following parameters:

  • Image resolution
  • Drone’s position — altitude / angle
  • Mutual position of a monitored object and a drone/camera

A common rule is that if you record the video with maximal resolution used by modern cameras these days (e.g. 4K or 5K), it will be sufficient, as it is always possible to reduce the quality, but not the other way around. The following is a simple guide for resolutions:

  • A distance with oblique angle < or = 120 meters -> FULL HD (1920×1200) resolution will be sufficient, but it is better to use a higher resolution (2k/4k)
  • A distance with oblique angle > 120 to 300 meters -> use 4K video resolution

Figure: min resolution. Source: DataFromSky.

Framerate represents the sampling frequency of measurements. For vehicle speed up to 70 km/h, it is possible to use a framerate 15FPS. For vehicle speed over 50 km/h, it is better to use sampling frequency around 25 FPS. Sampling frequency over 35 FPS has no further positive effect on the quality of measurement, but only makes the video and its size unnecessarily large. The final quality of the video is also greatly influenced by bitrate settings. At FULL HD videos, coded with the H264 coding format, the bitrate should be at least 10 Mbit/s. At 4K videos, coded with H264, a minimum of 20 Mbit/s is necessary. The video must not be blurry, pixelated, or any signs of damage caused by compressing algorithms.

Tip for beginners: record video with 4K resolution and 25 FPS with standard bitrate (approx. 20 Mbit/s)

By following these rules you will get suitable videos for automatic processing to extract super-accurate data for your traffic study. Before the final recording, we recommend to carry out a test flight or make a few sample recordings in order to get acquainted with the basic principles. If you have any questions, do not hesitate to contact us.

Legislation & safety

Before the recording itself, always check what are the legal conditions for the recording of traffic in your country. Legislation differs from country to country and sometimes it is required to use services of a professional pilot with necessary permissions. There is also a predefined maximal flight altitude for drones in many countries (usually 120 meters), as well as a minimal safety distance (usually 50–120 meters away from objects). If the recording is carried out by a professional pilot, it is possible to gain permission even at different conditions. Always take the possible risks of technical failure into consideration.

If you do not want to carry out the recording by yourself, do not hesitate to contact us. We have a network of experienced and certified pilots all around the globe within the DataFromSky PILOT program. We will provide you with consultations about your project and its requirements in order to find the most suitable solution. We can also carry out the recording for you if necessary.

DataFromSky is a complex system for fully automated extraction of accurate traffic data using AI and machine learning methods. It has been developed and used for the purpose of traffic studies since 2013. DataFromSky AERIAL is a state-of-the-art and fully automated service for video analysis from the bird’s eye view (drones, balloons) for acquiring of super-accurate data not only for traffic research. DataFromSky LIGHT is a service for data analysis from low-altitude cameras for standard traffic research, fully automated as well. Try and see all the traffic magic FOR FREE!

Read more

Analisi aerea DataFromSky nei Paesi Bassi

ROELOFS, partner esclusivo di DataFromSky nei Paesi Bassi, ha svolto complesse ricerche di traffico su un nodo stradale nella provincia di Gelderland. I dati raccolti con un drone e analizzati dalla piattaforma aerea DataFromSky verranno utilizzati come fonte principale per uno studio sulla manutenzione programmata di alta entità nel 2021.

Il drone è stato innalzato sulla rotonda del Misterweg N318 a Winterswijk. Durante la fase di manutenzione di questa strada, si valuta così se è possibile migliorare la sicurezza stradale. Tra i molteplici servizi offerti, DataFromSky permette infatti di analizzare il comportamento del traffico e della sicurezza stradale, effettuare l’analisi del rischio di situazioni pericolose, calcolare il Tempo di Collisione, Frenate Improvvise e l’analisi di molti altri fattori.

Per molti anni, i dati sono stati raccolti da persone in piedi a bordo strada, quindi i dati sono stati valutati manualmente. Questo processo era lungo, inefficiente e con output di dati a bassa precisione. Tutte queste carenze sono state superate da un nuovo approccio moderno che unisce due grandi tecnologie del mondo attuale: i droni e l’intelligenza artificiale.

Traffic flow – trajectories: green – cars, yellow – heavy vehicles, red – bicycles, blue – pedestrians

Read a post in “de Gerlander” online magazine.

Read more

DataFromSky supportata dall’Agenzia Tecnologica della Repubblica Ceca

L’intero team di DataFromsky è felice di annunciare che l’Agenzia tecnologica della Repubblica Ceca ha sostenuto il nostro progetto nel programma internazionale “Delta”. Siamo riusciti a realizzare un progetto chiamato “Sviluppo della piattaforma di gestione del traffico per grandi eventi sociali con l’utilizzo di un drone impostato su tecniche di rilevamento visivo”.

Lo scopo del progetto è sviluppare un’intelligenza artificiale aerea – una piattaforma mobile completa per il monitoraggio in tempo reale del traffico e dei grandi eventi sociali, utilizzando un UAV (Unmanned Aerial Vehicle, o drone) e metodi avanzati di visione artificiale basati sull’IA. L’obiettivo è sviluppare un sistema a rapida implementazione per la sorveglianza in tempo reale di un’area definita, attraverso il riconoscimento automatico degli oggetti e la loro classificazione, il monitoraggio e la valutazione automatica del movimento. I dati di immagine estratti verranno analizzati per rilevare comportamenti non standard, situazioni di traffico, disturbi della zona e altri parametri definiti dall’utente. I dati sul traffico verranno utilizzati per la valutazione immediata del traffico mediante simulazioni. Il sistema ha un’elevata probabilità di essere utilizzato nel comparto di monitoraggio del traffico (drone della polizia) o nel campo della sicurezza.

La novità di questa soluzione è l’implementazione di un UAV intelligente, che fornirà informazioni sugli oggetti in movimento durante l’operazione di volo e interpreterà questi dati nel contesto di una particolare applicazione. Questa piattaforma particolarmente flessibile viene utilizzata ovunque sia necessario analizzare la situazione in tempo reale.
Il progetto è un compito multidisciplinare che combina le ultime tendenze in termini di robotica mobile (UAV), di visione artificiale e di analisi di telemetria automatizzata. Il sistema sarà integrato in un’unità più avanzata per valutare le situazioni di traffico e i piani di traffico basati sulle simulazioni.

Read more

Analisi avanzata del traffico in una rotatoria con DataFromSky

Hai bisogno di eseguire l’analisi operativa di una rotatoria sulla base dei dati reali di traffico? DataFromSky supporta il calcolo di una vasta gamma di parametri operativi come il gap time critico/follow-up time/headway critico, ecc. Ottieni dati di traffico estremamente accurati per la tua ricerca e/o studio del traffico indipendentemente dal tipo di intersezione utilizzando DataFromSky.

Monitorare e analizzare il comportamento del traffico nelle intersezioni e nelle rotatorie è un compito estremamente importante nell’attuale ricerca sul traffico. L’analisi della traiettoria fornisce una conoscenza approfondita della situazione di traffico, in quanto si comprende il comportamento di ogni utente nella scena analizzata grazie alle numerose informazioni. DataFromSky è in grado di estrarre automaticamente le traiettorie e le loro caratteristiche statistiche spazio-temporali con una precisione molto elevata e un’alta frequenza di campionamento. Avere dei dati di traffico accurati è essenziale per qualsiasi ricerca nel campo dell’analisi del traffico come:

  • classificazione del modello di movimento, rilevamento anomalo del modello stesso;
  • estrazione dei dati di traffico, previsione di modelli di traffico a breve termine non ricorrenti;
  • sviluppo di modelli di comportamento di guida di prossima generazione, raggruppamento di traiettorie;
  • nuova prospettiva per analizzare il comportamento degli utenti – ricerca dei gap invece che del comportamento di accettazione;
  • valutazione di metodi/modelli di simulazione del traffico su dati reali, stime di capacità;
  • studi sulla congestione stradale, tempo di viaggio, conteggio dei veicoli, analisi basate sulla traiettoria;
  • sicurezza stradale, sicurezza dei pedoni e dei ciclisti, interazioni strada-utente, analisi Smart;
  • il processo decisionale del guidatore e le interazioni complesse di altre variabili, variabilità del traffico;
  • prova empirica multi-previsionale;
  • studio dell’effetto dell’adattamento comportamentale.
  • Read more

    Analisi automatica del traffico su un’area di 55.000 m2? Possibile!

    Conteggio e classificazione degli oggetti, valori di velocità e di accelerazione, matrice O/D e molto altro su un’area di 55.000 metri quadrati. DataFromSky è il nome dell’intelligenza artificiale su area più avanzata per la comprensione dei movimenti nei video presi da droni, palloni o elicotteri.

    Analisi automatica del traffico su un’area di 55.000 m2 …. È possibile con DataFromSky!

    Dai un’occhiata a questo video proveniente dall’Italia ripreso da un pallone. La durata del video è di 2 ore e 31 minuti. DataFromSky ha rintracciato 5.455 utenti (4881 auto, 325 veicoli medi, 77 veicoli pesanti, 68 autobus, 101 motocicli, 1 bicicletta e 2 pedoni) con una velocità media di 12,24 km/h e la distanza totale percorsa da tutti i partecipanti fino a 1.847 km! Hai bisogno di dati estremamente accurati sul flusso del traffico? Contattaci!

    Read more