IRIDA Labs Your eyes to the future

Transcript

1 IRIDA Labs Your eyes to the future Καινοτόμες εφαρμογές στο χώρο της μηχανικής όρασης ως αποτέλεσμα επιτυχημένων συνεργασιών με ακαδημαϊκά ιδρύματα Χρήστος Θεοχαράτος,, PhD

2 Key Facts 2 IRIDA Labs is operational from Today 10 people, all with strong engineering background and experience on computer vision systems. Our main R&D focus is in: Embedded systems for computer vision - Project SYNTHESIS under Corallia: Image and decision fusion chipset (IP cores). Algorithm design for information processing 4 National and 3 EU projects. Since 2009 IRIDA Labs is funded in R&D projects by key European organizations (e.g. ESA, EDA). Within 3 years IRIDA Labs has already: Deployed VISTA technology currently ported in custom processor of a US company for mobile devices. Developed embedded software for ANPR (PC and DSP). Developed a proprietary car plate detection IP in FPGA also suitable for ASIC design.

3 Reference Projects 3 SYNTHESIS: Development of a Data and Decision Fusion Chipset, funded by the Ministry of Development, Greece Ongoing. ShipDetect: Development of CFAR ship detectors based on SAR data, funded by General Secretariat of Research and Technology Ongoing. NICE: Nonlinear Innovative Control designs and Evaluations, funded by the European Defense Agency (EDA), Joint Investment Programme on Innovative Concepts and Emerging Technologies (ICET) Ongoing. BalkanGEONet: Balkan GEO Network Towards Inclusion of Balkan Countries into Global Earth Observation Initiatives, FP7-ENV-2010 Ongoing. ASTUTE: Pro-active decision support for data-intensive environments, ARTEMIS-FP7 Ongoing. Opticon: Novel nanomaterial and process used in third generation optical disc mastering, nanoelectronic devices and other nano processes, funded by GSRT Ongoing. MEO-GR: Mapping of Greek Requirements and Capabilities in Earth Observation, funded by European Space Agency Completed.

4 Core Team & Experience 4 Christos Theoharatos R&D Manager Founder Phd in computer vision Acknowledged contribution on computer vision (IEEE pubs, references) Vassilis Tsagaris Business Dev - Founder Phd in information processing 10 years of experience in project management (ESA, FP6-FP7) Nikos Fragoulis Technical Director - Founder + 7 Hardware/Software Engineers and growing up + strong Advisory Board Phd in microelectronics 15 years of experience in IT industry

5 IRIDA s Winning Team 5 Dimitris Besiris MSc. in Electronics, pursuing PhD in Computer Vision Senior Hardware Engineer Collective Skills Ilias Theodorakopoulos MSc. in Electronics, pursuing PhD in Machine Learning Senior Software Developer Vangelis Vassalos MSc. in Electronics Junior Hardware Engineer Nefeli Politi-Stergiou BSc in Physics, Machine Learning Marketing and Administrative Assistant Dimitris Kastaniotis MSc. in Electronics and Information Processing Junior Embedded System Engineer

6 Problem, Solution & Markets 6 New opportunities arise from the large sensor availability Industrial vision Image Fusion Surveillance & ITS ANPR Video Stabilization Mobile devices Vehicle Detection and Tracking IRIS IP core machine vision library

7 Products / Technologies in Computer Vision 7 Embedded Vision Software: RTL soft cores (FPGAs, ASIC) System On a Chip (SOC) solutions IRIS-CPD Automatic Car Plate Detection SYNTHESIS TM Image Fusion system and IRIS-FUSE TM series Image Fusion IP blocks Image Signal Processing (ISP) Pipeline De-Bayer, 3A Algorithms, Gamma Correction, Color Transformation, Auto-White Balance, Filtering Machine Vision Library Edge detection, Binarization, Segmentation, Motion detection and tracking, Blob analysis Software for DSPs IRIS-VISTA Video Stabilization software IRIS-WATCH Vehicle detection, trajectory tracking and counting software IRIS-CPD Automatic Car Plate Detection All systems and building blocks are available in GPPs

8 8 Products & Technologies A. Image Video Fusion B. Computer Vision Pipeline IP Cores C. Video Analytics

9 A. Image Fusion 9 Image fusion refers to synergistic use of data from complementary image or video sources and sensors of different modalities (e.g. Optical, Infrared, Multi-spectral, SAR) in order to obtain a fused entity that contains all the important (user-defined) information. Information fusion for surveillance purposes Fusion of panchromatic and multispectral data for remote sensing applications (increase spatial resolution)

10 Portfolio 10 IRIS_FUSE-LCM (Linear Combination Method) IRIS_FUSE-PCA (Statistical Based Fusion) IRIS_FUSE-VTVA (Linear Color Fusion) IRIS_FUSE-NLF (Non-Linear Fusion Method) SYNTHESIS (Multi-method Image fusion IP block)

11 IRIS_FUSE-VTVA: Color Image Fusion Linear technique 11 Infrared Sensor: Visual Sensor: Output Input Indicative Implementation Metrics: Altera Cyclone II EP2C35F672C6 FPGA device Area LR LUT LC Clk. Freq. (MHz) Fps

12 B. Computer Vision Pipeline IP Cores 12 CV Pipeline Portfolio includes: Color Space Conversions Image Filtering, Edge Detection White balance, 3A algorithms De-Bayer IRIS-VIDEO Image Segmentation Automatic Thresholding Motion Detection ANPR Automatic car Number Plate Recognition

13 13 C. Video Analytics (Soft IPs) 1. IRIS-CPD Car Plate Detection 2. ifare Face Detection and Recognition 3. IRIS-VDT Vehicle Detection and Tracking 4. IRIS-PDT People Detection and Tracking 5. IRIS-VISTA Video Stabilization (VISTA)

14 1. IRIS-CPD Car Plate Detection 14 Features: Accurate location and matching of vehicle plates Conduct surveillance in any environmental setting Ability to capture multiple license plates at highway speeds Functionality verified on Altera and Xilinx FPGA platforms Applications: Law Enforcement, Revenue Control Parking Enforcement and Inventory Security and ITS IRIS-CPD-Demo

15 2. ifare Face Detection and Recognition (1/2) 15 Features: Fast and precise face recognition and identification Supports face recognition in still images and real-time video streams Works with entire faces or facial features Stable recognition independent of lightning conditions Available in PC and DSP platforms Applications: Surveillance of restricted areas Government offices Banks and Corporate offices

16 2. ifare Face Detection and Recognition (2/2) 16 ifare-demo Minimum Detectable Face Size Parameter 60x60 pixels 40x40 pixels Frame Rate: 22 fps (on avg.) Frame Rate: 13 fps (on avg.)

17 3. IRIS-VDT Vehicle Detection and Tracking 17 Features: VDT is an ITS system for detecting and tracking of moving vehicles Advanced feature extraction and tracking methods, in real-time Enables: Trajectory monitoring Vehicle counting Speed calculation Applications: Video security and surveillance ITS, Traffic and revenue control IRIS-VDT-Demo

18 4. IRIS-PDT People Detection and Tracking 18 Features: Real-time people detection and tracking Accurate detection independent of lightning conditions Can involve complicated occlusions, cluttered or moving backgrounds Applications: Video security and surveillance Surveillance of airports and train stations Video indexing IRIS-PDT-Demo

19 5. IRIS-VISTA Video Stabilization System 19 Features: Fast and precise video stabilization in real-time Effective design, uses a restricted amount of system resources Supporting Platforms: Windows 7 32/64 bit, Windows XP 32/64 bit Linux 32/64 bit Running Modes: Capture from camera and stabilize in real time Load video, preview and save results in.avi file IRIS-VISTA-Demo

20 Milestones 20

21 21 Συνεργασία με Ακαδημαϊκά Εργαστήρια Η «ιδιαίτερη» σχέση μας με το Πανεπιστήμιο Πρακτική Άσκηση Μια ευτυχής συγκυρία Οφέλη επιτυχημένων συνεργασιών Ανάγκες Φοιτητών vs. Εταιρεία

22 Η σχέση μας με το Παν.Πατρών (1/2) 22 Η IRIDA Labs ιδρύθηκε το 2007 από ερευνητές του Παν. Πατρών Οι συνιδρυτές κατέχουν MScστην Ηλεκτρονική και έχουν εκπονήσει τα Διδακτορικά τους στο Εργαστήριο Ηλεκτρονικής (ELLAB) του Τμ. Φυσικής Όλοι οι εργαζόμενοι προέρχονται από το ELLAB Ουσιαστικά, όχι τυπικά, spin-off του Πανεπιστημίου Η φιλική σχέση της IRIDA εκτείνεται σε: Στενή συνεργασία με τα μέλη ΔΕΠ του Εργαστηρίου, σε ερευνητικό και διδακτικό επίπεδο Συνεργασία στα πλαίσια κοινών Εθνικών και Ευρωπαϊκών έργων Συνεργασία στα πλαίσια κοινών δράσεων και συμμετοχή σε συνεργατικούς σχηματισμούς Επαγγελματική προοπτική για ταλαντούχους επιστήμονες του χώρου, με κίνητρα εξέλιξης και αγάπη για τη δουλειά τους

23 Η σχέση μας με το Παν.Πατρών (2/2) 23 Συνεργασία στα πλαίσια του έργου SYNTHESIS: Development of a Data and Decision Fusion Chipset. Υπεργολαβία στο ELLAB που αφορούσε ανάπτυξη αλγορίθμου σύνθεσης δεδομένων και αποφάσεων σε επίπεδο hardware. Εκπαίδευση μελών της εταιρείας στα πλαίσια του σεμιναρίου VIDEO-HSW. Συνεργασία στα πλαίσια του έργου ShipDetect: Development of CFAR ship detectors based on SAR data. Υπεργολαβία στο ELLAB που αφορά ανάπτυξη αλγορίθμων για εξαγωγή χαρακτηριστικών για την ανίχνευση πλοίων και ανιχνευτών πλοίων. Συνεργασία μέσω Projects και MSc Thesis με φοιτητές των 2 MSc Courses, σε αντικείμενα σχετικά με την έρευνα που απαιτείται για μελλοντική ανάπτυξη «έξυπνων» συστημάτων στον χώρο του MV.

24 Πρακτική άσκηση στην IRIDA Labs 24 Επικοινωνία με τους υπεύθυνους του τμήματος Φυσικής του Παν. Πατρών, για το πρόγραμμα πρακτικής εκπαίδευσης Άμεση απόκριση για συμμετοχή και ανεύρεση του κατάλληλου υποψηφίου Επιλογή της κας. Νεφέλης Πολίτη-Στεργίου Μαθήματα κατεύθυνσης στην Ηλεκτρονική Διπλωματική εργασία στο ELLAB Image Processing algorithms 3-μηνη εργασία στην IRIDA, στα πλαίσια της πρακτικής άσκησης Έναρξη: 1 Ιουλίου Λήξη: 1 Οκτωβρίου

25 Αντικείμενα απασχόλησης Ανάπτυξη Συστήματος Διαχείρισης Ποιότητας (ISO 9001:2008) Δημιουργήθηκε ένα σύστημα διαχείρισης ποιότητας (QualityManagementSystem) Συνεργασία με τον Quality Managerκαι τις εταιρείες DIAPLOUSκαι THINK SILICON 2. Εκτέλεση πειραμάτων στα πλαίσια του έργου NICE EDA 3. Συνεργασία στα πλαίσια του έργου BalkanGeoNet, FP7-ENV-2010 Καταγραφή των δράσεων και των προγραμμάτων για την Παρατήρηση της Γης - Τηλεπισκόπηση, στην Ελλάδα 4. Διαμόρφωση του εταιρικού Web-Site και την προβολή της εταιρίας στο διαδίκτυο Διαμόρφωση του web-site, Δημιουργία και διαχείριση λογαριασμών της εταιρείας στο Youtube, το LinkedIn και το Tweeter 5. Εκπαίδευση και συμμετοχή στις διοικητικές διαδικασίες της εταιρίας

26 Το ευτυχές αποτέλεσμα 26 Συνέχιση της συνεργασίας με την IRIDA Labs Απασχόληση σε όλα τα παραπάνω αντικείμενα, plus Συμμετοχή σε διεθνείς εκθέσεις, όπως η VISION 2011 που έγινε στη Γερμανία τον Νοέμβριο του 2011 Marketing και Administration assistant Υπεύθυνη logistics και quality management

27 Η συνέχεια και το όραμά μας 27 2 ος κύκλος πρακτικής εκπαίδευσης, επιλογή του κ. Γιώργου Δαγλαρίδη Μαθήματα κατεύθυνσης στην Ηλεκτρονική Διπλωματική εργασία στο ELLAB Υλοποίηση Κυκλωμάτων Πολλαπλασιαστών με χρήση VHDL & Verilog 3-μηνη εργασία στην IRIDA, στα πλαίσια της πρακτικής άσκησης Έναρξη: 1 Απριλίου Αντικείμενο: real-time implementation of convolution kernels (filtering, edge detection) on a smart camera (using FPGA Spartan-6) Συνεχής συνεργασία για εκπαίδευση φοιτητών και ανεύρεση «ταλέντων» και ανθρώπων με όραμα και αγάπη για δημιουργία

28 28 Οφέλη και Όραμα μιας επιτυχημένης συνεργασίας Τόσο τα ακαδημαϊκά ιδρύματα, όσο και οι εταιρείες έχουν οφέλη από μια συνεργασία Η συνεργασία ενθαρρύνει την μεταφορά και τη διάδοση της γνώσης Συμβάλλει στη δημιουργία μακροπρόθεσμων σχέσεων και ευκαιριών Ενισχυθεί τις μελλοντικές προοπτικές απασχόλησης των σπουδαστών Αν η Ελλάδα θέλει να πετύχει στους τομείς της καινοτομίας και της επιχειρηματικότητας πρέπει Να βελτιωθεί ο διάλογος μεταξύ του τομέα της Εκπαίδευσης και της Αγοράς Το κλειδί είναι η συνεργασία μεταξύ της τριτοβάθμιας εκπαίδευσης και των επιχειρήσεων, προκειμένου να διαμορφώσουν τα προγράμματα σπουδών και δεξιότητες που απαιτούνται για την επιτυχία.

29 29 Οφέλη και Όραμα μιας επιτυχημένης συνεργασίας Ιδρύματα Θα κερδίσουν συνεργάτες για καθοδήγηση και εκπόνηση διπλωματικών εργασιών Θα αποκτήσουν συνεργάτες για χρηματοδότηση έργων με σκοπό την επαγγελματική εξειδίκευση και των δύο μερών Θα δημιουργηθεί καλό όνομα σχετικά με την μετέπειτα απασχόληση των αποφοίτων Θα βελτιωθεί και θα τροποποιηθεί ο εκπαιδευτικός κύκλος, μέσω της ανάδρασης με τους αποφοίτους Σπουδαστές Θα μπορούν να ψάχνουν για απασχόληση σε ένα οικείο περιβάλλον κατά τη διάρκεια των σπουδών τους Μέσω πρακτικής και project, θα είναι σε συχνή επαφή με το πραγματικό εργασιακό περιβάλλον, θα αποκτήσουν εργασιακή εμπειρία και να μάθουν για τις ευκαιρίες που τους παρέχεται Εταιρείες Θα έχουν την ευκαιρία να συνεργαστούν με ταλαντούχους μαθητές, ήδη κατά τη διάρκεια των σπουδών τους Θα αποκτήσουν πρόσβαση στο ακαδημαϊκό περιβάλλον και τους πόρους του, δηλ. σε νέους επαγγελματίες και νέες γνώσεις Θα έχουν την ευκαιρία να παρουσιάσουν τον εαυτό τους στα ιδρύματα και στο προσωπικό / φοιτητές μέσα από ατομικές παρουσιάσεις και workshops σχετικά με τις ευκαιρίες εργασίας

30 Ανάγκες φοιτητών vs. Εταιρεία 30 ΠΡΕΠΕΙ να υπάρξει σύνδεση του Πανεπιστημίου με τον Ιδιωτικό τομέα Ανάγκες των φοιτητών Απόκτηση επαγγελματικής εμπειρίας Δυνατότητα υλοποίησης και επέκτασης των γνώσεων που έχουν αποκτηθεί στο πλαίσιο των προπτυχιακών σπουδών Ανάπτυξη νέων ερεθισμάτων και εμπειριών και για μεταπτυχιακές σπουδές Η IRIDA Labs Υλοποίηση τεχνολογιών και προϊόντων σε ευρωπαϊκό και παγκόσμιο περιβάλλον Ψάχνουμε συνεργάτες που να αγαπούν αυτό που κάνουμε!!!

31 Ευχαριστώ! 31 Χρήστος Θεοχαράτος