Μπορεί μια κάμερα μηχανικής όρασης με ενσωματωμένο FPGA να επιταχύνει καθήκοντα πραγματικού χρόνου για επεξεργασία εικόνας;

Ένα Κάμερα οραματικής μηχανής με FPGA αποτελεί σημαντική πρόοδο στον τρόπο με τον οποίο τα βιομηχανικά συστήματα επεξεργάζονται δεδομένα εικόνας. Ενσωματώνοντας έναν Πεδίου-Προγραμματιζόμενο Πύλης Πίνακα (FPGA) απευθείας εντός του περιβλήματος της κάμερας, η κάμερα οραματικής μηχανής με FPGA κάμερα μηχανικής όρασης μεταφέρει κρίσιμες εργασίες επεξεργασίας μακριά από τον υπολογιστή-κεντρικό και σε αφιερωμένο παράλληλο υλικό. Αυτή η αρχιτεκτονική αλλαγή είναι ακριβώς ο λόγος για τον οποίο οι μηχανικοί και οι ολοκληρωτές συστημάτων αναρωτιούνται εάν η κάμερα οραματικής μηχανής με FPGA μπορεί πραγματικά να επιταχύνει τις εργασίες πραγματικού χρόνου επεξεργασίας εικόνας — και η απάντηση είναι σαφώς καταφατική, υπό τις κατάλληλες συνθήκες.

Η κάμερα μηχανικής όρασης με FPGA δεν αποτελεί απλώς μια βελτίωση της ανάλυσης του αισθητήρα. Πρόκειται για μια θεμελιώδη ανασχεδίαση του σημείου και του τρόπου με τον οποίο πραγματοποιείται η επεξεργασία εικόνας. Όταν μια παραδοσιακή κάμερα καταγράφει ένα πλαίσιο, στέλνει ακατέργαστα δεδομένα pixel σε έναν υπολογιστή ή ενσωματωμένο επεξεργαστή, ο οποίος στη συνέχεια εκτελεί λογισμικά πιπελίνια για φιλτράρισμα, ανίχνευση ή ταξινόμηση αντικειμένων. Η κάμερα μηχανικής όρασης με FPGA ελαχιστοποιεί σημαντικά αυτήν την καθυστέρηση εκτελώντας προγραμματισμένες λογικές πύλες παράλληλα, απευθείας στη ροή των καταγεγραμμένων δεδομένων. Για εφαρμογές που απαιτούν χρόνους ανταπόκρισης σε επίπεδο μικροδευτεροδευτερολέπτων, η κάμερα μηχανικής όρασης με FPGA προσφέρει σημαντικό πλεονέκτημα απόδοσης.

Η Αρχιτεκτονική Πίσω από την Επιτάχυνση με FPGA

Πώς Επεξεργάζεται η Ενσωματωμένη Μονάδα FPGA τα Δεδομένα Εικόνας

Σε κάθε κάμερα μηχανικής όρασης με FPGA, το πλέγμα FPGA αποτελείται από χιλιάδες διαμορφώσιμα λογικά μπλοκ που λειτουργούν ταυτόχρονα. Σε αντίθεση με μια CPU, η οποία εκτελεί εντολές διαδοχικά, η κάμερα μηχανικής όρασης με FPGA εκτελεί πολλαπλά βήματα επεξεργασίας εικόνας — όπως μείωση θορύβου, ανίχνευση ακμών και τμηματοποίηση με κατώφλι — όλα μέσα σε έναν ενιαίο κύκλο ρολογιού. Αυτή η παραλληλία αποτελεί τον κύριο λόγο για τον οποίο η κάμερα μηχανικής όρασης με FPGA μπορεί να υποστηρίζει υψηλούς ρυθμούς καρέ χωρίς απώλεια δεδομένων ή εισαγωγή καθυστερήσεων επεξεργασίας. Η κάμερα μηχανικής όρασης με FPGA γίνεται ουσιαστικά ένας «έξυπνος» αισθητήρας, αντί για μια παθητική συσκευή λήψης.

Μείωση της καθυστέρησης στην επιθεώρηση υψηλής ταχύτητας

Ένα από τα πιο μετρήσιμα πλεονεκτήματα της κάμερας οραματικής επεξεργασίας με FPGA είναι η καθοριστική, υπερχαμηλή καθυστέρηση. Σε γραμμές παραγωγής που λειτουργούν με υψηλή ταχύτητα, ακόμα και μια καθυστέρηση μερικών χιλιοστών δευτερολέπτων μπορεί να οδηγήσει στο να περάσει ανεντόπιστο ένα ελαττωματικό εξάρτημα ή να απορριφθεί εσφαλμένα ένα καλό εξάρτημα. Η κάμερα οραματικής επεξεργασίας με FPGA επεξεργάζεται κάθε καρέ προτού ακόμα αφήσει την κάμερα, πράγμα που σημαίνει ότι οι αποφάσεις μπορούν να ενεργοποιηθούν απευθείας από τις εξόδους της κάμερας, αντί να περιμένουν την απόκριση ενός PC. Αυτός ο σφιχτός βρόχος ελέγχου είναι αυτός που καθιστά την κάμερα οραματικής επεξεργασίας με FPGA ιδιαίτερα πολύτιμη σε συστήματα αυτοματοποιημένης οπτικής επιθεώρησης και συστήματα ακριβούς ταξινόμησης.

Βασικές εργασίες επεξεργασίας που επιταχύνονται από το FPGA

Προ-επεξεργασία και βελτίωση εικόνας

Η κάμερα μηχανικής όρασης με FPGA αναλαμβάνει πολλές υπολογιστικά επίπονες προεπεξεργασίες σε πραγματικό χρόνο. Η διόρθωση της παραμόρφωσης του φακού, η κανονικοποίηση του επίπεδου πεδίου (flat-field) και η αντικατάσταση ελαττωματικών pixel είναι όλες λειτουργίες που η κάμερα μηχανικής όρασης με FPGA μπορεί να εκτελέσει με τη συχνότητα του pixel clock, διασφαλίζοντας ότι κάθε καρέ που παραδίδεται στον υπολογιστή-κεντρικό (host) έχει ήδη διορθωθεί και είναι έτοιμο για ανάλυση. Χωρίς κάμερα μηχανικής όρασης με FPGA, αυτές οι λειτουργίες θα κατανάλωναν σημαντικό αριθμό κύκλων CPU στην πλευρά του host και θα εισήγαγαν μεταβλητή καθυστέρηση (latency), ανάλογα με το φορτίο του συστήματος. Η κάμερα μηχανικής όρασης με FPGA αναλαμβάνει ολοκληρωτικά αυτό το βάρος, απελευθερώνοντας τον επεξεργαστή του host για λογικές υψηλότερου επιπέδου, όπως η ταξινόμηση ή η δημιουργία αναφορών.

Εξαγωγή Χαρακτηριστικών και Λογική Ενεργοποίησης

Πέρα από την απλή προεπεξεργασία, η κάμερα μηχανικής όρασης με FPGA μπορεί να εκτελεί περικοπή περιοχής ενδιαφέροντος (ROI), δημιουργία ιστογράμματος και ακόμη και βασική ανίχνευση «blob» πριν από την έξοδο των δεδομένων από τον αισθητήρα. Αυτό σημαίνει ότι, σε πολλές εφαρμογές, η κάμερα μηχανικής όρασης με FPGA αποστέλλει μόνο σχετικά, προ-φιλτραρισμένα δεδομένα μέσω της διεπαφής — μειώνοντας δραστικά τις απαιτήσεις εύρους ζώνης. Η κάμερα μηχανικής όρασης με FPGA μπορεί επίσης να δημιουργεί σήματα υλικού ενεργοποίησης (hardware trigger) με βάση τα ανιχνευθέντα χαρακτηριστικά της εικόνας, επιτρέποντάς της να συγχρονίζει κατασκευές επόμενου σταδίου, όπως ενεργοποιητές ή PLC, χωρίς καθυστέρηση σε επίπεδο λογισμικού. Αυτός ο βρόχος ανάδρασης σε επίπεδο υλικού είναι μια μοναδική δυνατότητα της κάμερας μηχανικής όρασης με FPGA, η οποία δεν μπορεί να αναπαραχθεί από συστήματα που βασίζονται αποκλειστικά σε λογισμικό.

Βιομηχανικές εφαρμογές όπου οι κάμερες με FPGA παρέχουν αποτελέσματα

Αυτοματοποιημένη οπτική επιθεώρηση και έλεγχος ποιότητας

Στην παραγωγή ημιαγωγών και ηλεκτρονικών, η κάμερα οραματικού ελέγχου με FPGA χρησιμοποιείται ευρέως για την ανίχνευση επιφανειακών ελαττωμάτων, τον έλεγχο των κολλητών αρθρώσεων και την τρισδιάστατη μέτρηση. Η κάμερα οραματικού ελέγχου με FPGA επεξεργάζεται καρέ με την πλήρη ταχύτητα της γραμμής, ανιχνεύοντας ελαττώματα μικρότερα του ενός pixel με συνεπή ακρίβεια, ανεξάρτητα από τις διακυμάνσεις της παραγωγικής απόδοσης. Επειδή η κάμερα οραματικού ελέγχου με FPGA λαμβάνει αποφάσεις ελέγχου σε επίπεδο υλικού, ενσωματώνεται ομαλά σε υφιστάμενες αρχιτεκτονικές ελέγχου βασισμένες σε PLC. Οι μηχανικοί εμπιστεύονται την κάμερα οραματικού ελέγχου με FPGA για να διατηρούν τα πρότυπα ποιότητας χωρίς να εισάγουν λογισμικό φόρτο που θα μπορούσε να επιβραδύνει τη γραμμή.

Καθοδήγηση ρομπότ και έλεγχος κίνησης

Οι συνεργατικοί ρομπότ και τα συστήματα υψηλής ταχύτητας για την επιλογή και τοποθέτηση εξαρτημάτων εξαρτώνται από την κάμερα μηχανικής όρασης με FPGA για την εκτίμηση πραγματικού χρόνου της θέσης και την τοποθεσία των αντικειμένων. Σε αυτά τα περιβάλλοντα, η κάμερα μηχανικής όρασης με FPGA παρέχει συνεπή καθυστέρηση ανά πλαίσιο, η οποία είναι κρίσιμη για τη σταθερότητα του βρόχου ελέγχου. Μια συμβατική κάμερα που βασίζεται στην επεξεργασία από τον υπολογιστή εισάγει διακυμάνσεις (jitter) στον βρόχο ελέγχου, με αποτέλεσμα την υποβάθμιση της ακρίβειας εντοπισμού. Η κάμερα μηχανικής όρασης με FPGA εξαλείφει αυτές τις διακυμάνσεις παρέχοντας επεξεργασμένα δεδομένα θέσης με σταθερό χρονισμό, εγγυημένο από το υλικό. Καθώς οι ρομπότ προχωρούν προς αυστηρότερες ανοχές και ταχύτερους κύκλους λειτουργίας, η κάμερα μηχανικής όρασης με FPGA καθίσταται ένα καθοριστικό στοιχείο, αντί να είναι απλώς μια περιφερειακή συσκευή.

Συχνές Ερωτήσεις

Απαιτούνται ειδικές δεξιότητες προγραμματισμού για την κάμερα μηχανικής όρασης με FPGA;

Η ρύθμιση μιας κάμερας μηχανικής όρασης με FPGA συνήθως περιλαμβάνει τη χρήση εργαλείων ανάπτυξης FPGA ή προ-δημιουργημένων IP cores που παρέχονται από τον κατασκευαστή της κάμερας. Πολλά σύγχρονα μοντέλα καμερών μηχανικής όρασης με FPGA διαθέτουν προφόρτωση τυπικών λειτουργιών επεξεργασίας, ώστε οι ολοκληρωτές συστημάτων να μπορούν να τις εγκαταστήσουν χωρίς να γράψουν κώδικα FPGA από την αρχή. Για προχωρημένους προσαρμοστικούς αλγορίθμους, ενδέχεται να απαιτούνται δεξιότητες στα VHDL ή Verilog, αλλά το εμπορικό λογισμικό ελέγχου (firmware) για κάμερες μηχανικής όρασης με FPGA καλύπτει την πλειονότητα των τυπικών βιομηχανικών εργασιών.

Πώς συγκρίνεται η κάμερα μηχανικής όρασης με FPGA με την επεξεργασία με GPU;

Μια GPU είναι ισχυρή για την εκτέλεση ενός μεγάλου αριθμού εργασιών βαθιάς μάθησης, αλλά εισάγει μη προσδιορίσιμη καθυστέρηση, διότι λειτουργεί ως κοινόχρηστος πόρος που διαχειρίζεται από μια στοίβα λογισμικού. Αντίθετα, η κάμερα μηχανικής όρασης με FPGA προσφέρει προσδιορίσιμη χρονική συμπεριφορά του υλικού, η οποία είναι απαραίτητη για συστήματα ελέγχου σε σκληρό πραγματικό χρόνο. Για εργασίες που απαιτούν εγγυημένους χρόνους ανταπόκρισης σε επίπεδο μικροδευτερολέπτου, η κάμερα μηχανικής όρασης με FPGA υπερτερεί των προσεγγίσεων που βασίζονται σε GPU. Οι GPU παραμένουν προτιμότερες για περίπλοκες εργασίες ταξινόμησης τεχνητής νοημοσύνης, ενώ η κάμερα μηχανικής όρασης με FPGA ξεχωρίζει στην επεξεργασία σημάτων με χαμηλή καθυστέρηση και στην υλική συγχρονισμό.

Ποια πρότυπα διεπαφής υποστηρίζει συνήθως μια κάμερα μηχανικής όρασης με FPGA;

Οι περισσότερες βιομηχανικές μοντέλα καμερών μηχανικής όρασης με FPGA υποστηρίζουν τα πρωτόκολλα GigE Vision, USB3 Vision ή Camera Link HS, τα οποία όλα περιλαμβάνουν τυποποιημένη πρόσβαση σε παραμέτρους GenICam. Ορισμένα σχέδια καμερών μηχανικής όρασης με FPGA υποστηρίζουν επίσης το CoaXPress για εφαρμογές υψηλότατου εύρους ζώνης. Η επιλογή διεπαφής επηρεάζει τον μέγιστο ρυθμό καρέ και την απόσταση καλωδίωσης, αλλά η εσωτερική αρχιτεκτονική της κάμερας μηχανικής όρασης με FPGA παραμένει συνεκτική σε όλους τους τύπους διεπαφής, παρέχοντας πάντα προ-επεξεργασμένα δεδομένα εικόνας στο σύστημα υποδοχής.