שילוב מצלמות ורדאר לניטור פנים הרכב – שיתוף פעולה בין Toby, Texas Instruments, D3 Embedded ו-HTC

השותפות בין ארבע החברות הציגה הדגמה טכנולוגית המשלבת מצלמת אינפרה-אדום עם חיישן רדאר בגלים מילימטריים לצורך ניטור נהג ונוסעים. הדגם מדגים את שלב ההמשך של מערכות המעקב אחרי הנהג (DMS) והנוסעים (OMS): מעבר למיזוג חיישנים (Sensor Fusion). בעוד שמצלמות מתקשות לזהות תנועה או גוף מוסתר — למשל ילד מתחת לשמיכה — הרדאר מסוגל לזהות מיקרו-תנועות דרך חפצים. המערכת מבוססת על שבב העיבוד TDA4VM של TI, שעליו מבוצעים כל עיבודי הווידאו והרדאר, וממוקמת ביחידה קומפקטית המשולבת במראת הרכב. הפתרון, שתוכנן כחומרה חסכונית ויעילה, נועד להוזיל את עלות מערכות הבטיחות הפנימיות ולספק כיסוי מלא במצבי תאורה שונים. ההרצאה הדגישה כי העתיד של מערכות חישה בתוך הרכב תלוי בשילוב בין מצלמה לרדאר, תוך שיתוף פעולה הדוק בין ספקי רכיבים, תוכנה וחומרה.

בהרצאה שהוצגה בכנס, הוצגה השקופית שכונתה “Pioneering the Integration of Single-Camera and Radar Interior Sensor Fusion for In-Cabin Sensing” – המתארת את שיתוף הפעולה בין ארבע חברות מרכזיות בתעשייה: Toby Automotive, D3 Embedded, HTTC ו־Texas Instruments. החברות מאחדות ביניהן מומחיות עמוקה במערכות משובצות ובינה מלאכותית: Toby מתמקדת בלמידת מכונה ובעיבוד אותות חזותיים; D3 Embedded מביאה ניסיון של למעלה מ־25 שנה במיזוג נתונים בין מצלמות לרדאר; HTTC אחראית על הפיתוח מקצה לקצה של מערכות ADAS, כולל רכיבי וידאו, עומק וחישה; ו־Texas Instruments תורמת את טכנולוגיית השבבים המתקדמת שלה – TDA4VM SoC – לצד שבב הרדאר החדש AWR6843 mmWave, המניע את כל הפלטפורמה. יחד, הדגימו החברות כיצד שילוב בין מצלמה אחת לחיישן רדאר יכול לאפשר חישה פנימית מדויקת, חסכונית ואמינה יותר – מיסוד הדרך לדור הבא של בטיחות ומעקב חכם בתא הנוסעים.

שימוש בנתונים סינתטיים לאימות מערכות ניטור נהג – Victor Gonzalez, Anyverse & Euro NCAP

בעידן שבו מערכות נהיגה חכמה ותא נוסעים חכם מתבססות על בינה מלאכותית, אחת הסוגיות המורכבות ביותר היא איך ניתן לבדוק ולתקף את המודלים הללו לפני שהם עולים על הכביש. בהרצאה שניתנה בכנס AutoSens / InCabin Europe 2025 בברצלונה, הציג ויקטור גונזלס (Victor Gonzalez), סמנכ"ל ב־Anyverse, שיתוף פעולה חדש עם Euro NCAP שמטרתו לשנות מן היסוד את הדרך שבה בודקים מערכות חישה ובטיחות ברכב.

מהפכת הנתונים הסינתטיים

Anyverse, שנוסדה בספרד, נחשבת לחלוצה בתחום הנתונים הסינתטיים – יצירת תמונות, סרטונים וענני נקודות מדויקים במחשב, המשמשים לאימון ולבדיקות של אלגוריתמים לזיהוי חזותי. החברה פיתחה מנוע הדמיה פיזיקלי המאפשר לייצר סצנות מציאותיות לחלוטין, הנשלטות בכל פרט – ממיקום התאורה, דרך סוג הבד של בגד הנהג ועד החזר האור ממשטחי מתכת או פלסטיק. בשונה ממאגרים מבוססי צילומים אמיתיים, נתונים סינתטיים מאפשרים לחשוף את האלגוריתמים למצבים נדירים ומורכבים, כמו תאורה מסנוורת, השתקפויות בזכוכית, או גווני עור שונים.

בהרצאה הוסבר כי המנוע של Anyverse מייצר תרחישים הכוללים נהגים ונוסעים בגילאים, מגדרים וצבעי עור שונים – תחת מגוון מצבי תאורה, מזג אוויר והפרעות אופטיות. כך ניתן להבטיח שהמערכת הנבדקת איננה מוטה תרבותית או מגדרית, ושיכולות הזיהוי שלה עקביות ובטוחות עבור כלל הנהגים.

שיתוף הפעולה עם Euro NCAP

גונזלס הכריז בכנס על פרויקט משותף עם Euro NCAP, שבמסגרתו יפותחו פרוטוקולים וירטואליים לבדיקת מערכות ADAS ו־DMS (Driver Monitoring Systems). כיום נדרשים יצרנים לשלוח רכבים פיזיים למבחני שטח, שמדמים רק חלק קטן מן הסיטואציות האפשריות. הפרויקט החדש ישתמש במידע הסינתטי של Anyverse כדי לאפשר Self-Assessment דיגיטלי – בדיקה עצמית של היצרן על אלפי תרחישים בזמן קצר, תוך השוואה לסטנדרט מוסכם של Euro NCAP.

לפי גונזלס, מטרת שיתוף הפעולה היא להפוך את תהליך האימות לזול, מהיר ושקוף יותר. “אנחנו רוצים לאפשר לכל יצרן לבדוק אלפי תרחישים ביום אחד, במקום עשרות בודדות במעבדה פיזית,” אמר. לדבריו, הטכנולוגיה תאפשר גם בדיקות חוזרות בתנאים זהים, דבר שבלתי אפשרי בניסויי כביש אמיתיים.

חברת Anyverse, המתמחה ביצירת נתונים סינתטיים, הכריזה על שיתוף פעולה עם Euro NCAP לפיתוח פרוטוקול הערכה דיגיטלי למערכות ניטור פנים הרכב לשנת 2029. לפי Gonzalez, הבדיקות הפיזיות הנהוגות כיום יקרות ומוגבלות בכיסוי מצבי הנהיגה, בעוד ש-AI דורש חשיפה למיליוני תרחישים. השיטה החדשה תאפשר הערכת ביצועים באמצעות סימולציות ונתונים סינתטיים – כולל תנאי תאורה, מגדרים, גילאים והתנהגויות שונות. כך יוכלו יצרני רכב לבצע Self-Assessment דיגיטלי התואם לסטנדרטי NCAP. היתרונות כוללים הפחתת עלויות, כיסוי רחב יותר, ובדיקות עמידות בפני “מקרים קיצוניים” כגון הטיות גזעיות או תאורה נמוכה. ההרצאה הדגישה כי מעבר לשלב האימות הסופי בעזרת נתונים סינתטיים יגביר את מהימנות המערכות ויאפשר לאתר חולשות בביצועי בינה מלאכותית לפני שלב הייצור.

חישה משולבת מצלמה-רדאר לאיתור סימני חיים ונהיגה בטוחה – Rheinmetall & Dermalog SensorTech בשיתוף TI

אחד התחומים הצומחים במהירות בעולם מערכות החישה לרכב הוא ניטור פנים הרכב (In-Cabin Monitoring) — שילוב של מצלמות, חיישני רדאר ובינה מלאכותית לזיהוי מצב הנהג והנוסעים בזמן אמת. בהרצאה המשותפת של Rheinmetall, Dermalog SensorTech ו־Texas Instruments, שניתנה בכנס AutoSens / InCabin Europe 2025 בברצלונה, הוצגה מערכת חדשה המשלבת בין מצלמה לחיישן רדאר כדי לנטר סימני חיים, עירנות ובטיחות נוסעים באופן מדויק ומבוסס־פיזיולוגיה.

ד"ר Stefan Häfele מ־Rheinmetall הסביר שהמערכת החדשה פותחה מתוך צורך לזהות גם מצבים שבהם מצלמות לבדן נכשלות – למשל תינוק שנשאר במושב האחורי ומכוסה בשמיכה, או נהג שהתעלף בזמן נהיגה. לצורך כך נעשה שימוש בחיישן רדאר בתדר 60 גיגה־הרץ, שמסוגל לזהות תנועות מיקרוסקופיות כמו פעימות לב ונשימה.

אלגוריתם הבינה המלאכותית מאחד את הנתונים מהרדאר ומהמצלמה לכדי תמונת מצב אחידה על כל יושבי הרכב. אם מזוהה דפוס חריג – כמו האטה בקצב נשימה או ירידה בתנועות הגוף – המערכת יכולה להתריע מיד לנהג, למוקד חירום או למערכות הבקרה של הרכב.

הדיוק הפיזיולוגי והאינטגרציה עם TI

שותפת הפיתוח Dermalog SensorTech הביאה לשולחן את ניסיונה בזיהוי ביומטרי מתקדמים, בהם סריקת פנים וקריאת דופק ללא מגע. בשילוב טכנולוגיית העיבוד של Texas Instruments, הכוללת את שבב TDA4VM לעיבוד תמונה ורדאר בזמן אמת, ניתן היה למזג את הנתונים באופן רציף וללא השהיות.

טים הנדרסון (Tim Henderson), נציג TI, ציין בהרצאה כי הדור החדש של רדארים מאפשר לא רק גילוי תנועה, אלא גם ניתוח מיקרו־ויברציות עד רמת מילימטר. “אנחנו לא מדברים על תנועה של ידיים או גוף, אלא על תנודות חזה קלות שנובעות מהנשימה. זו רמת רגישות שהייתה שמורה בעבר למעבדות רפואיות,” אמר.

הפוסט פוקחים עין על ערנות הנהג הופיע לראשונה ב-Chiportal.