CEVA, Inc. und ASPEED Technology haben bekannt gegeben, dass ASPEED den CEVA-BX1 Audio/Voice DSP lizenziert und in seinem Cupola360 SoC der zweiten Generation, AST1230, für Smart Cameras und Videokonferenzsysteme eingesetzt hat. Die Unternehmen arbeiten auch zusammen, um die anspruchsvollsten Anwendungsfälle für Konferenzen mit der Verfügbarkeit von CEVAs ClearVox Multi-Mikrofon-Rauschunterdrückung und akustischer Echounterdrückung Audio Front End (AFE) Software anzugehen. Dieses Softwarepaket ist vollständig für den CEVA-BX1 DSP optimiert. Es verbessert die Verständlichkeit jedes Sprachkonferenzsystems erheblich und ermöglicht das Hinzufügen von Sprachassistenten und Freisprechfunktionen. ASPEEDs Cupola360 Multi-Image Stitching Video & Audio SoC der 2. Generation, AST1230, sowie die dazugehörige App wurden speziell für leistungsstarke Videokonferenzanwendungen entwickelt. Mit dem Fokus auf fortschrittliche Smart-Kameras für sphärische Videokonferenzanwendungen verfügt der AST1230 SoC über einen leistungsstarken Bildsignalprozessor (ISP) und eine Smart-Layout Processing Engine. Der AST1230 SoC ist mit ASPEEDs einzigartiger Hyper-stitching®-Technologie ausgestattet und liefert eine außergewöhnliche Verarbeitungsleistung für das Stitching von Bildern in Echtzeit auf dem Gerät. Der AST1230 SoC enthält den hochprogrammierbaren CEVA-BX1 DSP, um die anspruchsvollsten Audio-/Voice-Anwendungsfälle zu bewältigen, und bietet eine außergewöhnliche Energie- und Wärmeeffizienz, was ihn ideal für eine breite Palette von neuen IoT-Anwendungen macht. Zu den weiteren Merkmalen gehören 8 digitale MIC-Eingänge mit leistungsstarken Audioverarbeitungsalgorithmen, einschließlich Fernfeld-Sprache, Beam-Forming, Auto-Gain-Control (AGC), Rauschunterdrückung und Echounterdrückung. Der CEVA-BX1-Prozessor kombiniert effiziente DSP-Rechenleistung mit High-Level-Programmierung und kompakten Code-Größenanforderungen von Embedded-Anwendungen. Mit einer 11-stufigen Pipeline und einer 4-Wege-VLIW-Mikroarchitektur bietet er parallele Verarbeitung mit einer Single Instruction Multiple Data (SIMD) ISA, die in neuronalen Netzen, bei der Rauschunterdrückung und Echounterdrückung sowie bei hochgenauen Sensorfusionsalgorithmen weit verbreitet ist. Der CEVA-BX1 wird von einer umfassenden Softwareentwicklungs-Toolkette begleitet, die einen fortschrittlichen LLVM-Compiler, einen auf Eclipse basierenden Debugger, DSP- und Neuronalnetzwerk-Rechenbibliotheken, Unterstützung für Neuronalnetzwerk-Frameworks in Form von Tensorflow Lite Micro und eine Auswahl an branchenführenden Echtzeitbetriebssystemen (RTOS) umfasst. Das ClearVox-Audio-Frontend wurde im eigenen Haus entwickelt und nutzt CEVAs große Erfahrung in der Audio- und Sprachverarbeitung. Es beinhaltet fortschrittliche Algorithmen, die mit verschiedenen akustischen Szenarien und Mikrofonkonfigurationen zurechtkommen, einschließlich optimierter Software für die Einfallsrichtung des Sprechers, Beamforming für mehrere Mikrofone, Rauschunterdrückung und akustische Echokompensation sowie die zugehörige Firmware und Treibersoftware.