12 research outputs found

    A calibration method for non-overlapping cameras based on mirrored phase target

    Get PDF
    A novel calibration method for non-overlapping cameras is proposed in this paper. A LCD screen is used as a phase target to display two groups of orthogonal phase-shifted sinusoidal patterns during the calibration process. Through a mirror reflection, the phase target is captured by the cameras respectively. The relations between each camera and the phase target can be obtained according the proposed algorithm. Then the relation between the cameras can be calculated by treating the phase target as an intermediate value. The proposed method is more flexible than conventional mirror-based approach, because it do not require the common identification points and is robust to out-of-focus images. Both simulation work and experimental results show the proposed calibration method has a good result in calibrating a non-overlapping cameras system

    A calibration method for non-overlapping cameras based on mirrored phase target

    Get PDF
    A novel calibration method for non-overlapping cameras is proposed in this paper. A LCD screen is used as a phase target to display two groups of orthogonal phase-shifted sinusoidal patterns during the calibration process. Through a mirror reflection, the phase target is captured by the cameras respectively. The relations between each camera and the phase target can be obtained according the proposed algorithm. Then the relation between the cameras can be calculated by treating the phase target as an intermediate value. The proposed method is more flexible than conventional mirror-based approach, because it do not require the common identification points and is robust to out-of-focus images. Both simulation work and experimental results show the proposed calibration method has a good result in calibrating a non-overlapping cameras system

    Шляхи створення телевізійних систем для автоматичного керування автомобілем в Україні

    Get PDF
    Автомобілей на дорогах становиться все більше, а відповідно зростає кількість ДТП, трафік ущільнюється. Боротися з небезпекою на дорогах призвані електронні помічники водія, які визначають небезпечную ситуацію та коригують автомобіль відповідно до ситуації. Однак такі системи встановлюються лише на нові автомобілі преміального сегменту. В данній статті розглянуто можливість встановлення таких систем на існуючу автомобілі та релевантність такого рішення на ринку

    Extrinsic Camera Calibration for an On-board Two-Camera System without overlapping Field of View

    No full text

    Підвищення ефективності телевізійної системи керування автомобіля

    Get PDF
    Дисертаційна робота присвячена підвищенню ефективності телевізійної системи керування автомобілем. Актуальність теми. В даний час комп'ютеризація в нашому суспільстві розвивається швидкими темпами і відіграє величезну роль в житті людини. За допомогою комп'ютерних технологій автоматизується широке коло процесів, які в недалекому минулому покладалися на людину. А з використанням оптико-електронних пристроїв вдається вирішувати задачі, які неможливо вирішити іншими шляхами. Рішення проблеми розпізнавання і обробки зображень і, як наслідок, запобігання аварійної ситуації на дорозі є досить важливим аспектом безпеки і контролю дорожньої ситуації. Системи активної безпеки дозволяють коригувати помилкові дії водія, уникати екстрених ситуацій, підвищити безпеку дорожнього руху. «Електронні асистенти», в основному, використовують ультразвукові датчики. Вони дозволяють тільки визначити наявність перешкоду і відстань до нього. А введення оптичних сенсорів дає цілий спектр корисної інформації, від наявності перешкоди до його розмірів, відстані, траєкторії руху. Актуальною, затребуваною і цікавою темою цього проекту є аналіз і розробка власного універсального приладу «консультування» водія (ADAS) в питанні активної безпеки. Мета і задачі дослідження. Метою дисертаційної роботи є досягнення максимального узгодження оптичної системи телевізійних систем керування автомобілем, покращення роздільної здатності і якості отримуваного зображення за рахунок вибору параметрів об’єктива, підвищення ефективності та адаптація під всі види транспортних засобів. Для досягнення поставленої мети в дисертаційній роботі поставлені наступні задачі: 1. Обґрунтувати вимоги до характеристик телевізійних систем керування автомобілем. 2. Досягти критерію узгодження просторової роздільної здатності об’єктива і ПЗЗ приймача для телевізійних оптичних систем та впливу кута нахилу системи відносно дороги на кінцеве зображення. 3. Вдосконалити математичну модель обробки вихідного сигналу методами DSP обробки. 4. Розробити стартап-проект оптико-електронного детектора дорожньої розмітки. Об’єкт дослідження. Процес реєстрації оптичного випромінювання приймачем випромінювання та його подальша обробка. Предмет дослідження. Телевізійні системи керування автомобілем. Наукова новизна. Вперше розроблена швидка методика детектування та локалізації дорожньої розмітки за допомогою алгоритмів згортки та кореляції сумісно із атермальним об’єктивом. Розроблено програмне забезпечення для автоматичної обробки зображень для локалізації розмітки. Проведено аналіз розрахованих методик на реальних даних. Методи дослідження. У дисертаційній роботі для розв’язання даних поставлених задач використовується: 1. Аналітичні методи, засновані на застосуванні апарату геометричної оптики, теорії аберацій оптичних систем, проектування та контролю телевізійних систем, алгоритми розпізнавання дорожньої розмітки. 2. Використання програмного пакета «MatLab» та «Python» для моделювання різноманітних дорожніх ситуацій та розробки алгоритму розпізнавання розмітки, досягнення вдосконалення критеріїв. 3. Комп’ютерне моделювання і оптичний розрахунок різних телевізійних оптичних систем в програмі «PODIL» з абераційним і енергетичним аналізом якості отримуваного зображення. 4. Використання різних методик оцінки роздільної здатності та якості отримуваного зображення телевізійних систем з ПЗЗ приймачем. Магістерська дисертація складається з чотирьох розділів. У першому розділі проаналізовано основні переваги і недоліки існуючих систем керування автомобілем та методів цифрової обробки зображень. У другому розділі приведено загальну фізико-математичну модель телевізійної системи керування автомобілем та розроблено атермальний об’єктив. Третій розділ присвячено огляду, аналізу та вибору методу цифрової обробки зображень для задачі детекції дорожньої розмітки. Четвертий розділ присвячено розробці стартап-проекту «Телевізійна система керування автомобілем» і аналізу перспектив входження розробки на ринок з маркетологічної точки зору.The dissertation is devoted to increase of efficiency of the television control system of the car. Actuality of theme. Nowadays, computerization in our society is developing at a rapid pace and plays a huge role in human life. Computer technology automates a wide range of processes that have relied on humans in the recent past. And with the use of optoelectronic devices it is possible to solve problems that cannot be solved in other ways. Addressing image recognition and processing and, as a consequence, preventing an accident on the road is a very important aspect of road safety and control. Active safety systems allow you to correct driver misconduct, avoid emergencies, and improve road safety. "Electronic assistants" mainly use ultrasonic sensors. They only allow you to determine the presence of an obstacle and the distance to it. And the introduction of optical sensors gives a whole spectrum of useful information, from the presence of obstacles to its size, distance, trajectory. A topical, sought-after and interesting topic of this project is the analysis and development of our own Active Driver Advice (ADAS) device in active safety. The purpose and objectives of the study. The aim of the dissertation is to achieve the maximum harmonization of the optical system of television control systems of the car, to improve the resolution and quality of the image obtained by selecting lens parameters, improving efficiency and adaptation to all types of vehicles. In order to achieve this goal in the dissertation the following tasks are set: 1. To substantiate the requirements for the characteristics of television control systems of the car. 2. Achieve the criterion of spatial resolution of the lens and the CCD of the television optical systems and the effect of the inclination of the system relative to the road on the final image. 3. Improve mathematical model of output signal processing by DSP processing methods. 4. To develop a startup project of opto-electronic road marking detector. Object of study. The process of registration of optical radiation by the radiation receiver and its subsequent processing. Subject of study. Car TV systems. Research methods. In the dissertation the following tasks are used to solve the data of the given tasks: 1. Analytical methods based on the application of geometric optics apparatus, theory of aberrations of optical systems, design and control of television systems, algorithms for recognition of road marking. 2. Using MatLab and Python software to simulate various road situations and to develop a markup recognition algorithm to achieve criteria improvement. 3. Computer simulation and optical calculation of various television optical systems in the PODIL program with aberration and energy analysis of the image quality. 4. The use of different methods of estimating the resolution and quality of the resulting image of television systems with CCD receiver. The master's thesis consists of four sections. The first section analyzes the main advantages and disadvantages of existing car control systems and digital imaging techniques. The second section presents a general physics and mathematics model of a car television system and a thermal lens. The third section deals with the review, analysis and selection of the digital image processing method for the task of detecting road marking. The fourth section is devoted to the development of a startup project "TV Car Control System" and to analyze the prospects for market entry from a marketing point of view

    Self-Calibration of Multi-Camera Systems for Vehicle Surround Sensing

    Get PDF
    Multi-camera systems are being deployed in a variety of vehicles and mobile robots today. To eliminate the need for cost and labor intensive maintenance and calibration, continuous self-calibration is highly desirable. In this book we present such an approach for self-calibration of multi-Camera systems for vehicle surround sensing. In an extensive evaluation we assess our algorithm quantitatively using real-world data

    Self-Calibration of Multi-Camera Systems for Vehicle Surround Sensing

    Get PDF
    Multikamerasysteme werden heute bereits in einer Vielzahl von Fahrzeugen und mobilen Robotern eingesetzt. Die Anwendungen reichen dabei von einfachen Assistenzfunktionen wie der Erzeugung einer virtuellen Rundumsicht bis hin zur Umfelderfassung, wie sie für teil- und vollautomatisches Fahren benötigt wird. Damit aus den Kamerabildern metrische Größen wie Distanzen und Winkel abgeleitet werden können und ein konsistentes Umfeldmodell aufgebaut werden kann, muss das Abbildungsverhalten der einzelnen Kameras sowie deren relative Lage zueinander bekannt sein. Insbesondere die Bestimmung der relativen Lage der Kameras zueinander, die durch die extrinsische Kalibrierung beschrieben wird, ist aufwendig, da sie nur im Gesamtverbund erfolgen kann. Darüber hinaus ist zu erwarten, dass es über die Lebensdauer des Fahrzeugs hinweg zu nicht vernachlässigbaren Veränderungen durch äußere Einflüsse kommt. Um den hohen Zeit- und Kostenaufwand einer regelmäßigen Wartung zu vermeiden, ist ein Selbstkalibrierungsverfahren erforderlich, das die extrinsischen Kalibrierparameter fortlaufend nachschätzt. Für die Selbstkalibrierung wird typischerweise das Vorhandensein überlappender Sichtbereiche ausgenutzt, um die extrinsische Kalibrierung auf der Basis von Bildkorrespondenzen zu schätzen. Falls die Sichtbereiche mehrerer Kameras jedoch nicht überlappen, lassen sich die Kalibrierparameter auch aus den relativen Bewegungen ableiten, die die einzelnen Kameras beobachten. Die Bewegung typischer Straßenfahrzeuge lässt dabei jedoch nicht die Bestimmung aller Kalibrierparameter zu. Um die vollständige Schätzung der Parameter zu ermöglichen, lassen sich weitere Bedingungsgleichungen, die sich z.B. aus der Beobachtung der Bodenebene ergeben, einbinden. In dieser Arbeit wird dazu in einer theoretischen Analyse gezeigt, welche Parameter sich aus der Kombination verschiedener Bedingungsgleichungen eindeutig bestimmen lassen. Um das Umfeld eines Fahrzeugs vollständig erfassen zu können, werden typischerweise Objektive, wie zum Beispiel Fischaugenobjektive, eingesetzt, die einen sehr großen Bildwinkel ermöglichen. In dieser Arbeit wird ein Verfahren zur Bestimmung von Bildkorrespondenzen vorgeschlagen, das die geometrischen Verzerrungen, die sich durch die Verwendung von Fischaugenobjektiven und sich stark ändernden Ansichten ergeben, berücksichtigt. Darauf aufbauend stellen wir ein robustes Verfahren zur Nachführung der Parameter der Bodenebene vor. Basierend auf der theoretischen Analyse der Beobachtbarkeit und den vorgestellten Verfahren stellen wir ein robustes, rekursives Kalibrierverfahren vor, das auf einem erweiterten Kalman-Filter aufbaut. Das vorgestellte Kalibrierverfahren zeichnet sich insbesondere durch die geringe Anzahl von internen Parametern, sowie durch die hohe Flexibilität hinsichtlich der einbezogenen Bedingungsgleichungen aus und basiert einzig auf den Bilddaten des Multikamerasystems. In einer umfangreichen experimentellen Auswertung mit realen Daten vergleichen wir die Ergebnisse der auf unterschiedlichen Bedingungsgleichungen und Bewegungsmodellen basierenden Verfahren mit den aus einer Referenzkalibrierung bestimmten Parametern. Die besten Ergebnisse wurden dabei durch die Kombination aller vorgestellten Bedingungsgleichungen erzielt. Anhand mehrerer Beispiele zeigen wir, dass die erreichte Genauigkeit ausreichend für eine Vielzahl von Anwendungen ist

    Kalibrierung mobiler Multikamerasysteme mit disjunkten Sichtfeldern

    Get PDF
    Die Arbeit beschreibt ein bildgestütztes Verfahren zur extrinsischen Kalibrierung eines Multikamerasystems mit nichtüberlappenden Sichten auf einer mobilen Plattform. Die Kalibrierung basiert auf der geschätzten Kamerabewegung, da in den Kameras keine gemeinsamen Bezugspunkte beobachtbar sind. Die Schätzung der Parameter erfolgt kontinuierlich und ist in ein skalierbares Fusionsschema eingebettet. Die Funktionsfähigkeit des Verfahrens wurde mit simulierten sowie reellen Daten untersucht
    corecore