SIFT

Door gebruik te maken van SIFT om kenmerkende eigenschappen uit gelijkaardige afbeeldingen te halen kunnen we afbeeldingen samenvoegen zonder een lijn te genereren. Een simpele toepassing van deze techniek op een rectilineaire afbleedingenspaar geeft als resultaat zeer veel correcte kenmerkende eigenschappen (correct duidt hier op dezelfde plek op beide afbeeldingen).

Maar na een style transfer toe te passen op rectilineaire afbeeldingen zien we dat de kenmerkende eigenschappen zo goed als verdwijnen. Dit heeft als gevolg dat het samenvoegen van de afbeeldingen niet correct verloopt.

SIFT advanced

In plaats van kenmerkende eigenschappen te zoeken op een afbeelding die getransformeerd is met de style transfer nemen we de eigenschappen van de originele afbeeldingen om een mask te maken en de afbeeldingen te blenden. Hiervoor maken we gebruik van een bestaand repo met enkele kleine aanpassingen.

Door een afstandsgetrouwe cilinderprojectie met uitbreiding aan de zijkant (om overlap te generen) te nemen en deze te splitsen in het midden en de zijkanten terug aan elkaar te stitchen kunnen we het lijn artefact van hierboven proberen wegwerken.

1. Originele afbeelding met uitbreiding (overlap)
2. Originele afbeelding gesplit
3. Style transfer afbeeldingen
4. Resultaat

Sift met rectilineaire afbeeldingen

Voor onderstaande afbeelding zijn er 16 rectilineaire afbeeldingen gebruikt als een test van deze blending/stitching methode op meerdere afbeedlingen vanuit verschillende hoeken.

de volgende stap is nu deze methode toepassen op genoeg afbeeldingen om een volledig 360° afbeeldingen te vormen en te evalueren.