Change search
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf
Occlusion handling in Augmented Reality context
KTH, School of Electrical Engineering and Computer Science (EECS).
2019 (English)Independent thesis Advanced level (degree of Master (Two Years)), 20 credits / 30 HE creditsStudent thesisAlternative title
Ocklusionshantering i kontexten augmenterad verklighet (Swedish)
Abstract [en]

Handling occlusion between real and virtual objects is a challenging problem in Augmented Reality (AR) applications. Incorrect and inaccurate occlusion handling may cause confusion in users’ perception which leads to non-realistic and non-immersive AR experiences. Even though there are important research examples and implementations on this topic, they typically suffer from important limitations.

The method presented in this thesis takes both raw depth and color information from an RGB-D sensor in order to solve occlusion in unknown AR contexts. The novelty of this method is the automatic trimap generation which is based on the color distribution information of the real scene. Moreover, the proposed method can operate using the information from only the latest frame, or efficiently use the information from multiple frames. In the second case, the knowledge of the previous frame output is used to improve the trimap generation of the latest frame.

Experimental evaluations of several scenes demonstrate that this approach largely improves automatic trimap generation using both the RGB and depth information. Furthermore, the final proposed method is compared with some recent state of the art approaches in terms of quality and accuracy, showing that it overcomes some of the known limitations.

Abstract [sv]

Hantering av ocklusion mellan verkliga och virtuella objekt är ett utmanande problem i applikationer med augmenterad verklighet (AR). Felaktig ocklusionshantering kan orsaka förvirring i användarnas uppfattning vilket leder till icke-realistiska AR-upplevelser. Trots att det finns forskningsexempel och implementeringar av framgång inom detta område så har de ofta betydliga begränsningar.

Metoden som presenteras i detta arbete tar både rå djup- och färginformation från en RGB-D-sensor för att lösa ocklusion i okända AR-sammanhang. Innovationen med denna metod är den automatiska trimapgenerationen som bygger på informationen i färgdistributionen i den verkliga scenen. Dessutom kan den föreslagna metoden fungera med hjälp av informationen från endast den senaste bilden, eller effektivt använda informationen från flera bilder. I det andra fallet används information från den tidigare bildutmatningen för att förbättra trimapgenerationen av den senaste bilden.

Experimentella utvärderingar av flera scener visar att denna metod i stor utsträckning förbättrar automatisk trimapgenerering med både RGB och djupinformation. Vidare jämförs den föreslagna metoden med några av de andra främsta tillvägagångssätt med avsende på kvalitet och noggrannhet, vilket visar att den övervinner några av de kända begränsningarna.

Place, publisher, year, edition, pages
2019. , p. 64
Series
TRITA-EECS-EX ; 2019:514
National Category
Computer and Information Sciences
Identifiers
URN: urn:nbn:se:kth:diva-262679OAI: oai:DiVA.org:kth-262679DiVA, id: diva2:1361930
External cooperation
Ericsson
Supervisors
Examiners
Available from: 2019-11-11 Created: 2019-10-17 Last updated: 2019-11-11Bibliographically approved

Open Access in DiVA

fulltext(5314 kB)6 downloads
File information
File name FULLTEXT01.pdfFile size 5314 kBChecksum SHA-512
68fc3aec67b3dd370232d309aede8423d268285795ec78f473e5fbc2c4b1fa06aa840f91ddaef664d98abb746b6ecdf5c00f847df7791896bc1e3e1fec94936a
Type fulltextMimetype application/pdf

By organisation
School of Electrical Engineering and Computer Science (EECS)
Computer and Information Sciences

Search outside of DiVA

GoogleGoogle Scholar
Total: 6 downloads
The number of downloads is the sum of all downloads of full texts. It may include eg previous versions that are now no longer available

urn-nbn

Altmetric score

urn-nbn
Total: 42 hits
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf