Een algoritme om zwart/wit naar kleur om te zetten

Ergens op tweakers was daar eens een stuk over geschreven en een link weer de software te halen. Kan het niet terugvinden helaas.
Als jou dat wel lukt gooi hier even de link neer?

Er zitten inderdaad nog wel wat haken en ogen aan.
Als we grijswaardes bijvoorbeeld eens definiëren als (8bit) 0 is zwart. 255 is wit. Midden grijs is dus 128.

Een camera een maakt van bijvoorbeeld kleur groen grijswaarde 100. Camera 2 maakt van datzelfde groen bijvoorbeeld grijswaarde 125. Pure camera afwijking. Daarnaast heb je natuurlijk last van kleurverschillen door zon (veel geel licht) bewolkt (blauw licht) en al dan niet kunstmatig licht bij binnen foto's.

Je zal dus iets moeten vinden om op te kalibreren. Als je onbewolkte lucht ziet op de foto dan weet je dat dat een bepaalde kleur blauw en dus vaste grijswaarde zou moeten zijn. Daarmee kan je de herkenbare delen op de foto dus terugrekenen naar een gekalibreerde kleur.

Even puur niet ingelezen mijn idee erover is dat automatisch inkleuren altijd gokwerk blijft maar je het gokwerk wel kan verbeteren door het internet te gebruiken voor vergelijkingsmateriaal of zo iets.

Bijvoorbeeld je hebt een zwart witafbeelding van cowboys in de prairy op paarden dan moet je een bepaald algoritme hebben die referentiemateriaal ophaalt en op die manier de kleuren invult van de zwart wit afbeelding. Moet het wel herkennen welk object wat is.

Of dat het dus objecten herkend (pet, pistool, gezicht, hond, kat, fiets etc) en daar een soort kleurenmatrix aan verbind?

In Polen kunnen ze er wat van....

quote:

Op dinsdag 10 oktober 2017 13:56 schreef jogy het volgende:
Of dat het dus objecten herkend (pet, pistool, gezicht, hond, kat, fiets etc) en daar een soort kleurenmatrix aan verbind?

ja met diep learning / ai, zie bv

https://github.com/junyanz/interactive-deep-colorization
https://petapixel.com/201(...)hite-photos-seconds/

wordt ook gebruikt om foto's te vergroten:

https://github.com/alexjc/neural-enhance
https://arstechnica.com/i(...)lution-zoom-enhance/

Bij van kleur naar zwart-wit gaan, gaat informatie verloren.
Stel dat het 8-bits is.
In plaats van 8 bits rood, 8 bits groen, 8 bits blauw heb je nog maar 8 bits grijs. Die informatie is in principe voorgoed verloren.
Nu kunnen we het beeld bekijken, en omdat we weten dat een wolkenloze lucht blauw is hier toch een realistische kleur aan toevoegen.
Van een jas die iemand draagt weten we dat echter niet. Als die grijswaarde 128 heeft gekregen kan dat een gele, groene, bruine of blauwe jas zijn geweest die toevallig 128 grijswaarde toegewezen heeft. Daar valt soms nooit meer achter te kokmen. Of je moet bijvoorbeeld een dagboeknotitie vinden met "Adolf had vandaag een gele jas aan", en dat kunnen koppelen aan het filmpje.

quote:

Op dinsdag 10 oktober 2017 14:13 schreef LXIV het volgende:
Bij van kleur naar zwart-wit gaan, gaat informatie verloren.
Stel dat het 8-bits is.
In plaats van 8 bits rood, 8 bits groen, 8 bits blauw heb je nog maar 8 bits grijs. Die informatie is in principe voorgoed verloren.
Nu kunnen we het beeld bekijken, en omdat we weten dat een wolkenloze lucht blauw is hier toch een realistische kleur aan toevoegen.
Van een jas die iemand draagt weten we dat echter niet. Als die grijswaarde 128 heeft gekregen kan dat een gele, groene, bruine of blauwe jas zijn geweest die toevallig 128 grijswaarde toegewezen heeft. Daar valt soms nooit meer achter te kokmen. Of je moet bijvoorbeeld een dagboeknotitie vinden met "Adolf had vandaag een gele jas aan", en dat kunnen koppelen aan het filmpje.

Wellicht kun je aan de mate van verkleuring bij zonlicht opmaken welke verhouding Rood/Groen/Blauw aan de jas "hangt". Bij uniformen is de kleur bekend. Bij de kleur van gebouwen. De kleur van vuur is bekend (zie mijn gettofilmpje). Er zal veel bekend zijn over de kleur van gangbare kleding. Gelaatspigment. e.d.

quote:

Op dinsdag 10 oktober 2017 14:22 schreef Twentsche_Ros het volgende:

[..]

Wellicht kun je aan de mate van verkleuring bij zonlicht opmaken welke verhouding Rood/Groen/Blauw aan de jas "hangt". Bij uniformen is de kleur bekend. Bij de kleur van gebouwen. De kleur van vuur is bekend (zie mijn gettofilmpje). Er zal veel bekend zijn over de kleur van gangbare kleding. Gelaatspigment. e.d.

Je hebt inderdaad een herkenningspunt nodig anders kan je er niets mee.

Want echt niet dat je kleuren kan achterhalen op basis van grijswaardes.

wordt

quote:

Op dinsdag 10 oktober 2017 14:22 schreef Twentsche_Ros het volgende:

[..]

Wellicht kun je aan de mate van verkleuring bij zonlicht opmaken welke verhouding Rood/Groen/Blauw aan de jas "hangt". Bij uniformen is de kleur bekend. Bij de kleur van gebouwen. De kleur van vuur is bekend (zie mijn gettofilmpje). Er zal veel bekend zijn over de kleur van gangbare kleding. Gelaatspigment. e.d.

Op deze manier een zwart-wit foto omzetten naar kleur kun je niet doen met een eenvoudig algoritme. Daarvoor moet 'datgene dat er afgebeeld wordt' vrij verregaand geinterpreteerd worden.

Is het ook niet zo dat bv twee bepaalde grijstinten dezelfde kleur hebben (cq dezelfde grijstint) maar wanneer er ze allebei minder licht ontvangen (cq in de schaduw terechtkomen) ze verschillende grijstinten laten zien. En dat je aan de hand daarvan kunt bepalen welke kleur het kan zijn. Bv dat rood meer verandert bij licht en donker dan bijvoorbeeld blauw.

Ik denk wel dat je daar google's foto herkeninings algoritmes veel kunt leren, als je ze een enorme dataset voert met zwart wit foto's laat kleuren en toetst met de gebruikte kleurenfoto's moet het een heel eind kunnen komen.

Dan doe je dus foto herkenning + kleur herkenning. Al is de vraag hoe goed google's foto herkening algortimes werken op zwart wit foto's....

Al gaat er zoals eerder genoemd wel veel informatie verloren dus is het maar de vraag welke info er nog in zit.