fugl app 12 31

(Kreditt: Drew Weber / Cornell Lab of Ornithology)

Merlin Bird Photo ID mobilapp kan identifisere hundrevis av nordamerikanske arter det ser på bilder, takket være maskinlæringsteknologi.

Når den er lastet ned på en mobil enhet, kan appen gå hvor som helst - til og med steder uten mobiltelefon eller Wi-Fi.

"Når du åpner Merlin Bird Photo ID-appen, blir du spurt om du vil ta et bilde med smarttelefonen eller trekke inn et bilde fra digitalkameraet ditt, sier Merlin prosjektleder Jessie Barry på Cornell Lab of Ornithology. "Du zoomer inn på fuglen, bekrefter dato og plassering, og Merlin vil vise deg de beste valgene for en kamp blant de 650 nordamerikanske artene den kjenner."

Vinger, nebber og klør

Caltech og Cornell Tech datavitenskapere trente Merlin for å gjenkjenne fugler ved å vise det nesten 1 millioner bilder som ble samlet og annotert av birders og frivillige mobilisert av Cornell Lab. Anmerkninger inkluderer fuglens art samt viktige punkter som identifiserer fysiske elementer som vinger, nebber og klør.

Når en bruker av appen presenterer den med en fugl som identifiserer, velger Merlin arter som tett matcher disse egenskapene. Som en hvilken som helst god birder vurderer systemet arter som ville bli funnet på den spesifikke tiden av året og på den plasseringen ved hjelp av informasjon fra eBird, en online fuglressurs som samler og registrerer et gjennomsnitt av 7 millioner fugleobservasjonsrekord hver måned fra hele verden .


innerself abonnere grafikk


"Ved å bygge Merlin Bird Photo ID var vi spesielt opptatt av kvaliteten og organisasjonen av dataene," sier Serge Belongie, professor i informatikk ved Cornell Tech. Sammen med Pietro Perona fra California Institute of Technology (Caltech), er han medstifter av Visipedia, det Google-finansierte paraplyprosjektet som bruker fremskritt innen maskinlæring og datasyn for å hjelpe klassifisere objekter i fotografier.

"Til slutt ønsker vi å skape en åpen plattform som alle samfunn kan bruke til å lage et visuelt klassifikasjonsverktøy for sommerfugler, frosker, planter eller hva de trenger, sier Belongie.

"Denne appen er kulminasjonen på syv år av hardt arbeid av våre studenter og drives av den enorme fremgangen som datasyn og maskinlæringsforskere gjør verden rundt," sier Perona, professor i elektroteknikk i Caltechs divisjon for ingeniørfag og anvendt vitenskap. "En maskin som gjenkjenner gjenstander i bilder, som mennesker gjør, var en fjern drøm når jeg var en kandidatstudent, og nå er det endelig skjer."

Gode ​​bilder, gode kamper

Hvor bra er Merlin Bird Photo ID? "Nøyaktigheten er rundt 90 prosent hvis brukerens bilde er av god kvalitet. Send et fuzzy bilde eller en der fuglen er liten eller delvis dekket av blader, og sjansene for å få en nøyaktig kamp går ned, sier Steve Branson, senior postdoktor i elektroteknikk ved Caltech.

Til tross for høyteknologiske fremskritt er mennesker fortsatt en viktig del av prosessen. "Vi trenger eBird-data fra fuglekikkere sammen med eksperter som kan merke bildene som brukes til å trene Merlin," sier Caltech-kandidatstudent Grant Van Horn. "Du trenger lærere til å lære maskinen hva den trenger å gjøre. Vårt system kombinerer ekspertisen til hundrevis av birders og ornithologists. "Van Horn og Branson er begge deler av Visipedia-teamet, og utviklet algoritmer som tillater Merlin å lære å gjenkjenne fuglene.

Global dekning som kommer

Like rundt hjørnet er en Merlin Bird Photo ID-utgivelse på spansk for fugler i Mexico. Nedover veien vil Merlin-laget produsere versjoner for Sør-Amerika, Europa, Asia, Afrika og Australia - til slutt utvide for å dekke verden.

"Den fantastiske tingen om dette prosjektet er samarbeidet med Visipedia-teamet," sier Barry. "Vi har et produkt som virkelig fungerer fordi det støttes av fantastisk forskning og er bra for fuglefellesskapet fordi det er bygget for fuglefolk av fuglefolk."

Den oppdaterte Merlin Bird Photo ID er gratis for iOS eller Android-systemer fra Apple iTunes og Google Play app butikker. Det er et par med den originale Merlin-appen, utgitt i 2014, som bruker noen få korte spørsmål for å hjelpe brukerne til å begrense identiteten til en ny fugl.

Merlin Bird Photo ID er drevet av Visipedia med støtte fra Google, Jacobs Technion-Cornell Institute, og National Science Foundation.

kilde: Caltech

Relaterte bøker:

at InnerSelf Market og Amazon