(Tín dụng: Drew Weber / Cornell Lab of Ornithology)

Ứng dụng di động Merlin Bird Photo ID có thể xác định hàng trăm loài Bắc Mỹ mà nó nhìn thấy trong ảnh, nhờ vào công nghệ máy học.

Sau khi tải xuống trên thiết bị di động, ứng dụng có thể đi bất cứ nơi nào ngay cả những nơi mà không có dịch vụ di động hoặc Wi-Fi.

Khi bạn mở ứng dụng Merlin Bird Photo ID, bạn sẽ được hỏi liệu bạn có muốn chụp ảnh bằng điện thoại thông minh của bạn hay lấy hình ảnh từ máy ảnh kỹ thuật số của bạn hay không, chuyên gia của dự án Merlin, Jessie Barry tại Cornell Lab of Ornithology. Bạn có thể phóng to con chim, xác nhận ngày và địa điểm, và Merlin sẽ cho bạn thấy những lựa chọn hàng đầu cho một trận đấu trong số các loài Bắc Mỹ 650 mà nó biết.

Cánh, mỏ và móng vuốt

Các nhà khoa học máy tính của Caltech và Cornell Tech đã đào tạo Merlin để nhận ra các loài chim bằng cách cho nó xem gần 1 triệu bức ảnh được thu thập và chú thích bởi những người nuôi ong và tình nguyện viên do Phòng thí nghiệm Cornell huy động. Chú thích bao gồm các loài chim cũng như các điểm chính xác định các yếu tố vật lý như cánh, mỏ và móng vuốt.

Khi một người dùng ứng dụng trình bày nó với một con chim để xác định, Merlin chọn các loài phù hợp chặt chẽ với các đặc điểm đó. Giống như bất kỳ người nuôi ong tốt nào, hệ thống này xem xét các loài sẽ được tìm thấy tại thời điểm cụ thể trong năm và tại địa điểm đó bằng thông tin từ eBird, một nguồn tài nguyên chim trực tuyến thu thập và ghi lại trung bình hàng triệu bản ghi quan sát chim hàng tháng .

Trong khi xây dựng ID hình ảnh chim Merlin, chúng tôi đặc biệt quan tâm đến chất lượng và cách tổ chức dữ liệu, theo ông Serge Belongie, giáo sư khoa học máy tính tại Cornell Tech. Cùng với Pietro Perona của Viện Công nghệ California (Caltech), ông là người đồng sáng lập Visipedia, dự án ô do Google tài trợ đang sử dụng những tiến bộ trong học máy và thị giác máy tính để giúp phân loại các đối tượng trong ảnh.

Cuối cùng, chúng tôi muốn tạo ra một nền tảng mở mà bất kỳ cộng đồng nào cũng có thể sử dụng để tạo ra một công cụ phân loại trực quan cho bướm, ếch, thực vật hoặc bất cứ thứ gì họ cần, theo ông Bel Belieie.

Ứng dụng này là đỉnh cao của bảy năm làm việc chăm chỉ của sinh viên chúng tôi và được thúc đẩy bởi sự tiến bộ to lớn mà các nhà khoa học về máy tính và học máy đang tạo ra trên khắp thế giới, theo ông Perona, giáo sư kỹ thuật điện tại Khoa Kỹ thuật của Caltech và Khoa học ứng dụng. Một cỗ máy nhận ra các vật thể trong ảnh, giống như con người, là một giấc mơ xa vời khi tôi còn là một sinh viên tốt nghiệp và bây giờ nó cuối cùng đã xảy ra.

Hình ảnh đẹp, trận đấu hay

ID hình ảnh chim Merlin tốt như thế nào? Độ chính xác của 100% là khoảng 90 nếu ảnh của người dùng có chất lượng tốt. Gửi một hình ảnh mờ hoặc một hình ảnh trong đó con chim nhỏ hoặc bị che phủ một phần bởi những chiếc lá và tỷ lệ nhận được một trận đấu chính xác đi xuống, ông Keith Branson, học giả sau tiến sĩ về kỹ thuật điện tại Caltech.

Bất chấp những tiến bộ công nghệ cao, con người vẫn là một phần quan trọng của quá trình. Chúng tôi cần dữ liệu eBird từ những người quan sát chim cùng với các chuyên gia có thể dán nhãn cho những bức ảnh được sử dụng để huấn luyện Merlin, theo ông, sinh viên tốt nghiệp CalTech Grant Van Horn. Bạn cần giáo viên dạy cho máy những gì nó cần làm. Hệ thống của chúng tôi kết hợp chuyên môn của hàng trăm sinh viên và nhà nghiên cứu sinh vật học. Van Van Horn và Branson đều thuộc nhóm Visipedia và phát triển các thuật toán cho phép Merlin học cách nhận ra những con chim.

Bảo hiểm toàn cầu sẽ đến

Chỉ quanh góc là một bản phát hành ID hình ảnh chim Merlin bằng tiếng Tây Ban Nha cho các loài chim ở Mexico. Cuối cùng, nhóm Merlin sẽ sản xuất các phiên bản cho Nam Mỹ, Châu Âu, Châu Á, Châu Phi và Úc. Cuối cùng sẽ mở rộng để phủ sóng toàn cầu.

Barry Điều tuyệt vời về dự án này là sự hợp tác với nhóm Visipedia, Barry nói Barry. Chúng tôi có một sản phẩm thực sự hoạt động bởi vì nó được hỗ trợ bởi nghiên cứu tuyệt vời và rất phù hợp với cộng đồng sinh viên vì nó được xây dựng cho những người nuôi ong.

ID hình ảnh chim Merlin được cập nhật miễn phí cho các hệ thống iOS hoặc Android từ Apple iTunes và Google play cửa hàng ứng dụng. Đó là một cặp với ứng dụng Merlin gốc, được phát hành trong 2014, sử dụng một vài câu hỏi ngắn để giúp người dùng thu hẹp danh tính của một con chim mới.

Merlin Bird Photo ID được cung cấp bởi Visipedia với sự hỗ trợ từ Google, Viện Jacobs Technion-Cornell và Quỹ khoa học quốc gia.

nguồn: Caltech

Sách liên quan:

at Thị trường InnerSelf và Amazon