Screen Recognition: Creating Accessibility Metadata for Mobile Applications from Pixels

モバイルアプリの UI スクリーンショットから機械学習でアクセシビリティメタデータを自動生成し、iOS VoiceOver の改善に成功した研究。大規模データセットと実ユーザー検証を報告。

iOS, VoiceOver, モバイル, 視覚障害・見え方の困りごと, テスト・検証