Nach dieser Zeit kam es 1576 und 1577 zu ersten Kontakten und Konflikten der Inuit im Südosten der Insel mit den Expeditionen des Engländers Martin Frobisher, der drei Inuit – ein Mann, eine Frau und ihr Kind – gewaltsam nach England verschleppte. Sie starben kurz nach ihrer Ankunft in England. Spuren dieser Expeditionen wurden in den 1860er Jahren an der Frobisher-Bucht von Charles Francis Hall gefunden. Im 18. Jahrhundert entwickelten sich sporadische Handelskontakte zwischen Europäern und südlichen Baffininsel-Inuit. Nach 1820 begegneten Walfänger den Inuit auch im Norden der Insel. Der nun ständige Kontakt erhöhte die Abhängigkeit von europäischen Händlern. Nachdem der Walfang im 20. Jahrhundert reduziert wurde, gingen die Inuit zur Fuchsjagd über, um ihre Bedürfnisse durch den Pelzhandel zu decken. In den 1950er Jahren kam es zu Zwangsumsiedlungen der teils noch nomadisierenden Inuit nach Iqaluit.