Das berühmteste Geheimnis betrifft den Ursprung des Namens „Fauve“. Es war der Kritiker Louis Vauxcelles, der beim Anblick einer Büste im Renaissancestil inmitten dieser farbenfrohen Leinwände ausrief: „Donatello bei den wilden Tieren (Fauves)!“. Was als Beleidigung gedacht war, wurde zum Namen einer der einflussreichsten Kunstbewegungen. Matisse wurde durch die Heftigkeit der Kritik tief verletzt; einige Zeitungen rieten dem Publikum sogar davon ab, sich der Leinwand zu nähern, aus Angst, sich mit dieser „Krankheit“ der Farbe anzustecken.
Ein intimeres Geheimnis liegt in der entscheidenden finanziellen Unterstützung durch Leo und Gertrude Stein. Als Matisse kurz vor dem Bankrott stand und durch die Aufnahme des Werks am Boden zerstört war, kauften die amerikanischen Sammler die Leinwand für 500 damalige Francs. Dieser Kauf rettete nicht nur die Karriere des Künstlers, sondern ermöglichte es der „Frau mit Hut“ auch, zum Dreh- und Angelpunkt der Pariser Avantgarde-Szene zu werden, was die Wohnung der Steins zu einem Pilgerort für junge Schöpfer machte.
Technisch haben neuere Analysen gezeigt, dass Matisse eine sehr dünne Grundierung verwendete und manchmal das Weiß der Leinwand durchscheinen ließ, um die Leuchtkraft zu erhöhen. Entgegen der Meinung seiner Kritiker war die Arbeit nicht schlampig. Jeder Pinselstrich, so impulsiv er auch war, war reiflich überlegt, um mit den benachbarten Farbtönen zu interagieren. Matisse verbrachte ganze Tage damit, einen einfachen grünen Reflex auf der Nase so anzupassen, dass er das Rot des Hintergrunds nicht „tötete“.
Ein weiteres Geheimnis betrifft das Modell selbst. Amélie Matisse war die absolute Komplizin ihres Mannes. Sie führte einen Hutladen, um die Familie während der schwierigen Jahre zu unterstützen. Der extravagante Hut, den sie trägt, ist daher nicht nur ein Modeaccessoire, sondern eine diskrete Hommage an ihre eigene Arbeit und ihr Opfer für das Genie ihres Mannes. Es ist ein Porträt der Dankbarkeit ebenso wie der Kühnheit.
Schließlich ist wenig bekannt, dass Matisse das Werk fast aus dem Salon zurückgezogen hätte. Von Zweifeln angesichts des allgemeinen Aufschreis geplagt, fürchtete er, das Werk sei seiner Zeit zu weit voraus. Es war seine Frau, die ihn ermutigte, es hängen zu lassen, mit dem Argument, dass, wenn es schon Gegenstand eines Skandals sein sollte, es wenigstens für eine totale ästhetische Revolution sein sollte. Die Leinwand gilt heute als das „Sacre du Printemps“ der modernen Malerei.