Filips getuigde in 1215 met zijn broer Dirk bij een beslissing van graaf Willem I en werd in 1226 door deze broer met het erfleen Duivenvoorde beleend.
Het geslacht van Duvenvoorde is voortgekomen uit dat van Van Wassenaar. In het begin van de 13e eeuw erfde Philips van Wassenaar, tweede en jongste zoon van Philips van Wassenaar en Agnes van Persijn van Waterland, de heerlijkheid Duvenvoorde. Zijn nakomelingen hebben de naam van Van Duvenvoorde aangenomen.