Seler tilhører orden Pinnipedia, som omfatter alle finneføtede havpattedyr.
Innenfor Pinnipedia deles seler inn i to familier. Phocidae, eller ekte seler, mangler ytre øreflapper og har små, mindre fleksible finner; eksempler er havnerver, gråseler og leopardsseler. Otariidae, eller øreseler, har fremtrendende ytre øreflapper og større finner som hjelper dem å bevege seg på land; eksempler er sjøløver og pelseler.