Schwarzburg, Familie