Какой-то странный sitemap.xml…

Это всё нормально. Начиная с версии 4.0 этот плагин работает по новому алгоритму и в нем теперь карта как бы разделяется на подкарты:
Из подробного описания плагина :

Новое в версии 4.0 (2014-03-30):
Нет статические файлы больше, карта сайта создается на лету!
Карта сайта является дробление на под-карты сайта по месяцам, что позволяет до 50,000 сообщений в месяц!
Поддержка пользовательских типов почтовых и таможенных taxonomis!
100% Многоузловое совместимы, в том числе по-блог и активации сети.
Уменьшено использование ресурсов сервера в связи с меньшим содержанием в просьбе.
Новый API позволяет другие плагины, чтобы добавить свои собственные, отдельные карты сайта.
Примечание: PHP 5.1 и WordPress 3.3 не требуется! Плагин не будет работать с более низкими версиями!
Примечание: Эта версия будет пытаться переименовать старые файлы сайта в * -old.xml. Если это не работает, пожалуйста, удалите их вручную, так как не статические файлы не нужны больше!

Вот у вас и созданы ссылки на архивы подкарт по месяцам.
Хорошо это или нет — не знаю. Но если вам это не нравится создавайте привычно-обычную карту сайта другими плагинами.

Лично я пользуюсь плагином All in One SEO Pack/ В нем и «нормальная» карта сайта создается динамическая и роботс текст можно создать и проверить его и многое другое.

Я сам такое впервые вижу. (Я другим плагином пользуюсь, карту он создает по старинке) Но надеюсь хуже от этого не будет. Не дураки же это всё придумали. Так сказать ноу-хау…. Надо привыкать к новому.

гугл скажет, что карта плохая.
по крайней мере, на это была просто куча жалоб на форуме плагина.
после этого я откатился на версию 3.4 и отключил его обновление.

все версии качаются здесь. я использую 3.4.1, отрубить напоминание об обновлении можно плагином Block Specific Plugin Updates или кодом:

//отключение напоминаний об обновлении плагина start
function disable_plugin_updates($value) {
    unset($value->response['google-sitemap-generator/sitemap.php']);
    unset($value->response['akismet/akismet.php']);
    return $value;
}
add_filter('site_transient_update_plugins', 'disable_plugin_updates');
//отключение напоминаний об обновлении плагина end