Aktualizace systém nabízí jednoduše proto, že máte dané ovladače nainstalovány. Nainstalovány je máte proto, že v základní instalaci Ubuntu jsou ovladače pro (skoro) všechny grafické karty, jsou to balíčky xserver-xorg-video-* Jsou to relativně malé balíčky (všechny dohromady u mě mají nějakých 5 MB), takže ani aktualizace nemohou představovat nějaký děsivý objem stahování.
Pokud vám to tak vadí, teoreticky je můžete odstranit nebo si v Synapticu zamknout jejich verzi (Balík → Zamknout verzi), ale zas tak bych to nedoporučoval.