Die berühmten Anmerkungen, sind aber auch Teil der Kontroverse um sie. Mittlerweile schient es recht klar zu sein, dass die Berechnung der Bernoulli-Zahlen zum großen Teil oder ganz von Babbage stammen und in den Notes nur niedergeschrieben wurden.
Nichtsdestotrotz sind viele ihrer Anmerkungen sehr bekannt geworden, denn Ada Lovelace sah auch großes Potential in der Maschine und sagte Anwendungsbereiche voraus, die zu der Zeit noch graue Theorie waren. Sie sprach beispielsweise davon, die Maschine könne quasi alles berechnen, was sich formalisieren ließe und sogar eigene Musikstücke schreiben:
The engine might compose elaborate and scientific pieces of music of any degree of complexity or extent.
Diese Anmerkungen beschreiben das Potential der Maschine als die eines Computers. Ihr Einwand, dass die Analytical Engine jedoch keine Erkenntnis haben könne, wurde später von Alan Turing „Lady Lovelace’s Objection“ genannt und beschäftigt noch immer Wissenschafterinnen auf der ganzen Welt im Bereich der künstlichen Intelligenz.