Nein, das geht nicht. Die Spannung von zwei AA Batterien oder Akkus haben in Reihe nur 2,4 Volt bis 3 Volt.
Entweder min. 4x AA Batterien oder 5 AA Akkus (NiMH). Über die Stromaufnahme steht hier leider nichts im Datenblatt.
Ich schätze mal in Deutschland muss ein zugelassenes Rücklicht 0,6 Watt haben. Das sind bei 6 Volt dann 0,1 A. Bei zwei Lampen dann 0,2 A.
Ich würde lieber Akkus nehmen aber keine AA oder AAA Zellen die in einen Batterie-Halter gesteck werden. Die können bei der Fahrt durch Erschütterungen den Kontakt verlieren. Hinten wird es dann dunkel ohne das du das gleich mitbekommst. Ich würde bei so einer Konstruktion einen Modelbau-Akku mit Stecker nehmen. 7,2 Volt (NiMH mit 6 Zellen) oder 7,4 Volt (Lithium-Akku mit 2 Zellen). Lithium-Akkus sind zwar ein bischen teurer und benötigen ein spezielles Ladegerät, haben aber den Vorteil das sie bei gleicher Leistung kleiner und leichter sind und ihre Energie sehr lange speichern können. Ein NiMH-Akku ist schon mal beim Rumliegen nach 1 Monat leer.
Mit einer Steckverbindung sparst du dir auch den Schalter.