シャトー・ラトゥールのシンボルとなっている“塔”は、1331年10月18日にカスティヨン家の領主であったポンスからの許しを得て、1300年代中頃に初めて要塞として作られたと考えられている。

この塔は、1378年よりフロワサールの「年代記」に登場している。当時は百年戦争の真っ只中で、河口を守る要塞のサン・モベール塔はフランス国王に雇われたブルトン兵によって守られてた。しかし3日間の包囲の後、アングロ・ガスコン軍が要塞を奪取し、守備隊を駐留させた。その後、1453年7月17日の百年戦争の降伏協定まで、塔はイギリスの支配下に置かれていた。

しかし、これ以降、塔に関しての記述は途絶えてしまう。この要塞跡の正確な場所は不明だが、14世紀の頃はジロンド川から300メートルの場所にあり、ブドウ畑の南東に位置していたと考えられてている。また、塔の形も円形ではなく、当時の建設の技術から言っても「四角形」で「2階建て」だったと予想されている。つまり、今日ラトゥールで見られる塔は、元は要塞として使用されて、名前の由来ともなった塔ではなく、1620〜1630年の間に以前のシャトーの石を使って建てられた「鳩小屋」なのだ。

16世紀末まで、ラトゥールは共同所有者が小作農民から地代を受け取る共同領主の土地だった。その後、17世紀の終わりまでミュレ家によって所有されていた。この後、売却、相続、相次ぐ結婚によってセギュール家へと所有が移り、1718年、当時【ラフィット】も所有していたマルキ・ニコラ・アレクサンドル・ドゥ・セギュール侯爵の手によって同シャトーの偉大な歴史が始まる。

“葡萄の王子”と呼ばれていたニコラ・アレクサンドルは、同年、【ムートン】と【カロン・セギュール】をも獲得し、領地（ドメーヌ）をさらに拡張する。こうしてシャトー【マルゴー】以外のメドックの最も有名なシャトーは全てセギュール家が所有することになった。

しかし、1755年の彼の死後、領地は分割されていく。ラフィットの一部だったラトゥールは分割されて、18世紀後半にはワイン作りに必要なすべての道具を揃えた独自のシャトーとして経営されていく。

18世紀はじめ、イギリスの市場の回復や北ヨーロッパとのワイン取引の発達によって、ラトゥールの評価は次第に世界中へと広まっていった。1787年、後のアメリカ大統領にもなるトーマス・ジェファーソンにも高く評価され、当時の通常のボルドーワインよりも20倍の価格で取引されていたほどだった。こうした実績もあり、1855年の格付けの際には、わずか4つしかない1級シャトーの一つに選ばれた。

後にフランス革命が起こるが、ラトゥールは奇跡的に同じ一家の所有であり続け、領地全体を維持できた。1842年、相次ぐ世襲により所有者の数は増えたが、一つの株式会社としてまとまり、1862〜1864年に現在のシャトーも造られている。

1963年にはイギリスのフィナンシャルグループであるピアソンが53％の株を所有して大株主となり、ラトゥールは英国資本の手に移った。翌年には、メドックでは一番早くオーク製タンクからステンレスタンクへの変更に踏み切り、1968年から畑の排水を良くするための工事も始まる。

その後、所有者はアライド・ライオンへと移るが、1993年には現在のオーナーであるフランソワ・ピノーが、自分の持ち株会社アルテミスを通してアライド・ライオンの持ち株を買収。30年に渡る英国資本による経営が終わり、再びラトゥールはフランス人の手に戻ってきたのだ。