下津井は古くから風待港として栄えた港町である。下津井 - 丸亀間航路は航路が短いことから本州と四国とを結ぶ「四国往来」と呼ばれる主要ルートの一部とされ、金比羅参りの人々などが古くから多く利用していた。
しかし、1910年に国鉄宇野線が全通し、これに接続する形で宇野 - 高松間で宇高連絡船の運航が開始されると、下津井 - 丸亀間航路の利用者は激減した。そこで四国渡航客を取り戻すために、下津井から国鉄線までの鉄道路線が計画された。
会社設立に当たっては、当時塩田王として知られた野﨑家や、回船業や醸造業を営んでいた永山家[1]をはじめとする児島・下津井の有力者らや、下津井の対岸にあたり、下津井 - 丸亀航路の盛衰が直接街の経済に影響を及ぼすことになる丸亀の有力者ら[2]の出資や用地提供を受け、1910年に下津井軽便鉄道期成同盟会を結成して、岡山県児島郡下津井より岡山県都窪郡茶屋町に至る軽便鉄道の旅客・貨物営業許可申請を行い、免許を取得した。
これにより、1911年に下津井軽便鉄道会社を設立、全線の建設工事を着工した。
もっとも、終端に当たる琴海 - 鷲羽山付近に大規模な岩盤開削工事が含まれ、その完成までには時間を要したため、児島郡最大の都邑であり、しかも下津井軽便鉄道にとって大口の路線用地提供者であった野﨑家が本拠を構える児島までの早期開業が要請された。これに応じて味野町(後の児島) - 茶屋町間14.5kmが1913年に先行開業し、翌1914年に下津井 - 味野町間6.5kmが開業して茶屋町 - 下津井間21.0kmが全通している。