その銀行員の言う通りです。投資は余剰金があって、かつ損失を受け入れられる精神的余裕がある人がやるものです。
預金800万円あっても、1万円の損失で何年も落ち込むなら、投資には向いていません。投資は短期的に10%、20%の損失が普通に起こります。それを冷静に受け止められないなら、精神的に消耗するだけです。
知恵袋やヤフコメで「投資しない人は愚か」と言う人たちは、自分の価値観を押し付けてるだけです。投資が合う人もいれば、合わない人もいます。預金で堅実に貯めるのも、立派な資産管理です。
ただ、もし将来的に投資に興味が出たら、少額から始めるのはありです。月5,000円の積立投資なら、損失が出ても精神的ダメージは小さいし、勉強にもなります。でも、無理にやる必要は全くありません。
自分に合った方法で資産を守るのが一番賢いです。他人の意見に流されず、自分の性格を理解してるあなたは、十分賢明だと思います。