Lý Bí xuất thân từ một hào trưởng địa phương. Theo sử cũ, quê ông ở huyện Thái Bình (có lẽ ở phía trên thị xã Sơn Tây, trên hai bờ sông Hồng).
Một thời, ông có ra làm việc với chính quyền đô hộ, nhận một chức quan nhỏ: giám quận (kiểm soát quân sự) ở Cửu Đức, Đức Châu (Đức Thọ, Hà Tĩnh). Yêu nước, thương dân, bất bình với bè lũ đô hộ, ông sớm bỏ quan, về quê ở Thái Bình. Vùng quê ông có Tinh Thiều, giỏi văn chương, lặn lội sang kinh đô nhà Lương (Nam Kinh) xin bổ một chức quan (trước năm 521).
Nam triều Trung Quốc cho đến thời Lương, phân biệt tôn ti chặt chẽ giữa quý tộc và bình dân. Lại bộ thượng thư nhà Lương là Sái Tôn bảo họ Tinh là hàn môn, không có tiên hiền, chỉ cho Thiều làm Quảng Dương môn lang tức là chân canh cổng thành phía tây kinh đô Kiến Khang. Tinh Thiều lấy thế làm xấu hổ, không nhận chức về quê, cùng Lý Bí mưu tính việc khởi nghĩa, chiêu tập hiền tài.