Как разговаривать на английском языке, зная англ слова, но не зная грамматики? Ведь я знаю много таких людей (не лично),

Некие неизвестные вам лично люди говорят, не зная грамматики.. . Откуда вы можете знать, что они знают, а чего нет? И что такое знание? Надо договориться о терминах.
Ребенок, выросший в языковой среде, но еще не ходивший в школу, не знает, как называется видо-временная форма глагола, с помощью которого он просит себе мороженое или получает нагоняй от матери. Это не значит, что он не знает грамматики. Просто к ее изучению он подошел с другой стороны. Вам она уже не светит, поэтому грамматику придется учить.

Ребенок не изучал грамматики, но говорит более или менее верно, потому что язык воспринимает по слуху, копируя окружающих. Другое дело - взрослый, желающий говорить на новом для него языке. Если он выучил 100 слов, но совсем не знает элементов грамматики, то его разговор будет вроде "мой на твой пошёл домой". И уж понимать речь носителя языка ему будет почти невозможно. В таких случаях может помочь язык жестов или даже рисунков. Если же взрослый оказался в другой стране, то после нескольких месяцев мучительного непонимания язык более-менее наладится, хотя без основ грамматики в речи будут часто попадаться ошибки, потому что дотянуться до носителей языка с их "врожденной" грамматикой (кстати, обычно далеко не безупречной) вряд ли удастся.

Моя 6-летняя внучка говорит с грехом пополам на двух языках, не имея никакого представления об их грамматиках. Просто навык, общение, не стесняться ошибаться и прочее. А дальше всё само-собой образуется.
Но это отнюдь не означает, что не надо изучать грамматику!

Да это возможно. Ведь уже давным давно известно что для простого общения может хватить и 300 слов. Если человек хорошо понимает к тому же - и в разговоре как эквилибрист перебирает словами почти ничего не помешает ему общаться без проблем. Другое дело что качество такого ангийского весьма сомнительно и все равно если вы хотите лучше разговаривать в будущем нужно заниматься английским.
Чтобы получить такой "корявый" но не редко нужный английский всего навсего нужна практика чтобы стереть все барьеры перед собой.