If you want to imply that you can only speak but not write, etc. you should say it like this:
Я по-русски только немного говорю or better Я по-русски могу только немного говорить.
while putting the...