Фамилия Крустыньш — яркий пример латышской модели фамилии, которая почти не встречается за пределами Латвии и латышской диаспоры. Её основа — латышское слово krusts, что значит «крест». Суффикс -iņš (в русской передаче -ыньш) — типичный латышский уменьшительный суффикс, который в фамилиях часто указывал на происхождение от отца или на малый рост, молодость. Таким образом, Крустыньш — это буквально «маленький крест» или «сын Круста» (где Круст — прозвище или имя человека, связанного с крестом).

В отличие от русских фамилий на -ов/-ев, латышские фамилии на -iņš не указывали на принадлежность к сословию (крестьянин, ремесленник, дворянин) — они фиксировали прозвище или профессию. Вероятнее всего, первый носитель фамилии Крустыньш мог быть либо сыном человека по прозвищу Крустс (например, крестоносца, церковного служки или того, кто жил у придорожного креста), либо сам имел отношение к изготовлению или установке крестов — в дохристианской и раннехристианской Латвии кресты были не только религиозным символом, но и межевыми знаками, придорожными памятниками.

Интересная деталь: в латышском языке слово krusts имеет и переносное значение — «крест» как тяжёлая ноша, испытание. Не исключено, что прозвище Крустс давали человеку с трудной судьбой или тому, кто постоянно жаловался на жизнь. Однако более правдоподобна «профессиональная» версия — резчик по дереву или камню, изготавливавший кресты для кладбищ и церквей.

Фамилия Крустыньш — редкая даже в Латвии. В дореволюционных метрических книгах она фиксировалась в латинизированном написании Krustiņš, а после присоединения Латвии к СССР — в кириллической передаче. В русском языке окончание -ыньш сохраняет латышское произношение, хотя иногда встречается вариант Крустиньш. Носители этой фамилии в основном сосредоточены в исторических регионах Латгалия и Видземе, где латышские фамилии на -iņš особенно распространены.