根据《治安管理处罚法》第六十六条：卖淫、嫖娼的，处 10 日以上 15 日以下拘留，可以并处 5000 元以下罚款；情节较轻的，处 5 日以下拘留或者 500 元以下罚款。在公共场所拉客招嫖的，处 5 日以下拘留或者 500 元以下罚款。
因此，如果公安机关以涉嫌卖淫嫖娼为由对你处以行政拘留，而你实际上并未从事此类行为，那么公安机关的行为可能存在错误。
同时，对于你提到的穿黄色马甲的情况，这可能会被视为违反社会公德或者有不当行为嫌疑，但具体是否会被进一步处理，还需要根据具体情况和法律规定来判断。
如果你对公安机关的处理有异议，你可以依法申请行政复议或者提起行政诉讼。
总之，如果你确实没有从事违法活动，那么应该坚持自己的说法，并配合公安机关的调查和处理。如果有任何疑问或者需要法律帮助，建议咨询专业律师或者相关机构。
以上内容仅供参考，如有疑虑，建议你咨询律师及相关专业人士以获取更为准确且详细的信息。
