crn_data_stream_serializer.h 15 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420421422423424425426427428429430431432433434435436437438439440441442443444445446447448449450451452453454455456457458459460461462463464465466467468
  1. // File: data_stream_serializer.h
  2. // See Copyright Notice and license at the end of inc/crnlib.h
  3. #pragma once
  4. #include "crn_data_stream.h"
  5. namespace crnlib
  6. {
  7. // Defaults to little endian mode.
  8. class data_stream_serializer
  9. {
  10. public:
  11. data_stream_serializer() : m_pStream(NULL), m_little_endian(true) { }
  12. data_stream_serializer(data_stream* pStream) : m_pStream(pStream), m_little_endian(true) { }
  13. data_stream_serializer(data_stream& stream) : m_pStream(&stream), m_little_endian(true) { }
  14. data_stream_serializer(const data_stream_serializer& other) : m_pStream(other.m_pStream), m_little_endian(other.m_little_endian) { }
  15. data_stream_serializer& operator= (const data_stream_serializer& rhs) { m_pStream = rhs.m_pStream; m_little_endian = rhs.m_little_endian; return *this; }
  16. data_stream* get_stream() const { return m_pStream; }
  17. void set_stream(data_stream* pStream) { m_pStream = pStream; }
  18. const dynamic_string& get_name() const { return m_pStream ? m_pStream->get_name() : g_empty_dynamic_string; }
  19. bool get_error() { return m_pStream ? m_pStream->get_error() : false; }
  20. bool get_little_endian() const { return m_little_endian; }
  21. void set_little_endian(bool little_endian) { m_little_endian = little_endian; }
  22. bool write(const void* pBuf, uint len)
  23. {
  24. return m_pStream->write(pBuf, len) == len;
  25. }
  26. bool read(void* pBuf, uint len)
  27. {
  28. return m_pStream->read(pBuf, len) == len;
  29. }
  30. // size = size of each element, count = number of elements, returns actual count of elements written
  31. uint write(const void* pBuf, uint size, uint count)
  32. {
  33. uint actual_size = size * count;
  34. if (!actual_size)
  35. return 0;
  36. uint n = m_pStream->write(pBuf, actual_size);
  37. if (n == actual_size)
  38. return count;
  39. return n / size;
  40. }
  41. // size = size of each element, count = number of elements, returns actual count of elements read
  42. uint read(void* pBuf, uint size, uint count)
  43. {
  44. uint actual_size = size * count;
  45. if (!actual_size)
  46. return 0;
  47. uint n = m_pStream->read(pBuf, actual_size);
  48. if (n == actual_size)
  49. return count;
  50. return n / size;
  51. }
  52. bool write_chars(const char* pBuf, uint len)
  53. {
  54. return write(pBuf, len);
  55. }
  56. bool read_chars(char* pBuf, uint len)
  57. {
  58. return read(pBuf, len);
  59. }
  60. bool skip(uint len)
  61. {
  62. return m_pStream->skip(len) == len;
  63. }
  64. template<typename T>
  65. bool write_object(const T& obj)
  66. {
  67. if (m_little_endian == c_crnlib_little_endian_platform)
  68. return write(&obj, sizeof(obj));
  69. else
  70. {
  71. uint8 buf[sizeof(T)];
  72. uint buf_size = sizeof(T);
  73. void* pBuf = buf;
  74. utils::write_obj(obj, pBuf, buf_size, m_little_endian);
  75. return write(buf, sizeof(T));
  76. }
  77. }
  78. template<typename T>
  79. bool read_object(T& obj)
  80. {
  81. if (m_little_endian == c_crnlib_little_endian_platform)
  82. return read(&obj, sizeof(obj));
  83. else
  84. {
  85. uint8 buf[sizeof(T)];
  86. if (!read(buf, sizeof(T)))
  87. return false;
  88. uint buf_size = sizeof(T);
  89. const void* pBuf = buf;
  90. utils::read_obj(obj, pBuf, buf_size, m_little_endian);
  91. return true;
  92. }
  93. }
  94. template<typename T>
  95. bool write_value(T value)
  96. {
  97. return write_object(value);
  98. }
  99. template<typename T>
  100. T read_value(const T& on_error_value = T())
  101. {
  102. T result;
  103. if (!read_object(result))
  104. result = on_error_value;
  105. return result;
  106. }
  107. template<typename T>
  108. bool write_enum(T e)
  109. {
  110. int val = static_cast<int>(e);
  111. return write_object(val);
  112. }
  113. template<typename T>
  114. T read_enum()
  115. {
  116. return static_cast<T>(read_value<int>());
  117. }
  118. // Writes uint using a simple variable length code (VLC).
  119. bool write_uint_vlc(uint val)
  120. {
  121. do
  122. {
  123. uint8 c = static_cast<uint8>(val) & 0x7F;
  124. if (val <= 0x7F)
  125. c |= 0x80;
  126. if (!write_value(c))
  127. return false;
  128. val >>= 7;
  129. } while (val);
  130. return true;
  131. }
  132. // Reads uint using a simple variable length code (VLC).
  133. bool read_uint_vlc(uint& val)
  134. {
  135. val = 0;
  136. uint shift = 0;
  137. for ( ; ; )
  138. {
  139. if (shift >= 32)
  140. return false;
  141. uint8 c;
  142. if (!read_object(c))
  143. return false;
  144. val |= ((c & 0x7F) << shift);
  145. shift += 7;
  146. if (c & 0x80)
  147. break;
  148. }
  149. return true;
  150. }
  151. bool write_c_str(const char* p)
  152. {
  153. uint len = static_cast<uint>(strlen(p));
  154. if (!write_uint_vlc(len))
  155. return false;
  156. return write_chars(p, len);
  157. }
  158. bool read_c_str(char* pBuf, uint buf_size)
  159. {
  160. uint len;
  161. if (!read_uint_vlc(len))
  162. return false;
  163. if ((len + 1) > buf_size)
  164. return false;
  165. pBuf[len] = '\0';
  166. return read_chars(pBuf, len);
  167. }
  168. bool write_string(const dynamic_string& str)
  169. {
  170. if (!write_uint_vlc(str.get_len()))
  171. return false;
  172. return write_chars(str.get_ptr(), str.get_len());
  173. }
  174. bool read_string(dynamic_string& str)
  175. {
  176. uint len;
  177. if (!read_uint_vlc(len))
  178. return false;
  179. if (!str.set_len(len))
  180. return false;
  181. if (len)
  182. {
  183. if (!read_chars(str.get_ptr_raw(), len))
  184. return false;
  185. if (memchr(str.get_ptr(), 0, len) != NULL)
  186. {
  187. str.truncate(0);
  188. return false;
  189. }
  190. }
  191. return true;
  192. }
  193. template<typename T>
  194. bool write_vector(const T& vec)
  195. {
  196. if (!write_uint_vlc(vec.size()))
  197. return false;
  198. for (uint i = 0; i < vec.size(); i++)
  199. {
  200. *this << vec[i];
  201. if (get_error())
  202. return false;
  203. }
  204. return true;
  205. };
  206. template<typename T>
  207. bool read_vector(T& vec, uint num_expected = UINT_MAX)
  208. {
  209. uint size;
  210. if (!read_uint_vlc(size))
  211. return false;
  212. if ((size * sizeof(T::value_type)) >= 2U*1024U*1024U*1024U)
  213. return false;
  214. if ((num_expected != UINT_MAX) && (size != num_expected))
  215. return false;
  216. vec.resize(size);
  217. for (uint i = 0; i < vec.size(); i++)
  218. {
  219. *this >> vec[i];
  220. if (get_error())
  221. return false;
  222. }
  223. return true;
  224. }
  225. bool read_entire_file(crnlib::vector<uint8>& buf)
  226. {
  227. return m_pStream->read_array(buf);
  228. }
  229. bool write_entire_file(const crnlib::vector<uint8>& buf)
  230. {
  231. return m_pStream->write_array(buf);
  232. }
  233. // Got this idea from the Molly Rocket forums.
  234. // fmt may contain the characters "1", "2", or "4".
  235. bool writef(char *fmt, ...)
  236. {
  237. va_list v;
  238. va_start(v, fmt);
  239. while (*fmt)
  240. {
  241. switch (*fmt++)
  242. {
  243. case '1':
  244. {
  245. const uint8 x = static_cast<uint8>(va_arg(v, uint));
  246. if (!write_value(x))
  247. return false;
  248. }
  249. case '2':
  250. {
  251. const uint16 x = static_cast<uint16>(va_arg(v, uint));
  252. if (!write_value(x))
  253. return false;
  254. }
  255. case '4':
  256. {
  257. const uint32 x = static_cast<uint32>(va_arg(v, uint));
  258. if (!write_value(x))
  259. return false;
  260. }
  261. case ' ':
  262. case ',':
  263. {
  264. break;
  265. }
  266. default:
  267. {
  268. CRNLIB_ASSERT(0);
  269. return false;
  270. }
  271. }
  272. }
  273. va_end(v);
  274. return true;
  275. }
  276. // Got this idea from the Molly Rocket forums.
  277. // fmt may contain the characters "1", "2", or "4".
  278. bool readf(char *fmt, ...)
  279. {
  280. va_list v;
  281. va_start(v, fmt);
  282. while (*fmt)
  283. {
  284. switch (*fmt++)
  285. {
  286. case '1':
  287. {
  288. uint8* x = va_arg(v, uint8*);
  289. CRNLIB_ASSERT(x);
  290. if (!read_object(*x))
  291. return false;
  292. }
  293. case '2':
  294. {
  295. uint16* x = va_arg(v, uint16*);
  296. CRNLIB_ASSERT(x);
  297. if (!read_object(*x))
  298. return false;
  299. }
  300. case '4':
  301. {
  302. uint32* x = va_arg(v, uint32*);
  303. CRNLIB_ASSERT(x);
  304. if (!read_object(*x))
  305. return false;
  306. }
  307. case ' ':
  308. case ',':
  309. {
  310. break;
  311. }
  312. default:
  313. {
  314. CRNLIB_ASSERT(0);
  315. return false;
  316. }
  317. }
  318. }
  319. va_end(v);
  320. return true;
  321. }
  322. private:
  323. data_stream* m_pStream;
  324. bool m_little_endian;
  325. };
  326. // Write operators
  327. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, bool val) { serializer.write_value(val); return serializer; }
  328. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, int8 val) { serializer.write_value(val); return serializer; }
  329. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, uint8 val) { serializer.write_value(val); return serializer; }
  330. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, int16 val) { serializer.write_value(val); return serializer; }
  331. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, uint16 val) { serializer.write_value(val); return serializer; }
  332. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, int32 val) { serializer.write_value(val); return serializer; }
  333. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, uint32 val) { serializer.write_uint_vlc(val); return serializer; }
  334. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, int64 val) { serializer.write_value(val); return serializer; }
  335. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, uint64 val) { serializer.write_value(val); return serializer; }
  336. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, long val) { serializer.write_value(val); return serializer; }
  337. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, unsigned long val) { serializer.write_value(val); return serializer; }
  338. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, float val) { serializer.write_value(val); return serializer; }
  339. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, double val) { serializer.write_value(val); return serializer; }
  340. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, const char* p) { serializer.write_c_str(p); return serializer; }
  341. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, const dynamic_string& str)
  342. {
  343. serializer.write_string(str);
  344. return serializer;
  345. }
  346. template<typename T>
  347. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, const crnlib::vector<T>& vec)
  348. {
  349. serializer.write_vector(vec);
  350. return serializer;
  351. }
  352. template<typename T>
  353. inline data_stream_serializer& operator<< (data_stream_serializer& serializer, const T* p)
  354. {
  355. serializer.write_object(*p);
  356. return serializer;
  357. }
  358. // Read operators
  359. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, bool& val) { serializer.read_object(val); return serializer; }
  360. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, int8& val) { serializer.read_object(val); return serializer; }
  361. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, uint8& val) { serializer.read_object(val); return serializer; }
  362. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, int16& val) { serializer.read_object(val); return serializer; }
  363. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, uint16& val) { serializer.read_object(val); return serializer; }
  364. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, int32& val) { serializer.read_object(val); return serializer; }
  365. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, uint32& val) { serializer.read_uint_vlc(val); return serializer; }
  366. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, int64& val) { serializer.read_object(val); return serializer; }
  367. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, uint64& val) { serializer.read_object(val); return serializer; }
  368. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, long& val) { serializer.read_object(val); return serializer; }
  369. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, unsigned long& val) { serializer.read_object(val); return serializer; }
  370. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, float& val) { serializer.read_object(val); return serializer; }
  371. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, double& val) { serializer.read_object(val); return serializer; }
  372. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, dynamic_string& str)
  373. {
  374. serializer.read_string(str);
  375. return serializer;
  376. }
  377. template<typename T>
  378. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, crnlib::vector<T>& vec)
  379. {
  380. serializer.read_vector(vec);
  381. return serializer;
  382. }
  383. template<typename T>
  384. inline data_stream_serializer& operator>> (data_stream_serializer& serializer, T* p)
  385. {
  386. serializer.read_object(*p);
  387. return serializer;
  388. }
  389. } // namespace crnlib