mirror of
https://github.com/red0124/ssp.git
synced 2025-12-15 22:29:55 +01:00
Compare commits
4 Commits
improvemen
...
v1.6.2
| Author | SHA1 | Date | |
|---|---|---|---|
|
|
fdd153b63e | ||
| c05ab35a33 | |||
| 8d1637cad1 | |||
| 7530be1c44 |
@@ -2,7 +2,7 @@ cmake_minimum_required(VERSION 3.14)
|
|||||||
|
|
||||||
project(
|
project(
|
||||||
ssp
|
ssp
|
||||||
VERSION 1.6.1
|
VERSION 1.6.2
|
||||||
DESCRIPTION "csv parser"
|
DESCRIPTION "csv parser"
|
||||||
HOMEPAGE_URL "https://github.com/red0124/ssp"
|
HOMEPAGE_URL "https://github.com/red0124/ssp"
|
||||||
LANGUAGES CXX
|
LANGUAGES CXX
|
||||||
|
|||||||
@@ -1,7 +1,11 @@
|
|||||||
#pragma once
|
#pragma once
|
||||||
|
#include <cstdint>
|
||||||
|
#include <cstdio>
|
||||||
|
#include <cstdlib>
|
||||||
#include <vector>
|
#include <vector>
|
||||||
|
|
||||||
namespace ss {
|
namespace ss {
|
||||||
|
|
||||||
struct none {};
|
struct none {};
|
||||||
|
|
||||||
using string_range = std::pair<const char*, const char*>;
|
using string_range = std::pair<const char*, const char*>;
|
||||||
@@ -20,4 +24,61 @@ inline void assert_throw_on_error_not_defined() {
|
|||||||
static_assert(!ThrowOnError, "cannot handle errors manually if "
|
static_assert(!ThrowOnError, "cannot handle errors manually if "
|
||||||
"'throw_on_error' is enabled");
|
"'throw_on_error' is enabled");
|
||||||
}
|
}
|
||||||
|
|
||||||
|
#if __unix__
|
||||||
|
inline ssize_t get_line(char** lineptr, size_t* n, FILE* stream) {
|
||||||
|
return getline(lineptr, n, stream);
|
||||||
|
}
|
||||||
|
#else
|
||||||
|
using ssize_t = int64_t;
|
||||||
|
inline ssize_t get_line(char** lineptr, size_t* n, FILE* stream) {
|
||||||
|
size_t pos;
|
||||||
|
int c;
|
||||||
|
|
||||||
|
if (lineptr == nullptr || stream == nullptr || n == nullptr) {
|
||||||
|
errno = EINVAL;
|
||||||
|
return -1;
|
||||||
|
}
|
||||||
|
|
||||||
|
c = getc(stream);
|
||||||
|
if (c == EOF) {
|
||||||
|
return -1;
|
||||||
|
}
|
||||||
|
|
||||||
|
if (*lineptr == nullptr) {
|
||||||
|
*lineptr = static_cast<char*>(malloc(128));
|
||||||
|
if (*lineptr == nullptr) {
|
||||||
|
return -1;
|
||||||
|
}
|
||||||
|
*n = 128;
|
||||||
|
}
|
||||||
|
|
||||||
|
pos = 0;
|
||||||
|
while (c != EOF) {
|
||||||
|
if (pos + 1 >= *n) {
|
||||||
|
size_t new_size = *n + (*n >> 2);
|
||||||
|
if (new_size < 128) {
|
||||||
|
new_size = 128;
|
||||||
|
}
|
||||||
|
char* new_ptr = static_cast<char*>(
|
||||||
|
realloc(static_cast<void*>(*lineptr), new_size));
|
||||||
|
if (new_ptr == nullptr) {
|
||||||
|
return -1;
|
||||||
|
}
|
||||||
|
*n = new_size;
|
||||||
|
*lineptr = new_ptr;
|
||||||
|
}
|
||||||
|
|
||||||
|
(*lineptr)[pos++] = c;
|
||||||
|
if (c == '\n') {
|
||||||
|
break;
|
||||||
|
}
|
||||||
|
c = getc(stream);
|
||||||
|
}
|
||||||
|
|
||||||
|
(*lineptr)[pos] = '\0';
|
||||||
|
return pos;
|
||||||
|
}
|
||||||
|
#endif
|
||||||
|
|
||||||
} /* ss */
|
} /* ss */
|
||||||
|
|||||||
File diff suppressed because it is too large
Load Diff
@@ -6,7 +6,7 @@ project(
|
|||||||
'cpp_std=c++17',
|
'cpp_std=c++17',
|
||||||
'buildtype=debugoptimized',
|
'buildtype=debugoptimized',
|
||||||
'wrap_mode=forcefallback'],
|
'wrap_mode=forcefallback'],
|
||||||
version: '1.6.1',
|
version: '1.6.2',
|
||||||
meson_version:'>=0.54.0')
|
meson_version:'>=0.54.0')
|
||||||
|
|
||||||
fast_float_dep = dependency('fast_float')
|
fast_float_dep = dependency('fast_float')
|
||||||
|
|||||||
2
ssp.hpp
2
ssp.hpp
@@ -2281,7 +2281,7 @@ public:
|
|||||||
return;
|
return;
|
||||||
}
|
}
|
||||||
|
|
||||||
if (header_.empty()) {
|
if (header_.empty() && !eof()) {
|
||||||
split_header_data();
|
split_header_data();
|
||||||
}
|
}
|
||||||
|
|
||||||
|
|||||||
@@ -897,7 +897,7 @@ void test_multiline_restricted() {
|
|||||||
out << "17,18,\"ju\\\n\\\n\\\n\\\\\n\nnk\"" << std::endl;
|
out << "17,18,\"ju\\\n\\\n\\\n\\\\\n\nnk\"" << std::endl;
|
||||||
out << "19,20,just strings" << std::endl;
|
out << "19,20,just strings" << std::endl;
|
||||||
}
|
}
|
||||||
auto bad_lines = 19;
|
auto bad_lines = 15;
|
||||||
auto num_errors = 0;
|
auto num_errors = 0;
|
||||||
|
|
||||||
ss::parser<ss::multiline_restricted<2>, ss::quote<'"'>, ss::escape<'\\'>,
|
ss::parser<ss::multiline_restricted<2>, ss::quote<'"'>, ss::escape<'\\'>,
|
||||||
@@ -1641,7 +1641,6 @@ void test_ignore_empty(const std::vector<X>& data) {
|
|||||||
test_ignore_empty_impl<ss::throw_on_error>(data);
|
test_ignore_empty_impl<ss::throw_on_error>(data);
|
||||||
}
|
}
|
||||||
|
|
||||||
// TODO test with different initial buffer sizes
|
|
||||||
TEST_CASE("parser test various cases with empty lines") {
|
TEST_CASE("parser test various cases with empty lines") {
|
||||||
test_ignore_empty({{1, 2, "x"}, {3, 4, "y"}, {9, 10, "v"}, {11, 12, "w"}});
|
test_ignore_empty({{1, 2, "x"}, {3, 4, "y"}, {9, 10, "v"}, {11, 12, "w"}});
|
||||||
|
|
||||||
@@ -1671,51 +1670,11 @@ TEST_CASE("parser test various cases with empty lines") {
|
|||||||
{9, 10, X::empty},
|
{9, 10, X::empty},
|
||||||
{11, 12, X::empty}});
|
{11, 12, X::empty}});
|
||||||
|
|
||||||
test_ignore_empty({{1, 2, X::empty},
|
test_ignore_empty(
|
||||||
{3, 4, X::empty},
|
{{1, 2, "x"}, {3, 4, X::empty}, {9, 10, X::empty}, {11, 12, X::empty}});
|
||||||
{5, 6, X::empty},
|
|
||||||
{7, 8, X::empty},
|
|
||||||
{9, 10, X::empty},
|
|
||||||
{11, 12, X::empty},
|
|
||||||
{13, 14, X::empty},
|
|
||||||
{15, 16, X::empty},
|
|
||||||
{17, 18, X::empty}});
|
|
||||||
|
|
||||||
test_ignore_empty({{1, 2, X::empty},
|
test_ignore_empty(
|
||||||
{3, 4, X::empty},
|
{{1, 2, X::empty}, {3, 4, X::empty}, {9, 10, X::empty}, {11, 12, "w"}});
|
||||||
{5, 6, X::empty},
|
|
||||||
{7, 8, X::empty},
|
|
||||||
{9, 10, X::empty},
|
|
||||||
{11, 12, X::empty},
|
|
||||||
{13, 14, X::empty},
|
|
||||||
{15, 16, X::empty},
|
|
||||||
{17, 18, "x"}});
|
|
||||||
|
|
||||||
test_ignore_empty({{1, 2, "x"},
|
|
||||||
{3, 4, X::empty},
|
|
||||||
{9, 10, X::empty},
|
|
||||||
{11, 12, X::empty}});
|
|
||||||
|
|
||||||
test_ignore_empty({{1, 2, "x"},
|
|
||||||
{3, 4, X::empty},
|
|
||||||
{3, 4, X::empty},
|
|
||||||
{5, 6, X::empty},
|
|
||||||
{7, 8, X::empty},
|
|
||||||
{9, 10, X::empty},
|
|
||||||
{11, 12, X::empty}});
|
|
||||||
|
|
||||||
test_ignore_empty({{1, 2, "x"},
|
|
||||||
{3, 4, X::empty},
|
|
||||||
{3, 4, X::empty},
|
|
||||||
{5, 6, X::empty},
|
|
||||||
{7, 8, X::empty},
|
|
||||||
{9, 10, X::empty},
|
|
||||||
{11, 12, "y"}});
|
|
||||||
|
|
||||||
test_ignore_empty({{1, 2, X::empty},
|
|
||||||
{3, 4, X::empty},
|
|
||||||
{9, 10, X::empty},
|
|
||||||
{11, 12, "w"}});
|
|
||||||
|
|
||||||
test_ignore_empty({{11, 12, X::empty}});
|
test_ignore_empty({{11, 12, X::empty}});
|
||||||
|
|
||||||
|
|||||||
Reference in New Issue
Block a user