lib & contrib: update imports

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/json: split the serialization module, replace package entrypoint & update doc

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

neo_doxygen: fix some typos and warnings

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

neo_doxygen: remove duplicate tests (copied from docunits)

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

neo4j: update expected test results with full serialized objects

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

refund: force last line break and update expected errors

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

tests: update expected results of serialization & json tests

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

json::serialization: inline arrays

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

json::serialization: 2 less spaces in non-pretty mode

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

refund & nitrpg: rename 2 conflictual to_json to to_json_object

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

tests: update deserialization expected error

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

*: update redefs of `to_json`

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

json::serialization: add an example for building a JSON object from a Map

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

json::serialization: add compatibility methods to_json and to_pretty_json

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

json::static: all Jsonable are Serializable

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

json::static: reword module doc

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/json & nitcc_runtime: make some classes serializable

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/json: remove duplicated JSON writing services from static

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/json: bring back string to JSON service to `json::serialization`

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

Merge: StatementRow::map

I thought this was lacking from the API, so now when dealing with a StatementRow, one can get a map from column name to column value.

NOTE: This is not lazy since Sqlite re-uses the StatementRow for each row returned when a select statement is sent to the database.

Pull-Request: #2308
Reviewed-by: Alexis Laferrière <alexis.laf@xymus.net>

tests: Update `test_sqlite3_nity` to include `StatementRow::map`

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

lib/sqlite: Added `map` method to `StatementRow`

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: gamnit: fix field of view issues

Erroneous code at creation of the perspective matrix caused a wider than requested frustum and field of view. This caused issues in other gamnit code:

* The service `camera_to_world` had to multiply the result by 1.72 to correct the deformation.
* In `asteronits`, the world was not filling the screen, only part of it.
* In general, it created a cool but not desired wide angle lens / fisheye effect.

After the fix, some clients might have to widen the requested visible area, usually set with `reset_height`. We may have to lower the default `field_of_view_y` as it is a bit high.

Pull-Request: #2307
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>
Reviewed-by: Jean Privat <jean@pryen.org>

action_nitro: see more world units on screen

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

gamnit: the magic number has been fixed by the fovy

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

gamnit: fix setting camera field of view

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

Merge: nitweb: render wikilinks

This PR allows nitweb to render wikilinks from README.md files.

Here the demo with the lib/core/README.md file: http://nitweb.moz-code.org/doc/core

Pull-Request: #2306
Reviewed-by: Jean Privat <jean@pryen.org>

nitweb: replace default md_processor so nitweb can render README files

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: move md_processor to config

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

src/doc_down: does not pre escape nit source code

Fixes a problem of rendering when the nitunit contains `"`

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

src/doc_down: make md processors writable

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

Merge: nitweb: use index for quick search

This PR use the `model_index` API to provide better quicksearch in nitweb.

Demo: http://nitweb.moz-code.org/

Will maybe close a shitstorm of quicksearch related issues but I'm to lazy to check the numbers...

Pull-Request: #2305
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: nitweb: better namespaces

Before this PR, the namespace composition (adding html things to the MEntity::full_name) was handled by Angular. Namespaces are a pain in the nit to generate, even more when you don't have access to the model... So the solution was to delegate that work to the API.

With this PR, nitweb attach a Namespace object to each MEntity so Angular knows how to render it.
The idea is pretty simple, a namespace is an array of either:

* a string for "::", "$" ...
* an mentity reference like `Array`
* another namespace for recursive definitions

Demo is here: http://nitweb.moz-code.org/

Some examples:

* `core`: http://nitweb.moz-code.org/doc/core
* `core>`: http://nitweb.moz-code.org/doc/core>
* `core::core`: http://nitweb.moz-code.org/doc/core::core
* `core::Array`: http://nitweb.moz-code.org/doc/core::Array
* `core::Array::from`: http://nitweb.moz-code.org/doc/core::Array::from

Pull-Request: #2304
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: frontend: make the warning on unavailable glslangValidator an advice

Changes the following warning to an advice and raise it at each use of the annotations (instead of only once).

~~~
/nit/lib/gamnit/flat.nit:355,9--26: Warning: program `glslangValidator` not in PATH, cannot validate this shader. (glslvalidator)
""" @ glsl_vertex_shader
~~~

Pull-Request: #2299
Reviewed-by: Jean Privat <jean@pryen.org>
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: app::audio: remove deprecated services and other minor improvements

This PR removes the old `load_sound` and `load_music` services, they were replaced by lazy loading services a while back. The new services are more in line with the other asset loading services from `gamnit`.

There are also other general but minor improvements: doc updates, better names for a param and an attribute, less warnings, less casts, more consistent error messages and easier debugging.

Pull-Request: #2300
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: typing: Fix minor mistakes in documentation

Signed-off-by: Jean-Christophe Beaupré <jcbrinfo@users.noreply.github.com>

Pull-Request: #2301

Merge: json::serialization: don't raise errors on missing attributes with default values

This PR fits in the ongoing work to improve deserializing from plain JSON objects.

The JSON deserialization engine no longer raises errors on missing attributes when a default value is available. Attributes may be missing because the JSON object come from a third-party API or
when loading serialized data from a previous version of the software. Default values include simple default values (`var x = 4`), lazy attributes and nullable types (which are set to `null`). This does not yet include `optional` attributes, more work would be needed.

The test/example can be activated when #2296 is fixed.

Pull-Request: #2302
Reviewed-by: Jean Privat <jean@pryen.org>
Reviewed-by: Alexandre Terrasa <alexandre@moz-code.org>

Merge: nitweb: light responses

Nitweb was returning insane amount of data (~2mo of json by request). The new version (http://nitweb.moz-code.org/) is a little more perf.

Pull-Request: #2303
Reviewed-by: Jean Privat <jean@pryen.org>

nitweb/ng: enhance search results display

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb/ng: clean card css

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: use model index

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: move view to config

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: autoload focused linearization code

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: show namespace in frontend

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: add `namespace` key to all mentities json

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

model: fix some warnings

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: fix linearization responses

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: use model_json `full_json`

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

src/model: split model json into short and full json

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

tests: udate JSON tests

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

json::serialization: document reading from JSON with missing attributes

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

frontend/serialization: missing nullable attribute are set to null

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

serialization: don't throw missing attribute error if there is a default value

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

frontend/serialization: leave missing attributes to their default value

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

json::serialization: engines report when an attributes is missing

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

frontend/serialization: remove generated documentation

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

modelize: precise in `has_value` doc the link with `is_lazy`

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

typing: Fix minor mistakes in documentation

Signed-off-by: Jean-Christophe Beaupré <jcbrinfo@users.noreply.github.com>

android::audio: remove indirection to sounds.add

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

android::audio: revamp param and doc of `load_name`

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

app::audio: rename `name` to `path`

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

app::audio: update doc

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

android::audio: print errors at loading sounds

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

frontend: always raise advice about missing glslangValidator

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

frontend: make the warning on missing `glslangValidator` an advice

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

app::audio: drop the old load_sound and load_music

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

Merge: serialization: fix a bug, improve doc and clean weird condition

Pull-Request: #2297
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: Mkdir fix

Calling `String::mkdir` on a path might produce errors when part of the path already existed.

This PR fixes this behaviour.

Pull-Request: #2298
Reviewed-by: Jean Privat <jean@pryen.org>

lib/core: `String::mkdir` will only produce an error when the complete path already exists

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

lib/core: Make `file_exists` a `Text` function instead of `String`

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

lib/serialization: better doc for `AttributeTypeError`

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

binary::serialization: fix if condition

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

frontend/serialization: fix skipping type check for `nullable Object` attr

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

Merge: modelize_property: Promote `refine-type` to an error

Signed-off-by: Jean-Christophe Beaupré <jcbrinfo@users.noreply.github.com>

Pull-Request: #2287
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: Beef up github merge

The tool was fragile, crappy, and very limited.
Now it is still fragile, crappy but less limited.

A lot of new features:

* can work on other repositories than nitlang/nit
* can choose what query to list (eg label)
* fixed status info, and we can filter on it also
* can merge automatically
* and ~~much~~ some more.

All these improvement are used to enable the automatic construction of a `next` branch based on PR with some characteristics.

Pull-Request: #2293
Reviewed-by: Alexis Laferrière <alexis.laf@xymus.net>

Merge: json::serialization: fix reading attributes from non-objects

This error could arise when parsing invalid JSON strings (or non-object JSON values) and skipping the call to `deserialize`.

See @privat comment in #2291.

Pull-Request: #2295
Reviewed-by: Jean Privat <jean@pryen.org>
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>

github_merge: add --status to filter out PR without success

Signed-off-by: Jean Privat <jean@pryen.org>

github_merge: use combined status (and be more useful)

Signed-off-by: Jean Privat <jean@pryen.org>

github_merge: add option --all to merge all PR

Signed-off-by: Jean Privat <jean@pryen.org>

github_merge: skip issues (not PR)

Signed-off-by: Jean Privat <jean@pryen.org>

github_merge: add options

Signed-off-by: Jean Privat <jean@pryen.org>

json::serialization: fix reading attributes from non-objects

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

Merge: Tools use model index

Add `model_index` inside `model_view` so importing `model_index` automatically provide an index within the view. Also migrate documentation tools to model index.

### nitx

Model index is used to search mentities in commands (like `Array`, or `doc: Array`)
Improvement: nitx can no suggest entities if nothing was found.

### nitdoc

Model index is used to render doc commands in README files (like `[[list: Array]]`, or `[[graph: Array]]`)

Improvements:
* user can use `name` or `full_name` to locate entities
* nitdoc check and suggest errors
* nitdoc check and display short name conflicts

### nitweb

Model index is used to render doc down inputs and benefits now from the same improvements than nitdoc (but with a different implementation).

Futur PR will migrate the quick search engine.

Pull-Request: #2290
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: pipeline: Introduce `Iterator2`

Add a generalization of `PipeJoin`.

Signed-off-by: Jean-Christophe Beaupré <jcbrinfo@users.noreply.github.com>

Pull-Request: #2292
Reviewed-by: Jean Privat <jean@pryen.org>

githumerge: skip if already merged

Signed-off-by: Jean Privat <jean@pryen.org>

github_merge: accept more than one argument

Signed-off-by: Jean Privat <jean@pryen.org>

pipeline: Introduce `Iterator2`

Add a generalization of `PipeJoin`.

Signed-off-by: Jean-Christophe Beaupré <jcbrinfo@users.noreply.github.com>

nitweb: doc_down use model_index

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

src/model: remove useless services from model_view

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitdoc: use model index

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitx: use model index

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

src/model: associate model index and model view

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

Merge: Nitweb errors

Better error handling for the nitweb API:

* the API catches all unmatched `/api/*` requests and display a JSON error. Example here: http://nitweb.moz-code.org/api/foo
* better error messages (in JSON) for all API handlers. One example here: http://nitweb.moz-code.org/api/entity/foo

Also one change in the frontend that displays 404 not found pages: http://nitweb.moz-code.org/foo

Pull-Request: #2289
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: lib/github: make `PullRef::repo` nullable.

Since repos can be deleted, the reference can be null.

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

Pull-Request: #2288
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: lib/popcorn: introduce PopTracker

## Popcorn web tracker

Easy and ready to use web tracker you can apply to your popcorn application.

The only thing you have to do is to use the tracker in your app routes:

~~~nit
var config = new AppConfig
var app = new App
app.use("/", new HomeHandler)
app.use("/products", new ProductsHandler)
app.use("customers/", new CustomersHandler)

app.use_after("/*", new PopTracker(config)) # tracker listens to /*
~~~

You can also use multiple tracker at once on different route.
All the data will be aggregated for you.

~~~nit
app.use_after("/api/*", new PopTracker(config))
app.use_after("/admin/*", new PopTracker(config))
~~~

To retrieve your tracker data use the `PopTrackerAPI` which serves the tracker
data in JSON format.

~~~nit
app.use("/api/tracker_data", new PopTrackerAPI(config))
~~~

Here some demo of what can be done when using the data:


More here: http://nitweb.moz-code.org/traffic

Pull-Request: #2286
Reviewed-by: Jean Privat <jean@pryen.org>

nitweb: front end display 404 error

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: catch 404 errors from /api/*

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: better error responses from API

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: merge ModelHandler and APIHandler

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>

nitweb: split APIRouter in modules

Signed-off-by: Alexandre Terrasa <alexandre@moz-code.org>