Merge: nitc: fix --typing-test-metrics by using correct tags in FFI

Just fix `--typing-test-metrics` that was broken.

A future PR (still wip) will ensure that the option will be no more broken

Pull-Request: #1713
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>
Reviewed-by: Alexis Laferrière <alexis.laf@xymus.net>

Merge: gamnit: portable services to setup an OpenGL ES 2.0 display

Intro portable services to setup and use an OpenGL ES 2.0 display: `GamnitDisplay, setup, close, flip`. These services can be used standalone when importing `gamnit::display`, or integrated in `app.nit` by importing the whole `gamnit`.

This is an important step for Gamnit as it allows to develop portable games and will simplify building new graphic APIs gradually. However, some very useful services are still missing: textures loading, input events, full app life-cycle support (pause/resume), etc.

The display still depends on the same libraries as mnit (sdl, egl, native_app_glue, etc.), but it is much cleaner and changing the libs should be easier.

You may notice that the examples duplicate a lot of code between themselves and with `lib/glesv2/examples/opengles2_hello_triangle.nit`. All 3 examples are very useful to understand and debug the different abstraction levels, and even if they are pretty long, they are pretty much the shortest possible OpenGL ES 2.0 program I could write. I plan on keeping this duplication to keep these debugging tool, but I may move one of them (standalone) to a test folder as to not attract unwanted attention to it.

The first 3 commits are from #1708 but they are each required by either the examples or the Android support.

Pull-Request: #1709
Reviewed-by: Jean Privat <jean@pryen.org>

Merge branch 'master' into gamnit

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

nitc: fix --typing-test-metrics by using correct tags inf FFI

Signed-off-by: Jean Privat <jean@pryen.org>

Merge: android: skip signing the APK if KEY_ALIAS env var is not set

This allows to manually sign your release APK file.

As requested by @privat.

Pull-Request: #1712
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: glesv2: more services from OpenGL ES 2.0 to prepare for gamnit

This PR adds a few services to the low-level graphics modules to prepare for gamnit.

This is the 2nd PR to use a new style for the glesv2 module. The old code has not yet been fully updated, so the style may vary in the same module. The new style try to stay as close as possible to the names and signatures used by the OpenGL ES 2.0 C API and by webgl.

As usual with this module, for more documentation please refer to the official doc at https://www.khronos.org/opengles/sdk/docs/man/.

Pull-Request: #1708
Reviewed-by: Jean Privat <jean@pryen.org>
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: Fix Music loading bug for friendz

Added "music.ogg" to the res folder, android is aparently not able to load a .ogg from the assets.
I will investigate on the problem for a next PR

Pull-Request: #1707
Reviewed-by: Jean Privat <jean@pryen.org>
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>
Reviewed-by: Alexis Laferrière <alexis.laf@xymus.net>

tests: OS X ignores test using EGL

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: intro glVertexAttribPointer

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: intro glVertexAttrib*f and glUniform*i

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: move some services out of `VertexArray` as per the new style

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: update GLTextureTarget to the new contructor-less style

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: intro glTexImage2D

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: intro glFramebufferTexture2D

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: intro glPixelStorei

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: intro glRenderbufferStorage

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: intro glBindBuffer

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: intro glGenerateMipmap

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: intro glIsTexture and glBindTexture

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: wrap glFramebufferRenderbuffer and GLAttachment

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: add a Nity wrapper to the NativeGLfloatArray

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

src/android: skip signing the APK if KEY_ALIAS env var is not set

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/gamnit: add a portable version of the triangle example

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/gamnit: intro App integration and Android support

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/gamnit: intro the standalone triangle example for desktop only

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/gamnit: intro GNU/Linux support

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/gamnit: intro the abstract display

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/linux: move simulating the lifecycle of an app from mnit to app.nit

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: move some services out of `VertexArray` as per the new style

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: fix read_pixels having hardcoded args

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/glesv2: fix misplaced mipmap filters and update style

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/c: contructors `from` for native arrays accept `SequenceRead`

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/android: add ANativeWindow::set_buffers_geometry

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/egl: intro egl_default_display

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

Merge: misc/vim: update the vim plugin to use core instead of standard

The plugin was not updated with the new name for the `core` library, but it's never too late.

Pull-Request: #1703
Reviewed-by: Jean Privat <jean@pryen.org>
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: jwrapper: prevent nitls to parse the generated files

Prevent nitls to parse the generated files by adding an empty `packages.ini` file to the examples folder. This slowed down calls to `make` as nitls is used to detect the dependancies of Nit programs and it took a while to parse the huge generated files.

Pull-Request: #1702
Reviewed-by: Jean Privat <jean@pryen.org>
Reviewed-by: Romain Chanoir <chanoir.romain@courrier.uqam.ca>
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: nitiwiki: external highlighter

This is a cleaned up version of what is currently doing the code highlighting and the table in the deployed http://nitlanguage.org

The basic idea here is to delegate the job to some other program. The program has to be configured in the config.ini under the key `wiki.highlighter`

This approach, while not pure nit, makes it quite easy to use whatever highlighter program the user prefer with whatever options (instead of hard-coding a specific external program in the nit source code).

An advanced way is to delegate to a shell script that checks arguments then dispatches to a real program.

ping maintainer: @Morriar

Pull-Request: #1701
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: nitcatalog: content and options

Two improvements:

* content list (example: see end of page <http://nitlanguage.org/catalog/android.html>, section *content*)
* command-line options

Pull-Request: #1699
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>
Reviewed-by: Alexis Laferrière <alexis.laf@xymus.net>

Merge: Ballz improvements

Better concern division into modules, now works on Linux !
forces.nit module is not really used yet but will be.

PS : mnit_simple and mnit_ballz aren't launching on android at the moment, I'll fix this in a further PR

Edit: Fixed Android part

Pull-Request: #1587
Reviewed-by: Alexandre Terrasa <alexandre@moz-code.org>
Reviewed-by: Jean Privat <jean@pryen.org>
Reviewed-by: Alexis Laferrière <alexis.laf@xymus.net>

misc/vim: update the vim plugin to use core instead of standard

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

tests: make nitiwiki.args idempotent

A second execution of the test fail because arg2 modify things read by arg1.
Solution: clean after arg2

Signed-off-by: Jean Privat <jean@pryen.org>

nitiwiki: extends the example with an external highlighter

Signed-off-by: Jean Privat <jean@pryen.org>

nitiwiki: new module `markdown_highlight` to plug in an external highlighter

Signed-off-by: Jean Privat <jean@pryen.org>

contrib/jwrapper: prevent nitls to parse the generated files

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

nitcatalog: do not crash if the dependency poset is empty (--no-parse)

Signed-off-by: Jean Privat <jean@pryen.org>

nitcatalog: add command-line options

Signed-off-by: Jean Privat <jean@pryen.org>

nitcatalog: add a *content* section with the modules and groups

Signed-off-by: Jean Privat <jean@pryen.org>

nitiwiki: change some visibility to allow extensions

Signed-off-by: Jean Privat <jean@pryen.org>

markdown: escape the meta information of code block in html

Signed-off-by: Jean Privat <jean@pryen.org>

Merge: Rename Project to Package

Before `project.ini` are generalized (and regenerated in `c_src`) we should decide if the renaming worth it.

* a package, in OS and for some programming languages, is a coherent and distributed piece of software.
* a package, in software engineering (UML, Java), is a group of elements. It is used as namespace, and can be nested.
* a project, in IDE (eclipse, XCode) and toolchain (maven) is the organization of source of a software and how to build, test, document, etc.
* a project, in software engineering, is an attempt to produce a piece of software (and often the associated resources and artifacts like source code and people)

Thoughts?

Pull-Request: #1669
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>
Reviewed-by: Alexis Laferrière <alexis.laf@xymus.net>
Reviewed-by: Etienne M. Gagnon <egagnon@j-meg.com>

lib/markdown: promote `BlockFence::meta` to `BlockCode` to simplify clients

Signed-off-by: Jean Privat <jean@pryen.org>

lib/markdown: factorize clones `code_from_block` into `BlockCode::raw_content`

Signed-off-by: Jean Privat <jean@pryen.org>

contrib/friendz: adds music to the res folder

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

Android:audio: little fix when loading sound or music

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

Merge: Fix Opportunity behavior with unicode characters

Fix #1695. It is already deployed on http://xymus.net/opportunity/ (Take a look at http://xymus.net/opportunity/?meetup_id=B962ECD89E0AE40FF888569AE8D816B36F128E10)

Pull-Request: #1700
Reviewed-by: Jean Privat <jean@pryen.org>
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: UTF-8 Regex

This PR closes #1684

Instead of making `byte_to_char_index` public, it has been removed as it had no real reason to live.

Names are corrected and should correctly reflect their use.
Some examples of regular expressions with UTF-8 have been included.

Note however that the C-library underneath does not have UTF-8 semantics, as such, when using repetition operators on UTF-8 strings, capture the problematic characters with parentheses as in the example, or else the result will be erroneous.

Additionally, performances should be a bit better since less allocations and copy_to should be done.

Pull-Request: #1692
Reviewed-by: Jean Privat <jean@pryen.org>
Reviewed-by: Alexis Laferrière <alexis.laf@xymus.net>

manpages: nitls talks about packages, not projects

Signed-off-by: Jean Privat <jean@pryen.org>

contrib: value for nitserial's `-d` is now `package`

Signed-off-by: Jean Privat <jean@pryen.org>

tests: update sav with `package` instead of `project`

Signed-off-by: Jean Privat <jean@pryen.org>

code: rename `project[s].ini` files as `package[s].ini`

Signed-off-by: Jean Privat <jean@pryen.org>

src: mass rename project->package

Signed-off-by: Jean Privat <jean@pryen.org>

lib/nitcorn: update path to nitc to compile the examples

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

contrib/opportunity: do not force capitalize names

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

lib/text: fix to|from_percent_encoding with unicode characters

Signed-off-by: Alexis Laferrière <alexis.laf@xymus.net>

tests: Updated tests for Regex with more UTF-8 regexps

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

lib/core: Sub-regular expressions API change from Array[Match] to Array[nullable Match]

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

src/interpreter: fast_cstring was broken in interpreter

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: Better nitcc

Some improvements and bugfixes for nitcc.

* Improve code size in C and in Nit
* Produce valid Nit code even in case of R/R, S/R or S/R/R conflicts. Close #1693

Before: compiling objc_test_parser on an old laptop
* 880.58 usertime
* 3GB memory
* produced executable: 50MB (31MB stripped)

after: same grammar, better nitcc
* 337.80usertime
* 788MB memory
* produced executable: 28MB (8,8MB stripped)

Pull-Request: #1694
Reviewed-by: Alexis Laferrière <alexis.laf@xymus.net>
Reviewed-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: String Stats

Introducing a statistics module for Text variants usage which keeps trace of the accesses and allocations of Texts in a program.

It works in a similar way to `array_debug` or `hash_debug`, and prints statistics after the execution of a module.

Pull-Request: #1682
Reviewed-by: Jean Privat <jean@pryen.org>

lib/json: regenerate with new nitcc

Signed-off-by: Jean Privat <jean@pryen.org>

nitcc: collect items with conflict (now that there is always a resolution attempt)

Signed-off-by: Jean Privat <jean@pryen.org>

nitcc: factorize code of alternative reduction

Signed-off-by: Jean Privat <jean@pryen.org>

nitcc:: when removing a reduction in S/R, notify the token to not generate the reduce action

Signed-off-by: Jean Privat <jean@pryen.org>

nitcc: detect S/R even if R/R conflict as a solution is to shift in case of S/R/R

Signed-off-by: Jean Privat <jean@pryen.org>

nitcc: remove reduction even in non-dangling S/R conflict

Signed-off-by: Jean Privat <jean@pryen.org>

nitcc: remove S/R reduction after detection to avoid concurent iteration/mutation issues

Signed-off-by: Jean Privat <jean@pryen.org>

android/sensors: the example and some whitespace

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

android/audio: fix infinite recursion

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

mnit_ballz: Objects module

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

mnit_ballz: Display module

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

mnit_ballz: Collision gestion module

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

mnit_ballz: Linux module

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

mnit_ballz: Assets module

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

mnit_ballz: Walls images

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

mnit_ballz: Sounds assets for android (in res/raw)

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

mnit_ballz: game_logic module

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

mnit_ballz: Android module

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

nitcc: parser&lexer: do notgenerate top-level methods in Object

Signed-off-by: Jean Privat <jean@pryen.org>

mnit_ballz: Adds linux target to Makefile

Signed-off-by: BlackMinou <romain.chanoir@viacesi.fr>

tests: Added test for text_stat

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

lib/: Added statistics module for Text variants

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

lib/core/re: Fixed search_in for Regex, should now work with UTF-8

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

lib/core: Fixed documentation in `NativeString::byte_to_char_index_cached`

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

lib/core/text: Deferred utf8_length to native for FlatString

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

lib/core/text: Removed now useless byte_to_char_index function

Signed-off-by: Lucas Bajolet <r4pass@hotmail.com>

Merge: lib/github: fix link to github doc in comment

Pull-Request: #1691
Reviewed-by: Alexandre Terrasa <alexandre@moz-code.org>

Merge: contrib/inkscape_tools: use Tinks! art instead of Dino's to test args

Fix #1657, it was actually the test that was broken as the SVG source file is designed for the bash script that preceded inkscape_tools and not inkscape_tools itself (see examples/mnit_dino/tools/). This PR use Tinks! art instead of Dino's. It was already tested by the Tinks! project but here we use it to test the program arguments.

Pull-Request: #1690
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: objcwrapper: class methods as top-level methods, generate doc and intro `gen_nit`

Update _objcwrapper_  so it is more useful. It now supports class/top-level methods, it generates basic doc with each methods and moving the preprocessing to Nit allows to easily parse many files at once.

This PR also extracts the Nit keywords list from jwrapper into the new `gen_nit` lib. I may move up other services common to jwrapper and objcwrapper there in the future.

At this point, we parse 89 out of 121 headers from GNUStep. And I have grammar tweaks stashed away that brind it up to 101, but I'm also considering using an existing and complete grammar... The result is not very usable as it still need to reproduce the class hierarch and avoid reintroducing introduced methods between classes.

I've added a pretty print for errors to help debug the grammar, if there is an interest I could move it up to `nitcc_runtime`, here's an example output:
~~~
Syntax Error: Unexpected rpar ')'; is acceptable instead: data_type, more_type, at 70:38-70:39
in /usr/include/GNUstep/Foundation/NSArchiver.h
- (void) serializeHeaderAt: (unsigned)positionInData
                                     ^
Syntax Error: Unexpected id 'autorelease_thread_vars'; is acceptable instead: declaration, structure_core, type, type_annotation, unsigned, data_type, more_type, function_pointer, at 9:16-9:39
in /usr/include/GNUstep/Foundation/NSAutoreleasePool.h
typedef struct autorelease_thread_vars
               ^^^^^^^^^^^^^^^^^^^^^^^
~~~

Pull-Request: #1688
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: Bench strings

Update for existing benches since standard was renamed to core and a few PRs have modified the code.

Also added new variant with buffered NativeStrings.

Pull-Request: #1687
Reviewed-by: Jean Privat <jean@pryen.org>

Merge: lib/opts: accept non-conflicting parameters for OptionString and rename get_errors to errors

`OptionString` reads the next argument to be used as its parameter. However, to detect errors it did not read parameter beginning with `-`. This PR changes this behavior to only avoid parameters that are the name of a known option in the current `OptionContext`. This should report real errors and accept parameters beginning with `-`, such parameter are useful to forward options to subprograms.

Renaming `OptionContext::get_errors` to `errors` assign the short name to the most commonly used property. `errors` was previously reserved for errors local to the context only. From the Nit repo, only 2 projects correctly used `get_errors`, 8 wrongfully used `errors` and thus did not catch all errors.

Pull-Request: #1686
Reviewed-by: Jean Privat <jean@pryen.org>