Готовые примеры


Примеры подготовлены на базе движка OpenGlobus, который в данном случае используется как обертка над чистым Javascript WebGL.
 
Пример для 2D случая
Пример для 3D случая (используйте клавиши W,S,A,D,Q,E и курсор для перемещения)

Вступление


В процессе работы над картографической библиотекой мне потребовался инструмент позволяющий рисовать линии разной толщины. Конечно в WebGL есть механизм рисования линий, но задавать толщину линии к сожалению нельзя. Поэтому линии приходится рисовать полигонами, лучше сказать треугольниками. В интернете можно найти несколько отличных статей, как «триангулировать» линию, какие сложности при этом возникают и как их решать. К своему сожалению, я не нашел такую статью, из которой я мог бы скопировать код и использовать в своем шейдере.

После многочисленных часов проведенных с карандашом и бумагой за рисованием алгоритма, а затем многочисленных часов отладки совсем не сложного glsl шейдера, я наконец пришел к результату, которого можно было бы достичь гораздо быстрее. Надеюсь описанный далее подход рендеринга полигональных линий в WebGL сбережет время вашей жизни, которое в противном случае ушло бы на реализацию этой задачи!
 

Рисование линии в двухмерном пространстве


В моем движке для шейдеров рисования линий в двумерном и трехмерном пространствах используется практически один и тот же код. Разница лишь в том, что для трехмерного случая добавлено проецирование трехмерных координат линии на экран, затем тот же алгоритм.

Существует расхожая практика для придания линиям толщины — представить каждый сегмент линии прямоугольником. Самое простое представление толстой линии выглядит так (рис. 1):
 
(рис. 1)

Чтобы избавиться от видимой сегментации в узловых точках, необходимо совместить смежные точки соседних сегментов, так чтобы сохранить толщину на обоих участках соседних сегментов. Для этого надо найти пересечение односторонних граней линии, сверху и снизу (рис. 2):
 

(рис. 2)
 
Однако угол между соседними сегментами, может быть настолько  острым, что точка пересечения, может уйти далеко от точки соединения этих линий (рис. 3).


(рис. 3)
 
В таком случае этот угол необходимо как-то обработать (рис. 4):
 

(рис. 4)

Я решил, заполнять такие области соответствующими треугольниками. Мне на помощь пришла последовательность GL_LINE_STRING, которая при правильном порядке, должна в случае слишком острого угла (пороговое значение проверяется в вершинном шейдере) создавать эффект аккуратно обрезанного угла (рис. 5), либо совмещать смежные координаты соседних сегментов по правилу пересечения односторонних граней (рис. 2), как раньше.


(рис. 5)

Числа возле вершин — это индексы вершин, по которым происходит отрисовка полигонов в графическом конвейере. Если угол тупой, в этом случае треугольник для обрезания сольется в бесконечно тонкую линию и станет невидимым (рис. 6).

(рис. 6)
 
 
Про себя представляем последовательность таким образом(рис. 7)


(рис. 7)
 
Вот и весь секрет. Теперь давайте посмотрим, как это рендерить. Необходимо создать буфер вершин, буфер индексов и буфер порядка, который показывает в каком направлении от текущей вершины сегмента делать утолщение, а также,  какая часть сегмента в данный момент обрабатывается вершинным шейдером, начальная или конечная. Для того, чтобы находить пересечение граней, кроме координат текущей точки, нам также необходимо знать предыдущую и следующую координаты от нее (рис. 8).


(рис. 8)
 
Итак, для каждой координаты в шейдере у нас должны быть, собственно, сама координата, предыдущая и следующая координаты, порядок точки т.е.  является ли точка началом, или концом сегмента(я обозначаю -1, 1 — это начало и -2, 2 — конец сегмента), как должна она располагаться: сверху или снизу от текущей координаты, а также толщина и цвет.

Т.к. WebGL позволяет использовать один буфер для разных атрибутов, то в случае, если элементом этого буфера является координата,  при вызове vertexAttribPointer каждому атрибуту назначается в байтах размер элемента буфера, и смещение относительно текущего элемента атрибута. Это хорошо видно, если изобразить последовательность на бумаге (рис. 9):
 

(рис 9)
 
Верхняя строчка — это индексы в массиве вершин; 8 — размер элемента (координата тип vec2) т.е. 2х4 байта; Xi, Yi — значения координат в точках А, B, C; Xp = Xa — Xb, Yp = Yа — Yb, Xn = Xc — Xb, Yn = Xc — Xb т.е. вершины указывающие направление в пограничных точках. Цветными дугами изображены связки координат (предыдущая, текущая и следующая) для каждого индекса в вершинном шейдере, где current — текущая координата связки, previous — предыдущая координата связки и next — следующая координата связки. Значение 32 байт — смещение в буфере для того, чтобы идентифицировать текущее(current) относительно предыдущего (previous) значения координат, 64 байт — смещение в буфере для идентификации следующего(next) значения. Т.к. индекс очередной координаты начинается с предыдущего (previous) значения, то для него смещение в массиве равно нулю. Последняя строчка показывает порядок каждой координаты в сегменте, 1 и -1 — это начало сегмента, 2 и -2 — соответственно, конец сегмента.
 
В коде это выглядит так:

var vb = this._verticesBuffer;
gl.bindBuffer(gl.ARRAY_BUFFER, vb);
gl.vertexAttribPointer(sha.prev._pName, vb.itemSize, gl.FLOAT, false, 8, 0);
gl.vertexAttribPointer(sha.current._pName, vb.itemSize, gl.FLOAT, false, 8, 32);
gl.vertexAttribPointer(sha.next._pName, vb.itemSize, gl.FLOAT, false, 8, 64);
 
gl.bindBuffer(gl.ARRAY_BUFFER, this._ordersBuffer);
gl.vertexAttribPointer(sha.order._pName, this._ordersBuffer.itemSize, gl.FLOAT, false, 4, 0);

Так выглядит функция, которая создает массивы вершин и порядков, где pathArr —  массив массивов координат по которым заполняются массивы для инициализации буферов outVertices — массив координат, outOrders — массив порядков и outIndexes — массив индексов:

 
Polyline2d.createLineData = function (pathArr, outVertices, outOrders, outIndexes) {
    var index = 0;
 
    outIndexes.push(0, 0);
 
    for ( var j = 0; j < pathArr.length; j++ ) {
        path = pathArr[j];
        var startIndex = index;
        var last = [path[0][0] + path[0][0] - path[1][0], path[0][1] + path[0][1] - path[1][1]];
        outVertices.push(last[0], last[1], last[0], last[1], last[0], last[1], last[0], last[1]);
        outOrders.push(1, -1, 2, -2);
 
        //На каждую вершину приходится по 4 элемента
        for ( var i = 0; i < path.length; i++ ) {
            var cur = path[i];
            outVertices.push(cur[0], cur[1], cur[0], cur[1], cur[0], cur[1], cur[0], cur[1]);
            outOrders.push(1, -1, 2, -2);
            outIndexes.push(index++, index++, index++, index++);
        }
 
        var first = [path[path.length - 1][0] + path[path.length - 1][0] - path[path.length - 2][0],  path[path.length - 1][1] + path[path.length - 1][1] - path[path.length - 2][1]];
        outVertices.push(first[0], first[1], first[0], first[1], first[0], first[1], first[0], first[1]);
        outOrders.push(1, -1, 2, -2);
        outIndexes.push(index - 1, index - 1, index - 1, index - 1);
 
        if ( j < pathArr.length - 1 ) {
            index += 8;
            outIndexes.push(index, index);
        }
    }
};

Пример:

var path = [[[-100, -50], [1, 2], [200, 15]]];
var vertices = [],
     orders = [],
     indexes = [];
Polyline2d.createLineData(path, vertices, orders, indexes);

Получим:
 
vertices: [-201, -102, -201, -102, -201, -102, -201, -102, -100, -50, -100, -50, -100, -50, -100, -50, 1, 2, 1, 2, 1, 2, 1, 2, 200, 15, 200, 15, 200, 15, 200, 15, 399, 28, 399, 28, 399, 28, 399, 28]
 
orders: [1, -1, 2, -2, 1, -1, 2, -2, 1, -1, 2, -2, 1, -1, 2, -2, 1, -1, 2, -2]
 
indexes: [0, 0, 0, 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 11, 11, 11, 11]
 
Вершинный шейдер:

attribute vec2 prev; //предыдущая координата
attribute vec2 current; //текущая координата
attribute vec2 next; //следующая координата
attribute float order; //порядок
               
uniform float thickness; //толщина
uniform vec2 viewport; //размеры экрана

//Функция проецирование на экран
vec2 proj(vec2 coordinates){
    return coordinates / viewport;
}
               
void main() {
    vec2 _next = next;
    vec2 _prev = prev;

    //Блок проверок для случаев, когда координаты точек равны
    if( prev == current ) {
        if( next == current ){
            _next = current + vec2(1.0, 0.0);
            _prev = current - next;
        } else {
            _prev = current + normalize(current - next);
        }
    }
    if( next == current ) {
        _next = current + normalize(current - _prev);
    }
                   
    vec2 sNext = _next,
            sCurrent = current,
            sPrev = _prev;

    //Направляющие от текущей точки, до следующей и предыдущей координаты
    vec2 dirNext = normalize(sNext - sCurrent);
    vec2 dirPrev = normalize(sPrev - sCurrent);
    float dotNP = dot(dirNext, dirPrev);
    
    //Нормали относительно направляющих
    vec2 normalNext = normalize(vec2(-dirNext.y, dirNext.x));
    vec2 normalPrev = normalize(vec2(dirPrev.y, -dirPrev.x));
    float d = thickness * 0.5 * sign(order);
                   
    vec2 m; //m - точка сопряжения, от которой зависит будет угол обрезанным или нет
    if( dotNP >= 0.99991 ) {
        m = sCurrent - normalPrev * d;
    } else {
        vec2 dir = normalPrev + normalNext;
  
        // Таким образом ищется пересечение односторонних граней линии (рис. 2)
        m = sCurrent + dir * d / (dirNext.x * dir.y - dirNext.y * dir.x);
        
        //Проверка на пороговое значение остроты угла
        if( dotNP > 0.5 && dot(dirNext + dirPrev, m - sCurrent) < 0.0 ) {
            float occw = order * sign(dirNext.x * dirPrev.y - dirNext.y * dirPrev.x);
            //Блок решения для правильного построения цепочки LINE_STRING
            if( occw == -1.0 ) {
                m = sCurrent + normalPrev * d;
            } else if ( occw == 1.0 ) {
                m = sCurrent + normalNext * d;
            } else if ( occw == -2.0 ) {
                m = sCurrent + normalNext * d;
            } else if ( occw == 2.0 ) {
                m = sCurrent + normalPrev * d;
            }
         
        //Проверка "внутренней" точки пересечения, чтобы она не убегала за границы сопряженных сегментов
        } else if ( distance(sCurrent, m) > min(distance(sCurrent, sNext), distance(sCurrent, sPrev)) ) {
            m = sCurrent + normalNext * d;
        }
    }
    m = proj(m);
    gl_Position = vec4(m.x, m.y, 0.0, 1.0);
}

Пару слов в заключении


Данный подход реализован для рисования треков, орбит, векторных данных.

В заключении хочу добавить несколько идей, что можно сделать с алгоритмом, чтобы улучшить качество линий. Например, можно передавать для каждой вершины цвет в атрибуте colors, тогда линия станет разноцветной. Так-же каждой вершине можно передавать ширину, тогда линия будет меняться по ширине от точки к точке, а если рассчитывать ширину в точке (в вершинном шейдере) относительно удаленности от точки наблюдения (для трехмерного случая), можно добиться эффекта, когда часть линии расположенная ближе к точке наблюдения визуально больше, чем та часть линии, которая находится на отдалении. Еще можно реализовать сглаживание (antialiasing), добавив два прохода для каждого из краев толстой линии, в которых происходит рисование тонких линий (рамка по краям) с небольшой прозрачностью относительно центральной части.
Поделиться с друзьями
-->

Комментарии (23)


  1. barnes
    18.06.2017 23:36

    а что, webGL GL_LINE_SMOOTH отсутствует?


  1. mgevlich
    18.06.2017 23:47

    Нету «SMOOTH» ни для линий, ни для полигонов. Анитиалиасинг в WebGL встроен по умолчанию(можно отключать), что-то вроде FXAA, но работает только если если рисовать напрямую в канвас. В моих примерах рендер работает сначала в фреймбуфер, потом готовую картинку отправляет уже на канвас(удобно для постобработки). В этом случае встроенный антиалиасинг не работает.


    1. barnes
      19.06.2017 00:45

      Ага, я понял. Но glLineWidth то там есть… Можно попробовать задать толщину и отрисовать с альфаблендингом.


  1. SHVV
    19.06.2017 00:18
    +1

    Тоже столкнулись с этой проблемой. Только вот причина, по которой толщина линий не поддерживается, на сколько я понимаю, гораздо интереснее. Формально, в WebGL она вроде как есть. Но большинство браузеров под Win эмулируют WebGL, используя DirectX через прокладку ANGLE. И где-то по пути эта толщина теряется. Если принудительно переключить браузер на работу с OpenGL вместо DirectX, то всё становится нормально. Ну и в Linux браузерах тоже вроде как всё хорошо, так как там нет DirectX :-).

    PS: Острые углы я срезал немного по-другому:

    как-то так


    1. mgevlich
      19.06.2017 09:06

      Отличный вариант! Этот вариант мне тоже кажется более симпатичным, и даже скорее всего правильнее, потому что удаление от центральной точки становится равномерным.


  1. DrZlodberg
    19.06.2017 08:14

    Есть более простой вариант, правда не уверен, что более производительный: в месте стыков и по краям рисовать круглую точку диаметром равным толщине линии.


    1. FadeToBlack
      19.06.2017 11:46

      Я делал через круглые точки для SolveSpace: https://github.com/solvespace/solvespace/blob/master/src/render/gl3shader.cpp
      А еще там есть прикольная система для пунктира и шейдерный фейковый антиалиазинг.


      1. mgevlich
        19.06.2017 13:02

        Если не секрет, расскажите идею эффекта штрихования?

        П.С.
        У меня есть идея, сделать через текстурную маску, и с помощью маски задавать любой стиль штрихования.


        1. FadeToBlack
          20.06.2017 08:47

          Да, идея именно такая. Только там создается не маска, а distance-map, которая позволяет получить потрясающую точность. Еще там есть хак, чтобы запаковать float в цвет. Про distance map можно почитать здесь http://www.valvesoftware.com/publications/2007/SIGGRAPH2007_AlphaTestedMagnification.pdf



    1. mgevlich
      19.06.2017 13:03
      +1

      С круглыми точками в углах, боюсь могут возникнуть проблемы с полупрозрачными линиями.


      1. FadeToBlack
        20.06.2017 08:51

        Да, проблемы будут. Но для САПР прозрачности линий не требуется. К тому же круглые точки выглядят лучше для 3д полилиний.


  1. Keyten
    19.06.2017 18:40

    О, классно. Как раз бодаюсь с этой темой.

    Пока что ещё пришла немного сумасшедшая мысль нарисовать обычный прямоугольник, а линию рисовать во фрагментном шейдере.


  1. clamaw
    21.06.2017 16:54

    2D пример начинает плохо работать для толстых линий:



    SVG (который ИМХО в данной задаче можно считать своего рода ground truth) не накапливает прозрачность на самопересечениях, что, кажется правильнее. Но как решить это без стенсила, я пока не знаю.


    1. mgevlich
      21.06.2017 21:13

      Линию можно представить как нарисованную кисточкой, а можно представить сложенной полоской из бумаги(или полиэтиленового пакета). Мне больше нравится вариант с накапливаемой прозрачностью.

      Вы правильно указали на ошибку с обрезанным треугольником внутри сложенных отрезков, я не решил эту проблему. Этот момент легко находится в шейдере, но я посчитал, что такие случаи бывают редко и решил оставить до поры до времени…


    1. FadeToBlack
      22.06.2017 08:18

      мб alpha-to-coverage?


      1. clamaw
        23.06.2017 15:48

        Непонятно, как оно тут поможет. Плюс, это надо включить MSAA, который в WebGL доступен только для дефолтного фреймбуфера.


        1. FadeToBlack
          24.06.2017 10:08

          ну здесь ручное управление масками… плохо совместимо с антиалиазингом.


          1. clamaw
            26.06.2017 18:19

            Я не очень понял ваш комментарий. Но если я правильно понял спеку, вызов glEnable(GL_SAMPLE_ALPHA_TO_COVERAGE) не возымеет никакого эффекта если для буфера не включен MSAA. Кроме того, я все равно не очень понял, даже если он у нас включен, как alpha-to-coverage поможет решить проблему на самопересечениях. Судя по спеке, результат интерпретации такой маски, вообще говоря, непредсказуем (а точнее, зависит от оборудования, на котором работает программа). Или я чего-то не понимаю?


            1. FadeToBlack
              27.06.2017 10:14

              Да, наверное я зря здесь написал про alpha-to-coverage, опыта разработки чего-то подобного у меня нет. Но я предположил, что есть вручную задавать маски для пикселя, для одинаковых масок наложение будет давать тот же результат, т.е. цвет не будет удваиваться. Если использовать разные маски для разных материалов, можно создать такой эффект, который требуется. Но это слишком сложно и все равно, что из пушки по воробьям. Тут важно понять, говорим ли мы о 2d или о 3d. С 2d очень просто все разруливается, про 3d надо что-то изобретать.


    1. FadeToBlack
      22.06.2017 10:00

      хотя тут достаточно элементарного depth-test режима LESS вместо LEQUAL


      1. clamaw
        23.06.2017 15:49

        Не всегда, может быть ситуация, когда разные линии (то есть, одна должна просвечивать через другую) могут иметь одинаковую Z-координату.


        1. FadeToBlack
          24.06.2017 10:07

          в этом случае для разных линий можно устанавливать разный POLYGON_OFFSET. Если мы говорим о 2d режиме, то и вовсе можно пользоваться z координатой для сортировки линий по порядку отрисовки.