<div dir="ltr"><br><div class="gmail_extra"><br><div class="gmail_quote">On Wed, Aug 3, 2016 at 6:19 PM, Emilien Macchi <span dir="ltr"><<a href="mailto:emilien@redhat.com" target="_blank">emilien@redhat.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div class=""><div class="h5">On Wed, Aug 3, 2016 at 1:33 PM, Wesley Hayutin <<a href="mailto:whayutin@redhat.com">whayutin@redhat.com</a>> wrote:<br>
><br>
><br>
> On Wed, Aug 3, 2016 at 12:51 PM, James Slagle <<a href="mailto:jslagle@redhat.com">jslagle@redhat.com</a>> wrote:<br>
>><br>
>> On Wed, Aug 03, 2016 at 11:36:57AM -0400, David Moreau Simard wrote:<br>
>> > Please hear me out.<br>
>> > TL;DR, Let's work upstream and make it awesome so that downstream can<br>
>> > be awesome.<br>
>> ><br>
>> > I've said this before but I'm going to re-iterate that I do not<br>
>> > understand why there is so much effort spent around testing TripleO<br>
>> > downstream.<br>
>> > By downstream, I mean anything that isn't in TripleO or TripleO-CI<br>
>> > proper.<br>
>> ><br>
>> > All this work should be done upstream to make TripleO and it's CI<br>
>> > super awesome and this would trickle down for free downstream.<br>
>> ><br>
>> > The RDO Trunk testing pipeline is composed of two tools, today.<br>
>> > The TripleO-Quickstart project [1] is a good example of an initiative<br>
>> > that started downstream but always had the intention of being proposed<br>
>> > upstream [2] after being "incubated" and fleshed out.<br>
>><br>
>> tripleo-quickstart was proposed to upstream TripleO as a replacement for<br>
>> the<br>
>> virtual environment setup done by instack-virt-setup. 3rd party CI would<br>
>> be<br>
>> used to gate tripleo-quickstart so that we'd be sure the virt setup was<br>
>> always<br>
>> working. That was the extent of the CI scope defined in the spec. That<br>
>> work is<br>
>> not yet completed (see work items in the spec).<br>
>><br>
>> Now it seems it is a much more all encompassing CI/automation/testing<br>
>> project<br>
>> that is competing in scope with tripleo-ci itself.<br>
><br>
><br>
> IMHO you are correct here.  There has been quite a bit of discussion about<br>
> removing the parts<br>
> of oooq that are outside of the original blueprint to replace<br>
> instack-virt-setup w/ oooq.   As usual there are many different opinions<br>
> here.  I think there are a lot of RDO guys that would prefer a lot of the<br>
> native oooq roles stay where they are,  I think that is short sighted imho.<br>
> I agree that anything outside of the blueprint be removed from oooq.  This<br>
> would hopefully allow the upstream to be more comfortable with oooq and<br>
> allow us to really start consolidating tools.<br>
><br>
> Luckily for the users that still want to use oooq as a full end-to-end<br>
> solution the 3rd party roles can be used even after tearing out these native<br>
> roles.<br>
><br>
>><br>
>><br>
>> I'm all for consolidation of these types of tools *if* there is interest.<br>
><br>
><br>
> Roll call.. is there interest?   +1 from me.<br>
><br>
>><br>
>><br>
>> However, IMO, incubating these things downstream and then trying to get<br>
>> them<br>
>> upstream or get upstream to adopt them is not ideal or a good example. The<br>
>> same<br>
>> topic came up and was pushed several times with khaleesi, and it just<br>
>> never<br>
>> happened, it was continually DOA upstream.<br>
><br>
><br>
> True, however that could be a result of the downstream perceiving barriers (<br>
> real or not ) in incubating projects in upstream openstack.<br>
><br>
>><br>
>><br>
>> I think it would be fairly difficult to get tripleo-ci to wholesale adopt<br>
>> tripleo-quickstart at this stage. The separate irc channel from #tripleo<br>
>> is not<br>
>> conducive to consolidation on tooling and direction imo.<br>
><br>
><br>
> The irc channel is easily addressed.  We do seem to generate an awful amount<br>
> of chatter though :)<br>
><br>
>><br>
>><br>
>> The scope of quickstart is actually not fully understood by myself. I've<br>
>> also<br>
>> heard from some in the upstream TripleO community as well who are confused<br>
>> by<br>
>> its direction and are facing similar difficulties using its generated bash<br>
>> scripts that they'd be facing if they were just using TripleO<br>
>> documentation<br>
>> instead.<br>
><br>
><br>
> The point of the generated bash scripts is to create rst documentation and<br>
> reusable scripts for the end user.  Since the documentation and the<br>
> generated scripts are equivalent I would expect the same errors, problems<br>
> and issues.  I see this as a good thing really.  We *want* the CI to hit the<br>
> same issues as those who are following the doc.<br>
><br>
>><br>
>><br>
>> I do think that this sort of problem lends itself easily to one off<br>
>> implementations as is quite evidenced in this thread. Everyone/group wants<br>
>> and<br>
>> needs to automate something in a different way. And imo, none of these<br>
>> tools<br>
>> are building end-user or operator facing interfaces, so they're not fully<br>
>> focused on building something that "just works for everyone". Those<br>
>> interfaces<br>
>> should be developed in TripleO user facing tooling anyway<br>
>> (tripleoclient/openstackclient/etc).<br>
>><br>
>> So, I actually think it's ok in some degree that things have been<br>
>> automated<br>
>> differently in different tools. Anecdotally, I suspect many users of<br>
>> TripleO in<br>
>> production have their own automation tools as well. And none of the<br>
>> implementations mentioned in this thread would likely meet their needs<br>
>> either.<br>
><br>
><br>
> This is true..  without a tool in the upstream that addresses ci, dev, test<br>
> use cases across the development cycle this will continue to be the case.  I<br>
> suspect even with a perfect tool, it won't ever be perfect for everyone.<br>
><br>
>><br>
>><br>
>> However, if there is a desire to focus resources on consolidated tooling<br>
>> and<br>
>> someone to drive it forward, then I definitely agree that the effort needs<br>
>> to<br>
>> start upstream with a singular plan for tripleo-ci. From what I gather,<br>
>> that<br>
>> would be some sort of alignment and reuse of tripleo-quickstart, and then<br>
>> we<br>
>> could build from there.<br>
><br>
><br>
> +1<br>
><br>
>><br>
>><br>
>> That could start as a discussion and plan within that community with some<br>
>> agreed on concensus around that plan. There was an initial thread on<br>
>> openstack-dev related to this topic but it is stalled a bit. It could be<br>
>> continually driven to resolution via specs, the tripleo meeting, email or<br>
>> irc<br>
>> discussion until a plan is formed.<br>
><br>
><br>
> +1,  I think the first step is to complete the original blueprint and move<br>
> on from there.<br>
> I think there has also been interest in having an in person meeting at<br>
> summit.<br>
><br>
> Thanks!<br>
><br>
>><br>
>><br>
>> --<br>
>> -- James Slagle<br>
>> --<br>
>><br>
>> _______________________________________________<br>
>> rdo-list mailing list<br>
>> <a href="mailto:rdo-list@redhat.com">rdo-list@redhat.com</a><br>
>> <a href="https://www.redhat.com/mailman/listinfo/rdo-list" rel="noreferrer" target="_blank">https://www.redhat.com/mailman/listinfo/rdo-list</a><br>
>><br>
>> To unsubscribe: <a href="mailto:rdo-list-unsubscribe@redhat.com">rdo-list-unsubscribe@redhat.com</a><br>
><br>
><br>
><br>
> _______________________________________________<br>
> rdo-list mailing list<br>
> <a href="mailto:rdo-list@redhat.com">rdo-list@redhat.com</a><br>
> <a href="https://www.redhat.com/mailman/listinfo/rdo-list" rel="noreferrer" target="_blank">https://www.redhat.com/mailman/listinfo/rdo-list</a><br>
><br>
> To unsubscribe: <a href="mailto:rdo-list-unsubscribe@redhat.com">rdo-list-unsubscribe@redhat.com</a><br>
<br>
</div></div>I like how the discussion goes though I have some personal (and<br>
probably shared) feeling that I would like to share here, more or less<br>
related.<br>
<br>
As a TripleO core developer, I have some frustration to see that a lot<br>
of people are involved in making TripleO Quickstart better, while we<br>
have a few people actually working on tripleo-ci tool and try to<br>
maintain upstream CI stable.<br>
As a reminder, tripleo-ci tool is currently the ONLY ONE thing that<br>
actually gates TripleO, even if we don't like the tool. It is right<br>
now, testing TripleO upstream, everything that is not tested in there<br>
will probably break one day downstream CIs.<br>
Yes we have this tooling discussion here and that's awesome, but words<br>
are words. I would like to see some real engagement to help TripleO CI<br>
to converge into something better and not only everyone working on<br>
their side.<br></blockquote><div><br></div><div>You have a valid point and reason to be frustrated.</div><div>Is the point here that everyone downstream should use tripleo.sh or that everyone should be focused on ci and testing at the tripleo level?</div><div> <br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<br>
Some examples:<br>
- TripleO Quickstart (downstream) CI has coverage for undercloud &<br>
overcloud upgrades while TripleO CI freshly has a undercloud upgrade<br>
job and used to have a overcloud (minor) upgrade job (disabled now,<br>
for some reasons related to our capacity to run jobs and also some<br>
blockers into code itself).<br>
- TripleO CI has some TripleO Heat templates that could also be re-use<br>
by TripleO Quickstart (I'm working on moving them from tripleo-ci to<br>
THT, WIP here: <a href="https://review.openstack.org/350775" rel="noreferrer" target="_blank">https://review.openstack.org/350775</a>).<br>
- TripleO CI deploys Ceph Jewel repository, TripleO Quickstart doesn't.<br>
- (...)<br></blockquote><div><br></div><div>As others have mentioned, there are at least 5-10 tools in development that are used to deploy tripleo in some CI fashion.  Calling out tripleo-quickstart alone is not quite right imho.   There are a number of tripleo devs that burn cycles on their own ci tools and maybe that is fine thing to do.</div><div><br></div><div>TripleO-Quickstart is meant to replace instack-virt-setup which it does quite well.   The only group that was actually running instack-virt-setup was the RDO CI team, upstream had taken it out of the ci system.  I think it's not unfair to say gaps have been left for other teams to fill.</div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<br>
We have been having this discussion for a while now but we're still<br>
not making much progress here, I feel like we're in statu quo.<br>
James mentioned a blueprint, I like it. We need to engage some<br>
upstream discussion about this major CI refactor, like we need with<br>
specs and then we'll decide if whether or not we need to change the<br>
tool, and how.<br></blockquote><div><br></div><div>Well, this would take some leadership imho.  We need some people that are familiar with the upstream, midstream and downstream requirements of CI.  This was addressed at the production chain meetings initially but then pretty much ignored.   The leaders responsible at the various stages of a build (upstream -> downstream ) failed to take this issue on.  Here we are today.</div><div><br></div><div>Would it be acceptable by anyone.. IF </div><div><br></div><div>tripleo-quickstart  replaced instack-virt-setup [1] and walked through the undercloud install, then handed off to tripleo.sh to deploy, upgrade, update, scale, validate etc???  </div><div><br></div><div>That these two tools *would* in fact be the the official CI tools of tripleo at the upstream, RDO, and at least parts of the downstream?</div><div><br></div><div>Would that help to ease the current frustration around CI? Emilien what do you think?</div><div><br></div><div>[1] <a href="https://review.openstack.org/#/c/276810/">https://review.openstack.org/#/c/276810/</a></div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<span class=""><font color="#888888"><br>
--<br>
Emilien Macchi<br>
</font></span></blockquote></div><br></div></div>